中企动力 > 商学院 > 环保数据采集
  • ?

    生态修复的大数据样本 环保大数据新的机会在哪

    乔三毒

    展开

    举一个两年前的例子。

    2015年,环保部门世界环境日开通了“12369环保举报”微信公众号,通过后台数据可以发现公众关心什么,环保部门需要解决什么,从而判断环保问题的规律性和趋势性,为政府决策提供了依据。

    人们唏嘘这一小小的举动,居然能倒逼环保部门执法方式转型,环境执法更精准快捷,真正朝着环境共治的目标推进。

    公众参与举报只是智慧环保在信息公开和公众参与中的一个缩影。两年过去,各地开始探索更多环境大数据的创新应用方式,那么,成功的模式有哪些,哪些大数据应用更值得一提?

    在“互联网+”时代背景下,大数据最大的魅力是智慧,数据只有通过开放、挖掘、处理、分析才能产生价值,而后变成资本,这是一种面向环境保护与管理决策的应用服务需要。

    今年初,临汾市二氧化硫爆表引发全社会关注,据官方数据,1月4日-14日,临汾市6个大气质量监测点之一的南机场监测点多次出现二氧化硫小时浓度“破千”的状况,这件事本身就是数据的不对称、不透明给政务管理造成了盲区。

    在环境大数据应用方面,如何在政府政务监管和产业发展上找到平衡是值得探讨的问题。

    现阶段,大数据至少在解决信息对称性方面已经得到很好的验证。比如,甘肃银川市所采用的“智慧环保”模式,就是利用环境大数据在城市生态环境建设方面做出的探索。“智慧环保”在银川部署了众多环境实时数据采集仪,实时传输至银智慧环保系统内,任何蛛丝马迹都逃不过智慧环保监测点的高清监控,废水排口、废气排口情况清晰可见,企业如果违规超排,当即就会被全程记录。这些信息不仅能够为环保部门提供海量的监测数据,并且数据成功地可视化做到了使普通老百姓人在家中,足不出户就能够看到与自己息息相关的环境信息。环境大数据,为人们的生产生活提供了极大的便利,也为政府提供了有效的信息支持。

    可见,大量数据的采集能将企业各个方面的信息都融汇到数据库中并进行科学的分析和挖掘。在进行信息分析的同时,通过研究各类别数据的相互关联找对关系,建立相关性模型,在管理中实行预测、防范与应用。

    与银川的“智慧环保”模式类似的是,忻州市环保局采用北京名赫环保大数据平台的环境监测云服务,一次性覆盖14个区县,打通了企业和政府之间的数据通道,企业向平台开放了治理数据,平台会通过数据分析,得出治理设施的运营效率,运营成本等,从而折射出治理企业的技术水平,进而作为排污企业筛选治理企业的决策依据,这样就在治理企业和排污企业之间构建了一个大数据平台,如果把这个通道打通,从政府监管的角度来讲,就形成了信息的一致性和对称性。

    环保部在2016年3月7号下发的《关于生态环境大数据建设总体方案的通知》中,提到生态环境大数据总体架构为“一个机制、两套体系、三个平台”,三个平台即大数据环保云平台、大数据管理平台和大数据应用平台,银川和忻州可以算是大数据管理平台和大数据环保云平台的实践样本。

    近年来,模拟自然,包括地形、地貌、水文、生态等,以此构建人与自然和谐,促进生态修复过程开始被得到尝试和应用。该方法正是基于生态大数据的决策支持系统,实现了矿山修复、水源地的保护、农业景观和森林生态系统的修复与管理、湿地、河口、大坝等生态工程。

    内蒙古蒙草生态将环境大数据率先使用在草原生态修复中。通过发现、采集、繁育、保存、应用,采集某区域多年以来的水土变化,气候因素,生物状况等多种关键性因素,将这些信息集中至信息库中,运用数据储备进行分析,建立了“草原生态产业大数据平台”,从而获得有效合理的生态修复方案。

    通过蒙草生态的大数据平台,点开任何一个地方,该地是什么样的土壤环境,具备什么样的土壤生物环境,年降雨量多少,气候如何,适合什么样的植物,一目了然。

    生态大数据在帮助减少能源与物质的消耗及污染物的排放方面同样不可小觑。

    蒙草生态通过大数据的管理模式,在探索生态修复的同时,也探索了一条减少资源浪费的方法论,比如:A树种分别选种在B地区和C地区,B地区的年降雨量在200毫升,C地区年降雨量100毫升,那么对B地区的A树种实施灌溉时,就不会出现灌溉量超过C地区的管理盲区,让生态修复的管理更更具科学性和准确性。

    如此,利用大数据平台修复草原生态,为整个行业利用大数据进行生态修复带来可借鉴的样本。

    未来,在生态修复领域,必将建立更多的新的商业模式。

    大数据时代,需要用新思维去看待信息公开和公众参与中遇到的问题,因为大数据催生的,不只是一个企业,而是一种商业模式。

    在面临诸多环境问题的当下社会,大数据与的结合是以一种创新姿态与传统领域相结合,产生出多元化采集,主题化汇聚和知识化应用的大数据环境治理体系。

    对于白洋淀的生态修复工作,一些业内人士认为重点是生物多样性保护,实行生态环境重建试点,提高生物丰度。让白洋淀回归本来的模样,就要归还给它本来的生物种类和数量,而这样的种类,谁说可以脱离大数据而存在?

    太湖蓝藻爆发十年,投入上千亿,却把急性病治成慢性病,如果没有整个区域环境的人口、企业、排污、纳污等精准的污染源分析和大数据联动监测,谁说不会是头疼医头脚疼医脚的治标不治本呢?

    生态是个牵一发而动全身的产业,如果环保大数据也能像银行的货币一样,为环境治理和生态修复提供最符合生态规律的数据样本,建立生态大数据银行,智能的不只是产业,还有环境。

    但是数据资源的不足是当前产业不得不面对的问题,生态环境大数据建设企业较少,目前专业的第三方服务公司极其有限,生态大数据的收集、整合、建设、应用能力都存在不足。发展新型环保产业,建设生态环境大数据是一项长期投资,而培育和扶持一批大数据服务企业,离不开政策的推动,更离不开资金和技术的支持。

    新的机会随处可见,大环保产业刚刚起步,大数据在寻找机会,投资环保大数据未必不是机会。

  • ?

    环保大数据构建智慧环境管理体系

    巴斯蒂亚

    展开

    2017年8月16-18日,2017CEPEE第十一届广州国际环保展览会在中国进出口商品交易会展览馆盛大举办。本次展览会由中国环境科学学会联合广东省相关行业协会共同主办,汇聚国内外各界人士、知名企业就生态环境治理展开深入交流。广东粤数大数据有限公司受邀参展,并发表智慧环境综合治理解决方案的主题演讲。

    国际环保展览会盛大开幕

    我国高度重视大数据在推进生态环境建设中的地位和作用。2016年印发的《生态环境大数据建设总体方案》和《“十三五”生态环境保护规划》中明确提出,充分运用大数据、云计算等现代信息技术手段,加快生态环境大数据平台建设,建立信息公开和共享平台,启动生态环境大数据建设试点,全面提高生态环境保护综合决策、监管治理和公共服务水平。这两部法规的颁布使生态环境大数据建设驶入了发展的快车道。

    粤数展位前人潮涌动

    粤数大数据一直以来致力于通过大数据切实解决环境问题,利用大数据先进的采集、挖掘、分析技术和手段,基于对事实数据的累积,为环保部门提供真实有效的数据支撑,以推进环境治理体系提升和治理现代化。

    粤数的控股集团——广业集团,是经广东省人民政府批准设立的国有全资企业,是广东绿色发展最具影响力企业。广业集团始终专注于绿色环保领域,形成了绿色环保产业“两大门类七大领域”的业务格局,突出发展环境治理与清洁能源、循环经济与环保科技主业,并积极培育“云平台与大数据应用”业务。广业集团作为广东省最大的环境综合治理供应商,为粤数在环保领域的发展提供了强大的行业支撑和业务保障。

    路博士发表演讲

    在“2017大数据智慧环卫高峰论坛”上,粤数产品创新中心总监路淑斌表示,推动环境数据资源全面整合共享,探索环境大数据建设,离不开产业链条各环节中企业的环保行为。但目前存在政府对污染源的监控能力不足、监控手段不科学等问题,亟需搭建公共信息共享数据库,打通数据资源,让数据互联互通。粤数自主研发的大数据融合平台,包含应用层、服务层、智慧层、物联层、感知层等四大架构,对基础数据进行集中管理,及时有效地采集各污染源和环境监测的数据,形成风险源监控、污染源监控、空气质量监测、水质监测、应急环境监测等监控平台,提高平台的预测预警功能,及时掌握排污企业和环境监测的异常情况。通过平台的大数据智能分析,为节能减排、政府招商引资以及产业升级转型等决策提供数据支持,构建智慧环境管理体系。

    生态环境大数据建设已经成为维持城市生态系统平稳健康发展的重要举措。把大数据引入政府治理,是管理现代化的必然要求,也是提高生态环境治理能力现代化的新途径。粤数大数据基于大数据和云计算的智慧环保解决方案,有效地实现了环境监控设备的统一管理,通过信用信息多部门共享促进企业转型升级、进一步优化产业结构,推动绿色经济发展,打造“美丽中国·魅力羊城”城市新形象。

  • ?

    省安监总局安全数据采集管理中心解决方案

    白晴

    展开

    第一部分系统目标

    省安全生产监督管理局安全数据采集管理中心的总体建设目标,就是建设一个对安监网安全巡查的数据进行统一采集、存储、管理的中心平台,实现能够使县市乃至省级安监局相关单位在安监专网网络范围内通过此系统将安全巡查过程中智能安全帽所记录巡查的各类数据(视频、音频和照片)上传到系统平台,进行统一存储管理,便于各县市省级单位同事及领导登录系统后,对上传的各类数据(视频、音频和相片)进行检索、查看、浏览、下载,满足对安监网巡查工作更细致的情况追踪和监控,实现更高效的业务转化。

    系统主要特点

    1、拥有自主研发的智能安全帽,使用该安全帽可实现在巡查工作过程中的全自动巡查记录或重点记录,在不影响巡查工作的各项操作下,实现静默且稳定的图像资料记录和保存,实现巡查工作的忠实记录和保存,以便于巡查工作更好的保存和追踪。

    2、拥有自主研发的智能安全帽数据采集柜,具备智能的门锁技术,实现安全帽和储存柜的互相绑定,安全帽配合采集柜实现设备保存、设备充电、设备数据自动采集三合一功能,大大简化使用流程和提升使用便利性。

    3、采集柜本机具备超大容量存储空间的同时,可实现手动或自动上传备份数据或者传输数据至制定数据位置,实现数据的分布存储或集中存储的不同需求。可根据条件设置自动化执行任务,实现自动定时或针对性备份或传输特定数据,同时不同数据支持互相迁移。

    4、灵活多样、满足多途径的数据检索、统计和再利用能力,通过通用浏览器即可方便访问数据管理平台,实现远程的数据检索、预览、下载或备份。

    5、完善的日志管理和追踪功能,用户在系统中的各项操作均会生成日志记录,方便层层溯源追踪把控。

    6、完善的用户层级和权限管理,上百项细致入微的用户自定义权限内容,精确把控不同用户可在系统中获取的数据及操作权限,方便不同的使用和管理需求。

    7、支持网状模型连接扩展,可无限扩展架构层级,无损添加新节点,满足不断扩张成长的业务需求。

    通过该系统平台的建设,帮助省安监局各地单位建立远程的巡查数据管理入口,实现巡查业务更加精确高效安全的同时,将各地区的数据区块汇总接入,最终建立起属于省安监局单位独有的云端巡查数据管理中心。

    第二部分系统逻辑结构

    该方案可分为两种形成,每种形式各有优势和缺点,可以根据实际的需求情况,采用不同的搭建形式,满足不同的建设目标。、

    一、分布存储独立架构

    该架构下系统包含:一级应用服务器一台运行数据管理中心平台软件;一级数据服务器一台用于备份特殊重要数据满足少量独立存储需求;二级分布式数据采集柜多台。

    通过多台数据采集柜互联构成采集柜网状结构,经由网络统一直接连接到一级应用服务器托管,实现应用服务器对所有网络内的数据采集柜的远程连接、访问和管理,同时一级数据服务器接入应用服务器,作为数据管理平台的备份数据存储中心,常规数据全部储存在区块中各自独立的数据采集柜内,网络内电脑通过浏览器开启数据管理中心后台登陆,即可实现远程的数据访问与管理,并根据应用服务器内的权限层级设定,实现不同的功能和效果。

    结构拓扑图见(图1)

    优点:

    该模式下搭建平台更为简单快速,由于单层结构设计,可以大大免去网络层级的部署和规划,同时简化接入流程,提供快速更高效的平台建设和数据传输流程。数据采集柜接入网络,连接应用服务器即可实现托管。建设简单,相对建设成本较低,满足快速搭建小型网络平台或初期建立平台雏形,后续可方便的升级变换架构,升级成中心存储集群式。

    缺点:

    由于采用较为简单的单层结构,数据全部分布存储于数据采集柜,数据存储较为分散,访问并管理的效率较低,同时由于分布存储的原因,只安排了较小的数据服务器满足低比例的特殊备份需求,大量数据分散存储于不同地区采集柜中,数据产生丢失或者无法访问的风险较高,需要稳定的供电和网络维持基本的连接。同时分布式存储导致的数据访问并发情况较多,对网络的承载压力较大,传输链路较多跳转,导致效率较低。

    二、中心存储集群架构

    该架构下系统包含:一级应用服务器一台运行数据管理中心平台软件;一级数据服务器多台或多级数据服务器多台用于备份特定区块数据满足集群数据存储需求;二级分布式数据采集柜多台。

    通过多台数据采集柜互联构成采集柜网状结构,经由网络连接到区块内独立数据服务器,区块设立可依据地区或者业务规划来定,多区块数据服务器最终通过网络统一连接中心应用服务器,实现应用服务器对所有网络内的数据采集柜和数据服务器都能实现远程连接、访问和管理,设定不同的权限层级可满足区块内数据访问的相对独立和区块间的数据仍能通信的需求,同时通过中心应用服务器设定自动化自定义条件任务,自动执行数据从数据采集柜汇总备份到区块数据服务器进行多层级分布式存储,最终实现数据的多重安全备份,高效汇总和自动化的分配目标。

    结构拓扑图见(图2)

    优点:

    该架构下搭建而成的平台具备多区块分布存储备份,数据永不丢失,安全可靠,同时基于分布式存储技术接入网络后可实现更高效的可访问性和更稳定的数据传输。基于自动化的自定义任务可以在网络闲时自动静默汇总分散于采集柜中的零散数据集中传输至区块内的专用数据服务器进行存储,同时借由数据服务器的高速处理能力,实现更高效的远程访问、预览、下载、传输及检索操作。架构内采集工作、数据存储、中心访问分工明确,互不干扰运行更加稳定,同时可方便的无限拓展数据服务器数量,满足长远的平台成长需求。

    缺点:

    该方案搭建需要配合规划区块,搭建相对独立的数据服务器,同时由于多层级的架构加大了初期建设的工程难度和成本,基于分布式存储的形态需要安排更多的服务器安装空间。

    第三部分系统运行环境

    系统分为采集端CS程序和浏览器BS管理程序两部分。

    系统采集程序运行在windows环境下,支持各种版本的windows系统,数据库支持SQL Server系列的数据库或其它版本的关系型数据库。

    对安全帽采集数据的管理后台使用浏览器,支持目前主流的各种版本的浏览器。

    第四部分产品介绍

    智能安全帽

    l高清宽动态摄像头,支持高清录像

    l开机自动录像,免去繁琐操作

    l机身一体化设计,镜头及照明灯内置,产品更美观

    l高强度复合材料帽身,提供专业的安全帽应有的防护功能

    l简约的功能操作设计,一键开机,一键录像,一键亮灯

    l支持大容量最高128GB存储扩展,满足更持久的录像需求

    数据采集柜

    l高强度框架式机身,抗冲击防腐蚀外壳

    l安全内部排布设计,满足长时间连续稳定运行需求

    l内置键盘鼠标,屏幕支持触摸,多种操作方面满足不同场景需求

    l多设备独立存储仓设计,方便单独存储安全帽以及其他装备。

    l智能电子独立门锁设计,可实现独立开启每个存储仓位。

    l支持多设备同时接入,满足大批量安全帽充电需求同时实现自动化数据采集上传

    l支持网络化运行,可单机使用也可接入网络后交由统一服务器托管,实现多台采集柜互联构建采集网络。

    l主柜6口,副柜10口,最多一主两副一共26口,但实际可用最多22口。

    数据管理平台(服务器)

    lBS轻量化设计架构,通用浏览器即可访问,满足更好的兼容性

    l支持多条件数据检索,满足快速书筛选需求

    l支持多层级网络架构,实现不同的平台建设需求

    l支持用户权限管理,根据实际需求定义用户不同权限实现不同管控

    l远程预览,远程下载,可通过网络随时访问数据并进行管理

    l高度自定义的自动化任务系统,设定周期,时间,人员,单位等条件实现自动化数据备份操作。

    第五部分:产品功能说明

    一、产品示意图

  • ?

    2018年最值得推荐的6款大数据采集工具

    侯觅双

    展开

    数据肯定是无价的。但分析数据并非易事,因为结果越准确,成本就越高。鉴于数据急剧增长,需要一个过程来提供有意义的信息,最终变成实用的洞察力。

    数据挖掘是指这个过程:在庞大数据集当中发现模式,将它转换成有效的信息。该技术利用特定的算法、统计分析、人工智能和数据库系统,从庞大数据集中提取信息,并转换成易于理解的形式。本文介绍了广泛用于大数据行业的6种综合数据挖掘工具。

    1. Rapid Miner

    Rapid Miner是一个数据科学软件平台,为数据准备、机器学习、深度学习、文本挖掘和预测分析提供一种集成环境。它是领先的数据挖掘开源系统之一。

    该程序完全用Java编程语言编写。该程序提供了一个选项,以便用户试用大量可任意嵌套的操作符,这些操作符在XML文件中有详细说明,可由Rapid Miner的图形用户界面来构建。

    2. Oracle Data Mining

    它是Oracle高级分析数据库的代表。市场领先的公司用它最大限度地发掘数据的潜力,做出准确的预测。该系统配合强大的数据算法,锁定最佳客户。

    此外,它可识别异常情况和交叉销售机会,让用户能够根据需要运用不同的预测模型。此外,它以所需的方式定制客户画像。

    3. IBM SPSS Modeler

    说到大规模项目,IBM SPSS Modeler最适合。在这个建模器中,文本分析及其最先进的可视化界面极具价值。它有助于生成数据挖掘算法,基本上不需要编程。

    它可广泛用于异常检测、贝叶斯网络、CARMA、Cox回归以及使用多层感知器和反向传播学习的基本神经网络。

    4. KNIME

    Konstanz Information Miner是一个开源数据分析平台。你可以迅速在其中部署、扩展和熟悉数据。在商业智能界,KNIME号称是有助于为毫无经验的用户提供预测智能的平台。

    此外,数据驱动的创新系统有助于发掘数据潜力。此外,它包括数千个模块和随时可用的示例以及一大批集成的工具和算法。

    5. Python

    Python是一种免费的开源语言,因易用性常常与R相提并论。与R不同,Python学起来往往很容易上手,易于使用。许多用户发现可以在几分钟内开始构建数据,并进行极其复杂的亲和度分析。

    只要你熟悉变量、数据类型、函数、条件语句和循环等基本编程概念,最常见的业务用例数据可视化就很简单。

    6.火车采集器

    火车采集器由合肥乐维信息技术有限公司开发,是一款专业的网络数据采集/信息挖掘处理软件,通过灵活的配置,可以很轻松迅速地从网页上抓取结构化的文本、图片、文件等资源信息,可编辑筛选处理后选择发布到网站后台,各类文件或其他数据库系统中。

  • ?

    36氪首发 | 做环保、消防物联网平台,「知路科技」获数千万元A轮融资

    太子

    展开

    传统产业的物联网升级已成为趋势,基于物联网可以自动、实时采集大量原本无法获取,或需要人工定期采集的数据,用于实时监测、完成特定任务等。例如在消防设备上布设传感,替代人工定期检测等。

    同时,物联网升级也存在大量问题。底层终端接入,接口协议多样,工作环境差异大,费时费力;通信层面的带宽、可靠性、延时问题;行业需求复杂多样,定制化程度高等。

    “应该在什么领域,怎么提供物联网升级服务,才能产生较高的收益?”

    —— 这是众多服务提供商的普遍困惑。

    物联网平台服务商知路科技,通过5年十余个领域的物联网升级探索,已形成了较清晰的模式:基于自研通用物联网操作系统平台,以环保、消防为重点领域,快速、低成本提供从终端接入、通信到云端服务的物联网平台方案。

    近日36氪获悉,知路科技已获得君盛投资数千万元A轮投资。此前,知路科技还获得过中科创星、宜华资本、深圳松禾彩梦想等多家机构的数千万元投资。

    下面具体看看知路科技是怎么做的。

    知路科技于2014年初始创于华为研发班底,核心技术骨干均具备近20年的研发技术经验。

    成立前三年,知路在医疗、能源、工业制造、交通、教育等领域,承接了大量物联网方案项目,最终沉淀研发出MIA智能物联网操作系统平台。

    简单说,MIA平台就是物联网解决方案的“Android”系统,可高效实现各类物联网感知层的前端设备、传感器的连接控制,进而实现终端联动、自组网、前端数据解析等能力。而这些能力是物联网解决方案每次都会涉及的,因而可以减少大量重复开发工作。

    有了MIA平台,还得找准落地场景。

    知路又花了一年时间探索,结合此前3年的跨行业项目经验,于2017年下半年,确定了环保和消防这两大核心落地领域。

    智慧环保。基于MIA平台,知路开发出大气、扬尘、污水、油烟、园区、各类自然水体的环保在线监测平台。功能上,能够为政府、国企、央企客户,提供监测数据采集、分析、污染预测、成因分析、决策建议,和效果检查的闭环业务流,而非仅仅做BI展示。

    智慧消防。知路采取了和行业龙头深度捆绑合作的模式。依托合作伙伴的产业资源,重点提供智慧消防平台的研发技术支持,以支持合作伙伴智慧消防项目落地,逐步过渡到在消防产业内,提供平台数据服务的商业模式。

    知路是如何选择落地行业的呢?创始人梁晓东总结了4点:

    刚需。例如环保行业,政府为了经济结构调整、可持续发展,在大力推动智慧环保产业。客户毛利率高。决定了客户的付费能力。有较一致标准。决定了可复制性,例如环保行业有较标准的国标、部标,解决方案不会差异太大。一定壁垒。包括一定的技术壁垒和行业knowhow壁垒,能积累自己的先发优势。盈利模式上,知路目前以硬件产品、方案定制开发、平台服务费为主。

    梁晓东告诉36氪,知路今年已经从过去的核心平台研发和广泛尝试,进入到明确的场景落地阶段,明年整体营收会有大幅增长,预计可达5000万元。

    目前,知路已开启了新一轮融资。

    君盛投资高级投资经理朱志豪表示:“物联网在技术层面涉及到硬件、软件、通信、云的集成和融合,且各行业的需求跨度极大,我们会着重考察几个方面:第一,团队构成、技术经验及其后续的战略打法。路科技核心团队大部分来自华为,已经具备了to运营商级别的系统搭建能力。第二,找到对物联网有刚需且有支付能力的行业进行落地,有实际落地的项目。知路科技已经在多个行业有标杆项目落地。

    ——————

    我是36氪记者陈绍元,关注物联网、AI、科技,交流或寻求报道(不收费)加微信:963757163,请注明公司、职位、姓名,否则不加。

  • ?

    马占军:生态环境数据质量、数据共享难是智慧环保面临的两大难题

    德里克

    展开

    新华网北京6月8日电(刘佳)2016年3月,《生态环境大数据建设总体方案》印发,明确我国将通过大数据建设,加强环境保护工作。随着互联网和高端技术的相结合,生态环境的治理和改善将更需要生态环境大数据的支持。

    7日,在第十六届中国国际环保展览会上,深圳市博安达信息技术股份有限公司(下称“博安达信息”)副总裁马占军向新华网记者表示随着信息技术地快速发展,我国智慧环保发展迅速,能快速检测、监察环境质量;同时也面临生态环境大数据质量不优、数据共享难等难题。

    新华网:请您介绍一下公司的概况。

    马占军:我们公司自成立以来主要是专注于智慧环保和生态环境大数据相关的一些软件以及技术咨询服务。主要涉及环境检测、环境监察和环境决策业务三个方面。

    新华网:您提到的智慧环保、生态环境大数据目前国内是什么样的发展现状?

    马占军:这些年国内智慧环保的发展主要有三个变化。一是数据采集更多;早些年国内叫数字环保,后来叫环保物联网,现在叫生态环境大数据。现在跟以往的变化在于信息技术的快速发展,包括海量存储设备,高性能计算设备,网络带宽,前端采集设备包括现在的微型站也很火,前端的感知设备也越来越便宜,成本越来越低。这样从数据采集方面我们有了更多的数据。

    二是数据比较多元;原来做数字环保的时候,拿的数据主要是环保部门采集的,人工记录的,或者说设备自动采集的。现在我们也从气象部门、水利部门、国土部门、农业部门等其它部门拿数据。现在的生态环境已经是大环境的概念,不再是狭义的环境保护,生态环境跟原来的环境保护有变化,他是更大范围的生态圈,要有更多的部门配合。

    三是数据更好地服务了这些年我们在数据的挖掘,人工智能方面的技术也在快速的提升,推动了智慧环保发展。这么多数据在采集分析后更好地服务于环境管理决策的确定。

    新华网:现在智慧环保行业面临的困难是什么?

    马占军:在我看来目前智慧环保面临的主要问题是环境大数据这块。第一个是数据质量的问题。

    第二个是数据共享难的问题。我刚才讲生态环境大数据某种意义上是真正的大环境范畴,也就是除了环保,还有农业、气象、国土,众多行业。举个例子我们在大气污染方面,现在做的除了调查工业园的数据之外,我们还会去拿工地的扬尘,有多少工地在建设,另外我们会去拿汽车的数据,在这个时候有多少车经过,是卡车,是大车还是小车,是柴油车还是汽油车,我们针对它这个城市都会采集这些数据,这些数据我们去经过一系列沟通可以拿到这个数据,给你一段录像,但我们更希望这个数据可以共享。如果这个数据可以共享,这就是一个比较人性化的提示。

    新华网:您作为环境企业的代表怎么理解6月5日世界环境日生态环境部提出“美丽中国,我是行动者”的主题?

    马占军:我作为企业的代表,既是企业的代表又是个人的代表,回到家里是一个普通公民,也有责任有义务。这里面保护环境应该人人有责,比如不经常开车,不乱扔垃圾,不随便倒废水。每个人都是参与者也是受益者。

  • ?

    工厂排放污染源在线无线监测应用

    往事

    展开

    方案需求

    工业污染源远程无线监测是了解和掌握区域排污状况和排污的情况,其监测结果开展环境保护工作的依据。只有加强对污染源在线监测监控设备的监管,提高环境管理科学化、信息化水平,才能确保全市自动监控设备的正常、稳定运行。通过对污染产生、治理、排放过程中重要过程参数的采集,建立其与污染源排放在线监测数据的关联关系,判断污染物排放数据的合理性,为总量核算、排污监察、排污收费提供技术支持。现场设备可以通过有线或无线通讯方式实现监测数据的远程传输,实现各级主管部门对污染治理设施的远程实时监测、监控,历史数据提取及强制反控等操作。

    通过对重点污染源排放状态的自动监控,及时、准确、全面地反映环境质量现状,为环境管理、污染源控制、环境规划、环境评价提供客观的依据,增强企业的守法自觉性,提高环保现场执法的现代化水平,逐步达到提高环境质量的最终目的。

    技术部署

    工业污染源远程无线监测是由监控站点传感器、数据传输、污染源监控中心、污染源在线远程监管系统等组成。采用了计算机、通讯和云计算领域技术,从而搭建污染源在线自动监控监测系统平台。

    工业污染源远程无线监测分为现场层、网络传输层和中心监控层三个层次。现场层包括数据采集传输仪和各种监测、采样设备。完成数据采集、存储、发送及命令接收等方面的功能。

    污染源排放在线监测传感器采集烟尘(烟尘、SO2、NOx)、污水(COD、流量、TOC、总磷、氨氮)、污染源噪声等数据,欣仰邦DTU数传终端通过2G/3G/4G网络将数据传输到云服务器,数传终端数据采集传输仪以RS485/RS232接口和各种监测、采样设备。完成数据采集、存储、发送及命令接收等方面的功能。并与服务器之间交换数据、指令下达,以实现对现场层的集中远程监控。

    方案优点

    l 数传终端:实用性强、覆盖面广、灵活性好的环保数据采集传输;

    l 多重网络:LoRa/NB-IoT/2G/3G/4G无线传输为环境监测提供了很好的联网解决方案;

    l 接口兼容:标准RS232/485 接口,支持Modbus 通信协议及非标准通讯协议的开发

    l 监控功能:在监控中心可以通过网络实时监测各站点的实时数据;

    l 报警功能:任何现场的异常报警信号能在监控中心集中进行声光、画面报警;

    l 数据储存:按规定的数据库格式保存现场原始数据、报警数据和操作记录的数据;

    l 数据发布:中心数据库数据能实现数据共享,对其它系统具有开放性。

  • ?

    大数据能为穹顶之下的环保做什么?

    海莲

    展开

    《穹顶之下》令人印象深刻的一点,是keynote(幻灯片)。通过可视化报表,柴静团队向观众传递雾霾问题的严峻性、雾霾的成因等等。Keynote在观众中的接受程度带来的一个启示,即大数据对环保具有巨大价值。

    《穹顶之下》图表的原生数据哪里来的呢?其实并非都是凭借高层关系获取,不少数据都是公开可查,在中国政府网、各部委网站、中石油中石化官网、环保组织官网以及一些特殊机构,可查询的公益环保数据越来越多,包括全国空气、水文等数据,气象数据,工厂分布及污染排放达标情况等数据等等。只不过这些数据太分散、太专业、缺少分析、没有可视化,普通人看不懂。如果能够看懂并保持关注,大数据将成为社会监督环保的重要手段。如果能做到以下几点,大数据将对环保做出更大的贡献。

    1、基于互联网的可视化

    互联网对环保大数据开放有两个价值:一是互联网是媒介,拥有海量用户,接入大数据覆盖它们可形成互动式的传播效果。二是互联网可以通过各种工具,对大数据的可视化做得更好。

    近日百度上线《全国污染监测地图》就是一个很好的方式,结合开放的环保大数据,百度地图加入了污染检测图层,任何人都可以通过它查看全国及自己所在区域省市,所有的在环保局监控之下的排放机构(包括各类火电厂、国控工业企业和污水处理厂等)的位置信息、机构名称、排放污染源的种类,最近一次环保局公布的污染排放达标情况等。可查看距离自己最近的污染源,出现提醒,该监测点检测项目,哪些超标,超标多少倍。这些信息可以实时分享到社交媒体平台,告知好友,提醒大家一同注意污染源情况及个人安全健康。

    这样的互联网工具将越来越多。大数据不只是要开放,而是要有分析,要可视化,要与互联网结合,普通用户才有价值。美国政府专门公布大数据的DATA.GOV网站,不仅提供原始数据和地理数据,还提供很多数据工具,这些工具不少由互联网、社会、公益组织和一些商业机构提供的。

    2、加大开放深度和广度 

    环保大数据现在开放的只是一部分,广度和深度需进一步加强。因为部门利益或者“保密”原因,不少环保数据只限内部使用,比如PM2.5数据、汽车尾气检测数据等等;部分开放的数据,只有基本信息和统计信息,缺乏关键字段、没有明细清单、时效性需提高。政府需要考虑加大环保数据开放的深度和广度,环保大数据开放,做到信息开放透明,才能起到真正的监督作用。

    《大数据》一书在介绍美国政府大数据时提到,美国人认为“用纳税人的钱收集的数据应该免费提供给纳税人使用”,美国政府对数据公开也有抵触,但还是得顺应民意不断提升数据开放深度和广度,奥巴马政府已签署《透明和开放的政府》文件,美国联邦政府数据都在DATA.GOV统一开放,同时还提供各种分析工具。虽然制度不同,但在大数据开放上的理念和方式值得借鉴。

    3、应用众包方式的大数据

    互联网一大优势是每个人都可成为内容生产者。它不只是可以把已有数据很好地呈现给用户,还可以让每个人成为环保数据采集器。比如百度地图就可以提供标记功能,让用户标记身边被污染的河流、身边的污染空气排放,还可上传图片。再比如在遇到污染行为拨打环保投诉电话时,可以同时在百度地图进行标记,记录在案。现在环保部已经要启动公开约谈制度,到时候点开百度地图就可以看到不同省份、不同城市、不同县城的环保投诉分布、污染企业分布,相关部门压力应该会很大。众包数据在时间和空间两个维度对环保大数据形成补充。

    4、加强不同数据的关联分析

    大数据有巨大价值,大数据之间如果能够联系起来,价值更大。《穹顶之下》中将燃煤燃油数据,雾霾数据,气象数据,经济发展数据关联起来,尝试寻找雾霾的成因,就是大数据关联分析的价值。目前中国各个部门都有一定程度开放数据,但缺乏像DATA.GOV这样的集成政府大数据的平台,缺乏将不同数据关联分析的意识和工具。大气、水文、国土,不同部门的大数据关联起来,环保、卫生、经济、交通、气象数据可以关联起来,这将得出更多分析结论和监督价值。比如百度就可以根据污染监测地图,结合流感关键词搜索行为趋势和分布,寻找大气污染与感冒之间的关联性。2014年两会雷军、2015年两会孙丕恕等代表均提出建立大数据开放平台,在社会呼声下,政府或将提供统一数据开放平台,并且集成互联网企业、普通开发者的环保关联分析工具。

    5、媒体利用大数据加强监督

     信息开放透明力度越大,大数据可视化做得越好,监督效果更强。不过如果要放大监督效果,影响决策部门和高层领导,形成舆论关注,则需要媒体发挥作用。柴静《穹顶之下》形成如此巨大的影响力说明了新型媒体的价值,不过也说明过去媒体在环保监督上做得远远不够。日后媒体将更多借助大数据、大数据工具、大数据可视化报表进行环保问题的追踪关注报道,形成常态化的媒体环保监督,《穹顶之下》这个节目中表现形式将更多为媒体所用。

    6、应用大数据科学决策

    政府部门除了更多地采集环保数据、更深和更广地开放环保数据、更多地支持互联网可视化工具之外,应用大数据做环保最关键的一点是要行动,利用环保大数据进行科学决策。如果一个城市能够透过大数据看到自己的污染企业常年排名第一,群众投诉举报一直高居不下,自然会采取相关整改措施,在交通、工业、城规等关联问题的决策上考虑环保因素。

    大数据是一座待挖掘的金矿。相对企业而言,政府拥有更多、更全的大数据,并且这些数据与国计民生息息相关。政府部门未来将加大大数据开放步伐,出台政策支持鼓励民间大数据产业,在决策中更多应用大数据工具。2015年环保问题被重视,环保大数据或许会成为一个很好的切入点,大数据可以为环保做得更多。

    微博@互联网阿超,微信 罗超(luochaotmt),扫码来关注:

  • ?

    数据采集使用与保护隐私如何处理

    庾书瑶

    展开

    全球进入互联网特别是移动互联网时代后,一个巨大进步是一切活动包括政治经济文化娱乐等都在往互联网特别是移动互联网这个舞台上转移。所有社会活动、经济金融交易等都在网络上留下了痕迹或者说有迹可循。这相对于过去在网络线下相比较带来的进步是革命性、历史性、颠覆性的。

    革命性主要在于通过对人们在网路上留下的印记的采集、挖掘、提炼与分析,可以分析出背后许多经济金融文化甚至政治等有巨大价值的东西。思想支配行动,行动又反映思想。从网路上的留印行动中挖掘分析后就可以基本得出其思想所在,从网络上对一个主体各个方面留痕进行大挖掘、大计算、大分析基本就可以摸清楚预测出来这个主体想要什么,需求何在?这就可以分类施策、细分客户、精准营销。这个商业价值,其实不仅是商业价值包括政治文化价值都是无限的。

    我仅从经济学上讲一个例子。此前,马云曾经讲过,大数据、云计算诞生以后,经济或可以进入到计划经济体制里。猛一看,貌似梦想一样,但细细分析似乎也不无道理。计划经济与市场经济都是配置资源的手段。计划经济之所以比市场经济在效率等方面低,弊端多,不在于计划经济体制本身,而在于没有技术等手段与能力来实现计划经济的高效性与准确性。过去往往是拍脑袋搞计划,即使到市场调查,准确性也难以达到。这是问题所在。

    目前有了网络,有了网络上的大数据积累,有了云计算,或给计划经济以重新复活的机会,给了计划经济体制优越性以证明的机会。这种可能性不是没有。插上大数据、云计算翅膀的计划经济或比市场经济更加高效,更加精准,对市场的周期性破坏或就此消失。

    这就是所说的大数据是一座大金库的原因。不过,这个大金库要充分挖掘与发挥出来的话,一个大前提是要对大数据进行充分的采集、挖掘、整理、甄别、分类、分析等。这个大数据中包括你我他几乎全部在网路上的百姓民众消费者。也就是说,每一个在网络上留下印记即数据的你我她他都是被分析的对象,你留下的几乎所有信息都在被采集挖掘分析的范围之内。这就牵扯到另一个问题:隐私保护问题。

    近期,用户在查阅自己的支付宝年度账单时默认勾选“我同意《芝麻服务协议》”这件事引起一阵波澜,蚂蚁金服也回应道歉了。无论处于什么好意,默认勾选“同意”肯定是不合适的。不过,从这件事中的一些争论反应看,确实存在着一些对大数据在采集使用与隐私保护上的较大偏差甚至是糊涂认识。需要以理性的思考予以梳理厘清。

    我的认识是,只要你在网路上留下了印记即数据基本上没有隐私可言。即使在没有网络、都是线下交易活动的过去也基本如此。例如:过去你到银行办理存款贷款汇款,你到房管所办理房子登记过户,你到派出所办理户口入户迁移,你办理入学入托上大学等等都要登记家庭、身份证、电话等基本情况与信息。现在在网络上同样如此。只要存在这些情况,你的信息或者隐私已经裸露出来了。除非你生活在大山深处的世外桃源里。

    当然,在网络时代个人信息与隐私或者裸露的更加严重而已。这里一个关键问题必须甄别清楚,每一个人在网络积累的大数据不让采集挖掘分析使用是绝对不行的。这不是对大数据金矿的极大浪费吗?关键在于如何使用?关键在于不是不让使用而是使用后一定要为客户的隐私以及普通信息数据保密。保密,是问题的关键所在。

    对每一个人数据信息的使用是不可避免的。只要有交易,就一定要使用你的数据。比如,你有贷款信用需求,这个金融交易一定要充分使用你的数据信息的。网络信息如此,线下在银行贷款比如房贷等,对你的个人所有情况、数据信息等几乎是挖地三尺的。关键在于使用以后,不能泄露给第三方,要替交易客户保护好数据信息。所谓的保护隐私数据,主要的问题在这里。

    非金融信用业务也有保护数据信息隐私问题。你去一个网站注册、你想使用共享单车都需要注册相关信息数据的。注册这些数据信息以后,你不能说不让网站等挖掘使用你的数据信息,注册时也等于是一种交易,除非你不注册。关键的问题还在于,网站、共享单车等使用客户数据后,一定要对客户保密。

    这里面牵扯第三方使用数据如何办的问题。我个人认为,牵扯所有经济体的金融信用数据问题,各大平台包括央行在内都可以共享信用等级数据。目的在于形成一种“有信走遍天下,无信寸步难行”的社会氛围与高压态势,使有信用者得以提倡褒扬,无信用者如过街老鼠人人喊打。全社会形成:信用贵如金子,无信耻辱透顶,这才能形成信用的正向激励机制。

    第三方使用其它数据,网站等平台应该通过协议约束征得被采集人的同意。同样,必须有约束条款,第三方也必须给客户数据信息保密。

    总之,大数据这座金矿必须充分利用使用与挖掘开采,不能造成这么宝贵的大数据资源闲置浪费,同时,使用以后关键在于要保护好被采集数据者的数据信息以及隐私。

  • ?

    拥抱环保大数据时代

    悲伤

    展开

    随着社会经济的快速发展,人们的生活水平也逐渐提高,对生活环境的要求也越来越高。环保成为时代的主题。在物联网时代大发展的背景下,环保也广泛应用了新兴物联网技术。物联网时代背景下的环保被冠以“智慧”,即当下流行的智慧环保。

    深圳市舜通智能科技有限公司在国家物联网环保政策的号召下,再加上作为物联网行业解决方案及顶层设计的专家,在环保领域设计出了具有优势的环保解决方案。

    舜通智能智慧环保监测平台可以实现环保数据自动监测,包括水排污监测、气体排污监测、固体污染监测、污染源监测和放射源监控等,每类自动监测站根据建设规范配置若干数量的视频采集设备和数据采集设备,这些设备接入智慧环保平台,实现污染源的监控和管理。

    舜通智能智慧环保监测平台是已高性能、高可靠性的系统平台。该平台能对重点污染源进行连续、实时、在线的动态监测,可以实现整个监控业务功能、数据传输和管理功能,与环保部门其他业务系统资源共享的接口互联互通,做到统一监控、统一传输。

环保数据采集

所有视频需要登录后,才能观看

请先登录您的帐号,即可完整播放,如果您尚未注册帐号,请先点击注册。

img

在线咨询

建站在线咨询

img

微信咨询

扫一扫添加
动力姐姐微信

img
img

TOP