1.1 概述

SmartDAQ智能数据采集器是专门针对SCADA分层分布系统应用推出的前置智能数据采集服务器，内置自主研发的QTOUCH2.2组态软件，它是一台完整的嵌入式计算机平台，其内置软件具有众多PLC/IO/仪表的通讯支持，具有实时数据库，具有sqlite3历史数据库，具有开放的modbusTCP上传接口。其具有工程管理的特点，通过PC进行远程组态下载，具有远程监控，远程维护，远程调试的能力。它能够像PC机一样将本地数据远传到数据服务器中，也可以分担远程数据库服务器的压力，将数据本地存储，具有远程查询，断点续传的特点，确保系统的数据完整性。其内置c语言编译接口，用户可以自行开发专用于自己系统特点的应用，更提供高级c++语言的SDK环境，用户组建自己特色的运行系统。

1.2 应用领域

SmartDAQ智能数据采集器专门为工业设计，广泛应用于钢铁冶金行业能源计量、工程机械车联网、水文水利数据无人值守自动站、电力LCU现地单元串口联网服务器等，其采用ARM9-based RISC高效能处理器，使用了精简内核LINUX嵌入式操作系统，真正实现了工业现场的“3C”（现场控制，现场计算，现场通讯）的要求。它既可以单独使用直接通过自带以太网口向上传输数据，也可以通过无线DTU通信设备接口即时发送数据，还可以建筑能耗采集，能源工作站等使用形成现地控制单元分层分布应用。

运用于物联网

运用于电力监控

运用于太阳能光伏系统

2.1 产品型号

2.2 安装环境

2.3 外形和开孔尺寸

SmartDAQ外形和开孔尺寸：以QT240为例，W180mm*H130mm*D38mm，具体外请参照产品规格。

2.4 电源要求

2.5 接地要求

产品的金属外壳必须接地 直流电源的工作地在产品内部没有连接到实际的大地。为了避免由于虚的点接地造成将外将外部噪声引入系统，最好不要将直流电源的工作地和外壳一起接到大地，但如果必须将电源的接地到星形接地点，则必须保证接地导体长度尽量短、横截面积尽量大。导体必须能够承受至少10A的短路电流。接地的导体必须直接连接到星形接地点。这可以保证接地导体不会承受其他支路的电流。

2.6 CE要求

为保证QT241N系列产品符合EMC的规范 ，减小电气噪声的干扰，在产品的电源接线端子的外壳接地端子上必须接一条独立的#14 AWG规格的接地电缆。这条接地电缆必须按照安装说明直接连接到系统的星形接地点。

2.7 安全指导

这个部分介绍了推荐的安 装惯例和步骤 。虽然没有任何两个应用的 情况是相同 的，但请在安 装时仔细考虑 以下的建议。

ICS 3-304.81 安全性建议：

必须仔细考虑紧急停止功能的作用，它必须独立于可编程控制器之外。

在操作人员直接接触机械部分的位置，例如装载和卸载机械工具的位置，或者机械自动运转的地方，必须仔细考虑现场手动装置或其他备用手段的功能，它需要独立于可编程控制器之外，可以启动或者中断系统的自动运行。

如果需要在系统运转的情况下修改程序，必须考虑采用锁或者其它措施来保证只有得到授权的人才能进行必要的修改。

*这些建议是防止危险设备故障和由这些故障 产生的影响，或者在线 修改程序时可能产生疏忽而造成安全威胁时必要的安全防护措施。

ICS 3-304.81安全性建议是在国际电气制造业协会（NEMA）的许可下从NEMA ICS 3-304标准中复制而来的。

2.8 接口介绍

2.8.1 RS485串口

SmartDAQ系列产品串口分为DB9电器接口和插针是接口，一般DB9接口引脚1为RS465 A+,引脚9为RS485 B-。插针式接口D+ 为RS465 A+, D-为RS485 B-。

2.8.2网口

SmartDAQ系列产品的网口采用的是Ethernet 10M/100M自适应网口，满足数据的快速交换和吞吐，该端口可以用于组态工程的上/下载，系统参数的设置和组态的在线模拟；可以通过以太网连接多个QT241N构成多QT241N联机；可以通过以太网与PLC等通讯； 可以通过以太网口与PC机通讯。

2.8.3 USB接口

SmartDAQ系列产品采用标准的通用的USB2.0接口，该接口用于与U盘、USB鼠标、USB键盘及USB打印机等设备连接，即插即用。

2.8.4 SD卡接口

SmartDAQ系列产品支持SDCARD卡的扩展，给硬件提供了升级的空间。

2.8.5 无线网卡接口

SmartDAQ系列产品中QT241N支持无线网卡接口。支持电信，联通3G、4G无线上网。提供数据无线传输。

2.8.6 其他接口

SmartDAQ系列产品可以扩展其他的接口，如何需要CAN通信可以扩展CAN接口。

3.1 使用方法一 数据透明传输

1）打开Qtouch软件工程管理器如下图：

2）新建串口设备，选择数据透传来配置串口，如图：

配置串口信息（串口号，波特率，数据位等信息）

3）将配置好的工程下载到串口服务器

4）PC 连接SmartDAQ的数据

SmartDAQ智能数据采集器将配置好COM1的数据（已COM1示例）映射到网络地址为IP：192.168.1.10（设备默认IP）PORT 5002端口处，PC 上位机可以通过网络实时接收到数据。

3.2 使用方法二 内置实时数据库

此方法需要建立串口工程，配数据采集点，将不同设备数据采集到QT241N智能数据采集器的实时数据库中，上位机可以通过ModbusTCP协议来连接数据库，此方法的特点是：1数据稳定；2数据上传快；数据断点保持安全可靠；可以和不同的组态软件数据通信。

下面以Modbus协议来介绍：

1）打开QTouch软件工程管理器如下图：

2）新建串口设备，选择ModbusRTU来配置串口，如图：

3）设备数据配点

在modbus设备中：

设备名：是新建串口时的设备名称

设备地址：是通信设备的modbus的地址（一般1-247,0地址是广播地址，248-255 是保留地址）

寄存器区：modbus的数据分区，分别为DO线圈，DI离散输入寄存器，AO保持寄存器，AI输入寄存器

寄存器地址：数据的地址

数据类型：多种数据类型（char ，unsigned char，short，word等数据类型 ）

读写类型：只读，只写，读写

最大值，最小值：数据的最大值和最小值得限制

初值：数据初始值 （目标值=采样值+初始值 例如初始10采样值10 则目标值是10 =10+10）

变比：数据的变比（目标值=变比乘以采样值 例如 变比是2，采样值是10则目标值是20=2*10）

配好的数据如下图：

4)将配好的工程下载到SmartDAQ智能数据采集器。

5)PC端上位机连接SmartDAQ智能数据采集器的实时数据，这时需要建上位机组态工程，如图：

6）新建网络设备

7）网络配置如下图：

8）数据配点（和SmartDAQ只能采集器数据数据建立一一映射），如图：

注意：SmartDAQ智能设备采集器实时数据库的设备地址是固定地址：200

SmartDAQ智能设备采集器实时数据库的寄存器区是：AO保持寄存器

SmartDAQ智能设备采集器实时数据库的寄存器地址是：以0开始，以2递增的

SmartDAQ智能设备采集器实时数据库的数据类型：Float单精度数据

至此SmartDAQ智能设备采集器与上位机工程的数据点一一映射完毕。

3.3 工程的下载和上载

1）工程下载到QT241N智能设备采集器，如图：

注意：第一次下载时需要勾选跟新主程序，以后可以直接下载工程。

SmartDAQ智能采集器的默认IP是：192.168.1.10 （ping 命令可以测试网络连接状态）

如果想将SmartDAQ智能采集器的IP修改为其他的IP，可以通过软件的运行菜单来修改IP如图：

2）SmartDAQ智能设备采集器的工程上载到PC，如图：

3.4 SmartDAQ设备IP和网关的修改

SmartDAQ设备IP和网关的修改可以再实时数据库中修改，打开QT241N工程，双击“实时数据库”，点击“连接”，连接SmartDAQ，点击修改ip图标，修改ip地址后点击“修改”，如图：

近日，外媒Business Insider发布一张产品谍照，如上图所示。

根据Business Insider的报道，这款产品是1月份初期的形态，现在已经有了一些改进。对于这张照片，很多人认为是Magic Leap原型机，而且名字是“PEQ0”。（注：PEQ是Magic Leap用来描述开发中原型机的词。）

一张图片引起人们的兴奋点的原因是在前不久有报道称，Magic Leap CEO Rony Abovitz会在近日向董事会展示PEQ demo。

对于突如其来的舆论，Abovitz通过Twitter表示这张图现实的产品并不是Magic Leap原型机，而是一个用于研究开发工作的工具。Abovitz说，研究计算机视觉和机器学习需要收集空间环境信息，比如亮度。

在对NameNode节点进行格式化时，调用了FSImage的saveFSImage方法和FSEditLog.createEditLogFile存储当前的元数据。Namenode主要维护两个文件，一个是fsimage，一个是editlog。

fsimage ：保存了最新的元数据检查点，包含了整个HDFS文件系统的所有目录和文件的信息。对于文件来说包括了数据块描述信息、修改时间、访问时间等；对于目录来说包括修改时间、访问权限控制信息(目录所属用户，所在组)等。简单的说，Fsimage就是在某一时刻，整个hdfs 的快照，就是这个时刻hdfs上所有的文件块和目录，分别的状态，位于哪些个datanode，各自的权限，各自的副本个数等。

注意：Block的位置信息不会保存到fsimage，Block保存在哪个DataNode（由DataNode启动时上报）。

editlog ：主要是在NameNode已经启动情况下对HDFS进行的各种更新操作进行记录，HDFS客户端执行所有的写操作都会被记录到editlog中。

读取元数据：启动NameNode节点时，又要从镜像和编辑日志中读取元数据。

写入元数据：在NameNode运行时会将内存中的元数据信息存储到所指定的文件，即${dfs.name.dir}/current目录下的fsimage文件，此外还会将另外一部分对NameNode更改的日志信息存储到${dfs.name.dir}/current目录下的edits文件中。fsimage文件和edits文件可以确定NameNode节点当前的状态，这样在NameNode节点由于突发原因崩溃时，可以根据这两个文件中的内容恢复到节点崩溃前的状态，所以对NameNode节点中内存元数据的每次修改都必须保存下来。但是如果每次都保存到fsimage文件中，这样效率就特别低效，所以引入编辑日志文件edits，保存对对元数据的修改信息，也就是fsimage文件保存NameNode节点中某一时刻内存中的元数据（即目录树），edits保存这一时刻之后的对元数据的更改信息。

镜像的保存：

SecondaryNameNode：主要由两个作用，一是镜像备份（不是NN的备份，但可以做备份），二是日志与镜像的定期合并。

第一步：将hdfs更新记录写入一个新的文件——edits.new。

第二步：将fsimage和editlog通过http协议发送至secondary namenode。

第三步：将fsimage与editlog合并，生成一个新的文件——fsimage.ckpt。这步之所以要在secondary namenode中进行，是因为比较耗时，如果在namenode中进行，或导致整个系统卡顿。

第四步：将生成的fsimage.ckpt通过http协议发送至namenode。

第五步：重命名fsimage.ckpt为fsimage，edits.new为edits。

第六步：等待下一次checkpoint触发SecondaryNameNode进行工作，一直这样循环操作。

注：checkpoint触发的条件可以在core-site.xml文件中进行配置。fs.checkpoint.period表示多长时间记录一次hdfs的镜像。默认是1小时。fs.checkpoint.size表示一次记录多大的size，默认64M。例如如下：

fs.checkpoint.period

3600

The number of seconds between two periodic checkpoints.

fs.checkpoint.size

67108864

The size of the current edit log (in bytes) that triggers

a periodic checkpoint even if the fs.checkpoint.period hasn't expired.

FC-Gateway数据采集接口网关是北京华恒信远专门为工业标准通讯接口OPC Server软件、数据采集接口软件配套定制开发的一款嵌入式硬件产品，内置两个标准RS-232串口（其中一个串口可以通过跳线设置成RS-485）和两个RJ45以太网口，型号为Gateway-227B， 此外，还有Gateway-240B、Gateway-230B等嵌入式工控机型号。 该设备操作系统有Windows、Linux两种，其功能与特点如下： 1、OPC服务器：可连接DCS、PLC等控制系统，读写实时数据，包装成OPC Server工业标准通讯接口，提供给实时数据库系统、先进控制系统和MES系统集成商； 2、安全隔离：当数据采集接口网关为实时数据库系统提供实时数据时，它一般位于自动化控制系统和实时数据库服务器之间，由于数据采集接口网关采用了内置单向数据传输技术，可达到自动化控制系统和实时数据库服务器之间的安全隔离目的。 3、该产品操作系统、数据采集程序等均固化，不可修改。一旦被修改，重新启动后，自动恢复到初始状态，可防止病毒以及黑客软件攻击。 4、结构先进、安装方便，该产品高度1U，可以直接安装在标准机柜中，独特的散热技术，1U机箱有多个磁悬浮风扇散热。 5、数据采集冗余设计：支持双机双网冗余通讯。 6、可作为InfoPlus.21、PI、PHD等实时数据库系统的数据采集终端，也可写数据至关系数据库，为MIS、ERP等管理信息系统提供生产实时数据。

一台电脑控制50个微信，自动加好友，发朋友圈去做营销，让你的效率及业绩无限倍增。

一键掌控，批量管理维护；自动化营销，营销效率更快：一台电脑，控制50个微信，大范围营销，维护现有用户，开发更多客户：省人力资源，省人工成本：一台电脑控制50个微信，相当于上百个业务员在自动工作，降低人工成本，提高管理效率。

量变，产生质变，假设，一个微信号五千个好友，一百个微信，就是五十万个客户群体，一个人，一天让你获得一元的利润，一天就是五十万，如果成交率在1%，就有五万的成交量，如果成交率在千分之一，每天就有五千的成交量，如果你的营销方案实在烂透了，成交率只有万分之一，每天也有五百的订单，说到这里你明白了吗？

铁拐李精控：

主要应用行业：

金融行业应用，

电话管控日益严格，客户拒接率越来越高，成本上升！

铁拐李金控提供精准客户数据解决方案，提供高效营销工具，为您提供完美的营销解决方案。

百度竞价行不通，传单杂志效率低，报纸受众少，铁拐李精控系统是您完美的替代解决方案！

随着科技的进步，用户越来越关注数据。关注数据的时效性，数据的准确性等。如果发现数据被修改，在数据量大的情况下，哪条数据被修改，查询起来相当麻烦。本篇文章小亿就为你支一招，数据留痕，数据改变，即刻知晓。

数据留痕简介

什么是数据留痕?数据留痕指程序自动记录数据多次修改上报的历史变化情况，供填报人员及数据管理员随时查看和统计。

1功能特色

【详细的留痕记录】除了能查看数据修改前后的值和用户外，还能查看修改时间、IP等信息。

【丰富的查询入口】可以按照任务、报表、表元来查看数据留痕记录。

【全局的统计分析】通过图、表展现历史数据的直观分析，从粗粒度到细粒度展现。

2应用场景

填报人员上报数据一段时间后，发现数据被修改过，可以通过该功能了解谁在什么时间改了数据；数据汇总人员再次汇总数据的时候发现数据前后不一致，可以通过该功能了解两次数据汇总的差异以及谁修改了明细数据；数据管理人员通过数据留痕统计，可以掌握哪些单位数据在多期没有变化，可能是质量不高的数据。

数据留痕实现

对数据留痕有了简单的认识后，那如何实现数据留痕呢？

1任务留痕设计

首先设计任务时，需要增加数据留痕代码组。

代码组设计完成后，在使用设计系统或插件设计任务时，选择“定义”下“自定义属性”菜单，

分别给表元，报表，任务增加一个自定义属性：sjlh；属性中文名为：数据留痕；对应代码组：数据留痕。

根据实际需要，分别给任务，报表，表元设置对应的属性值。

2属性设置

数据留痕需要监听器配置，在“报表平台属性”中添加服务器属性，增加上报数据时留痕明细的监听器配置。

根据实际需要，可配置全部任务默认留痕明细设置。在“报表平台属性”中增加对所有任务表元明细留痕的默认设置，该项为可选项。

配置项sjlh表示是否对所有任务默认进行表元明细留痕， 0表示默认为不允许留痕， >0 表示允许留痕， 如不配置则以当前任务设计的设置为准。

说明：

sjlh属性在服务器、任务扩展属性、报表扩展属性、表元扩展属性上都可以配置。

3启用数据留痕

在任务属性配置中， 需要勾选任务属性“允许数据留痕”选项。当勾选"允许数据留痕"时表示启用数据留痕功能。

4查看数据留痕

如果数据发生了修改，用户在报表界面右键“报表历史”， 可以查看数据修改的详细历史。

留痕开关优先策略

sjlh属性在服务器、任务扩展属性、报表扩展属性、表元扩展属性上都可以配置。这几者之间居有一定的优先级别。

表元扩展属性设置

系统字段不进行数据留痕，只有表元才进行数据留痕。

如果表元的扩展属性sjlh=1，该表元数据留痕。如果表元的扩展属性sjlh=0，该表元不进行数据留痕。如果表元的扩展属性未配置，遵循以下规则。

报表扩展属性设置（表元属性未配置时参考该规则）

报表扩展属性sjlh=1，数据留痕。报表扩展属性sjlh=0，不进行数据留痕。报表扩展属性sjlh未配置，遵循以下规则。

任务扩展属性设置（表元、报表属性都未配置时参考该规则）

任务扩展属性sjlh=1，数据留痕。任务扩展属性sjlh=0，不进行数据留痕。任务扩展属性sjlh未配置，遵循以下规则。

服务器属性设置（表元、报表、任务属性都未配置时参考该规则）

server.property中寻找sjlh的值。0表示不进行数据留痕，其他值表示进行数据留痕，未配置不进行数据留痕。

留痕明细必要条件

除属性设置外，报表要将修改变更情况记录到痕迹明细表还需满足以下规则：

第一次上报数据时，不作留痕明细处理。留痕明细处理在报表户数据第二次上报时候触发，保存数据不作留痕处理；汇总户不需要数据留痕，只有基层户的上报操作才进行数据留痕；只有主数据集进行数据留痕，其他数据集的上报数据操作暂不考虑留痕处理；任务属性必须勾选数据留痕选项。如果该选项中途被去掉，不管用户上报多少次都不进行数据留痕。在该选项被再次勾选后，用户上报后获取的修改前值是该选项被去掉之前的最后一次修改值。变长表必须设置关键字，且关键字不允许重复。如果某变长表没有关键字或者有关键字但允许重复，该变长表的所有表元都不进行数据留痕。如果变长表关键字被修改，表示该数据行删除后新增，此时记录删除操作，并同时记录新增操作。

案例解析

真实案例：匿名者组织元数据之败

" 2010年12月10日一个名为①:匿名者的黑客组织发布一条消息称：他们最近发起了一项行动代号为“复仇行动”的攻击并解释

被哪些放弃支持维基解密网站公司所激怒，匿名者组织号召通过对一些涉及机构进行②:分布式拒绝服务器攻击（DDoS）以报

复，这篇稿子上并没有留下签名和消息来源只是以pdf格式文件发布。但是，在创建这个文件时在PDF元数据中记录了文档 作者名字---Alex Tapanaris。几天后，希腊警方就逮捕 Tapanaris."

①:匿名者黑客组织：匿名者黑客组织是全球最大的黑客组织，也是全球最大的政治性黑客组织。其主要分布于美国，其次为 欧洲各国，非洲、南美、亚洲等地都有其分部。-----来源《百度百科》

②:分布式拒绝服务器攻击（DDoS）:分布式拒绝服务(DDoS:Distributed Denial of Service)攻击指借助于客户/服务器技 术，将多个计算机联合起来作为攻击平台，对一个或多个目标发动DDoS攻击，从而成倍地提高拒绝服务攻击的威力。 说白了就是通过大量合法的请求占用大量网络资源，以达到瘫痪网络的目的。

what is 元数据

元数据：作为一种文件中非明显可见的对象，元数据可以存储在文档、电子表格、图片、音频和视频文件中。创建这些文件的应用程序 可能会把文章的作者、创建、修改时间、可能更新版本和注释等信息记录下来。

例如：手机照相机会把照片的GPS、拥有者记录下来，Word程序也可能会保存作者信息。

实例测试

编译环境：python2

操作系统：win10

第三方库：pyPdf ----------PYPDF是一款优秀的管理 PDF 文档的第三方实用程序 官方网站：http://pybrary/pyPdf/ 它允许提取文档内容和对文档进行分割合并、复制、加密解密操作。

下载安装pyPDF：cmd模式 pip install pyPdf

code(代码)： 添加OptionParser方法使脚本只解析我指定的文件元数据

#!/usr/bin/python2

# -*- coding: utf-8 -*-

import pyPdf

import optparse

from pyPdf import PdfFileReader

def printMeta(fileName):

pdfFile = PdfFileReader(file(fileName, 'rb'))

docInfo = pdfFile.getDocumentInfo() #获取元数据

print '[*] PDF MetaData For: ' + str(fileName) #打印文件名

for metaItem in docInfo:

print '[+] ' + metaItem + ':' + docInfo[metaItem]

def main():

parser = optparse.OptionParser('usage %prog "+\

"-F')

parser.add_option('-F', dest='fileName', type='string',\

help='specify PDF file name')

(options, args) = parser.parse_args()

fileName = options.fileName

if fileName == None:

print parser.usage

exit(0)

else:

printMeta(fileName)

if __name__ == '__main__':

main()

多选|希望我下次分享爬虫案例还是微信自动回复小机器人

编写完毕保存，打开cmd进入相应文件路径（注意PDF文件要和脚本在一个文件夹内）

执行：python xxx.py -F PdfFileName.pdf

废话不多说直接上图

智能硬件结合大数据优势，全方位挖掘用户线下、线上行为，精准定义目标客群特征、消费偏好、地域分布，为零售客户提供选址招商、运营管理、客群洞察、推广营销、实现 营销的“点对点”高效精准的传播，是新一代人工智能思维下的营销新武器。

店内优化

客流实时监测

顾客质量和转化率

顾客运动轨迹热点动图

店内商品试用、转化率

新客招募

厘米级精准定位新客，信息采集分析

对接各个广告平台，精准投放

广告效果评估

提高活动效果

展示真实人流，轨迹动图，客观评估活动效果

场景式营销，广告实时送达

用户画像

了解品牌受众，帮助品牌定位

进店顾客人群画像采集

人员、物品管理

优化员工管理系统，监测到岗及工作时间

贵重物品定位，防盗防损

优化库存管理

探针

集探针，iBeacon，商品触碰探测为一体

wifi与gprs两种上报信息方式

搭载gps模块，采集地理位置信息

出色的定位技术

手机号与mac地址绑定方案

平台化运作，提供丰富的上层接口给集成商

解决方案

购买地址：https://detail.1688/offer/551150997804.html?spm=b26110380.sw1688.mof001.1.b4WnET

或阿里巴巴搜索：58数云、潜客宝

匹配算法实现，通过将用户属性、用户学习状态属性、用户操作行为统计属性与资源属性进行匹配，数据容量大，遥测距离远，人机界面友好，可靠性高的优点，可广泛用于学校和社区小区域范围环境服务。

也适合于气象、海洋、环境、机场、港口、工及等领域使用．实时数据采集与上传该模块主要功能是通过无线方式获取环境观测站采集的实时数据并显示．数据采集的基本算法如下：首先判断是否到发送数据时间，若到了执行数据发送命令。

为了方便学习者查找资源以及系统推送资源，须对学习者和资源的属性进行标记，即创建属性元数据．本研究采用标签技术分别建立学习者和资源的属性元数据．学习者的属性标签主要来自于用户注册时的信息（用户属性）、学习者的学习状态属性以及学习者系统操作行为统计属性（对上传、下载、浏览、评论等操作的统计）。

资源的属性标签主要来自于资源提供者根据学科和关键字分类的标签以及资源使用者对资源的评价、标记等．根据研究性学习的主题、用户学习进度，系统可以将用户可能感兴趣，其他用户感兴趣或评分高、浏览次数多，相同领域的最优资源或相似领域的最佳资源推送给用户，系统根据学习者的学习主题，将平台中评价最高的相关资源、教师指定的资源和拓展的相关资源进行匹配，