数据采集模式与市场需求现状分析

2025-1-18 00:01| 发布者:yasin| 查看:119| 评论:0

摘要:常见数据采集需求场景分为,5G工业网络远程传感器采集,例如采集环境温湿度,仪器工作站软件采集,数据文件内容采集,工业接口仪器设备数据采集,便携式设备数据采集等场景 ... ... ...
常见数据采集需求场景分为,5G工业网络远程传感器采集,例如采集环境温湿度,仪器工作站软件采集,数据文件内容采集,工业接口仪器设备数据采集,便携式设备数据采集等场景。

数据采集的意义及必要性,以检测行业实验结果数据为例

目前市场上常见数据采集模式优略性分析

1、定制化开发采集

定制开发采集通常指根据特定的需求和场景,进行数据采集相关系统、设备或文件的开发工作。数据来自一些非常规、不被常见采集工具支持的数据源时,定制化开发就成为必要选择。这些设备可能接口独特、数据输出格式特殊,普通的数据采集手段难以对接,需要定制开发的数据采集接口和程序来获取相应数据。
成本较高,相比直接使用现成的采集工具,定制化开发需要投入更多的人力、物力和时间成本。包括需求调研、系统设计、编程开发、测试等多个环节都需要专业人员参与,并且可能需要持续的维护和优化投入。
场景单一,此模式适用于特定场景下的专用采集工作,定制性强难以复用,无法满足灵活多样的采集需求使用场景。
技术依赖,涉及到复杂的业务逻辑和多数据源整合时,在系统部署后由于业务场景的变更,可能导致原系统设计无法满足的情况,需要技术支持再次对系统进行修正部署。

2、文件夹共享方式

通过在局域网内设置共享目录方式,将需要采集的文件,拷贝到指定网络目录中,再由系统分析处理文件,将文件中目标数据进行提取采集,传输到第三方系统中。此种方式在早期数据采集中较为常见,需要人为拷贝文件到共享目录中,系统定时扫描目录文件执行采集动作。
病毒风险,文件共享目录通常被设计成允许多个用户访问。员工们可以读取、写入和修改其中的文件。如果用户的设备感染了病毒,很容易通过共享目录将病毒文件传播到其他的设备上。以勒索病毒为例,它可以通过感染一台连接到共享目录的计算机,然后迅速将自身复制到共享文件夹中。目前很多企业已经禁止此种模式的采集操作。
场景单一,实际应用中会产生很多不同类型、不同格式的数据文件,拷贝至共享目录后系统很难根据其特征进行区分,无法对多类文件进行分别处理。只适合于一些特定的简单场景,预制好固定的采集策略。

3、对设备加装硬件远程采集

经常能看到采集串口设备的方案,比如电子天平,水质分析仪等,这类方案通常需要加装额外硬件,但并不是所有场景都适合采用这种方式。Wi-Fi串口模块,多用于远程定时采集传感器数据配合监控及预警系统,可下发工控操作指令实现远程操控仪器设备。适用采集维度单一的数据,比如,温度、湿度、转速、气体浓度等等,形成持续化数据用于科学研究或用于危险预警等场景。
远程采集,适用于远程单一维度定时持续化数据采集场景。不适用于本地设备数据采集,例如电子天平类设备,本地设备产生数据后需要设定数据归属而非无关性数据,采集数据后往往需要人为操作设定数据归属后再将数据传输到目标系统。
网络配置,部署之前需要预先规划网络部署环境,统一规划网络拓扑方案,满足数据传输双向透传及中继交换等。通过串口、以太网、Wi-Fi链路把监测设备数据传输至远程服务器,借助远程管理平台采集设备数据。
环境要求,需要外接电源提供稳定运行环境,可用于远程工控操作,通过网络下发串口工控操作指令,用于控制仪器设备。

4、数据文件采集数据

通过仪器附带管理软件,将数据内容输出为文件,通过导出Excel、PDF、CSV等文件,采集系统获取到文件后,对文件内容进行内容分析,通过预先设定的采集策略,获取到文件内容当中的目标数据。获取到目标有效数据后,通过与第三方系统或数据库集成,将结果数据传输给第三方系统,完成整个数据采集流程。
通用性强,目前这种方式通用性最强,通过分析各类文件内容,可实现设备品牌,工作站软件版本无关性,对于有些无法导出文件的工作站软件,可以用PDF虚拟打印机功能将结果导出为文件。只要文件当中存在目标数据,理论上都可以采集出来。
实施能力,在系统部署过程中需要实施人员对操作系统,文件格式有一定了解,能够分析出各类工作站软件如何输出有效的数据文件,对采集策略的编制尽量具备容错性和兼容性。
扩展性高,除本身的采集功能外,可根据实际需求与第三方系统做定制化集成,互通数据传输,用户信息验证等功能。


路过

雷人

握手

鲜花

鸡蛋

相关阅读

联系客服 关注微信 公众号 返回顶部