GB/T 38637.2-2020 物联网 感知控制设备接入 第2部分:数据管理要求
- 文档部分内容预览:
控制数据传递到控制单元对被控对象实施控制;如控制 定值,调整电动机的转速等。 b)控制数据由物联网平台生成,直接或经网关发给控制单元, c)对于智能感知控制设备控制单元,接收的控制数据是通信协议封装的二进制数字信号形式 d)对于非智能感知控制设备控制单元,接收的控制数据是模拟量形式
6.1.1数据异构转换
数据异构转换指从不同协议消息格式承载的数据进行结构转换,转换为感知控制设备、网关或平台 可识别处理的数据结构,要求如下: a)应支持感知控制设备或平台的通信协议: b 应支持解析指定的感知数据包和控制数据包; c)应支持通过协议转换模块进行数据结构转换,实现感知控制设备与网关或平台之间数据互通。
a)应支持全量抽取、增量抽取、基于日志抽取等抽取模式海绵城市标准规范范本,可支持地理空间信息数据的抽取; b)应支持数据抽取格式和流程的自定义配置; c)对文本、图像、音频、视频等数据特征抽取应符合GB/T32630一2016中6.4的要求。 3数据清洗 数据清洗指利用现有数据挖掘手段和方法将脏数据转化为满足数据质量要求或应用要求的过程 文如下: a)应支持对错误数据、无效数据、重复数据等异常数据的处理; b)应支持对缺失数据进行填补; 应支持对数据不一致性进行监测
数据抽取指从数据源中提取数据的过程,要求如下: a)应支持全量抽取、增量抽取、基于日志抽取等抽取模式,可支持地理空间信息数据的抽取; b)应支持数据抽取格式和流程的自定义配置; c)对文本、图像、音频、视频等数据特征抽取应符合GB/T32630一2016中6.4的要求。
数据清洗指利用现有数据挖掘手段和方法将脏数据转化为满足数据质量要求或应用要求 要求如下: a)应支持对错误数据、无效数据、重复数据等异常数据的处理; b)应支持对缺失数据进行填补; c)应支持对数据不一致性进行监测
6.1.4数据质量评估
数据质量评估是针对现有的数据质量问题,通过测试和改善数据综合特征来优化数据使用价值的 过程。数据质量的评估指标及方法见GB/T36344一2018
数据存储通用要求如下: a)应支持时序型数据库存储实时性数据,可用于监测、检查设备所采集的实时数据等 b)应支持关系型数据库存储历史性数据,可用于分析优化生产管理过程等; c)数据存储前应对数据进行预处理,包括数据清洗与数据质量评估等:
d)可提供存储调度、存储监控、存储管理的可视化管理界面
GB/T 38637.22020
存储调度要求如下: a)应支持制定存储调度计划,尤其是对存储节点的迁移、扩容、复制、更改、删除等操作进行规划 和执行; b)应支持满足不同使用方的需求动态调度存储服务; ) 应支持存储权限的划分,并通过资源排队、时间划分等机制进行存储服务的优化,
存储监控要求如下: a)应支持按照需求定制存储监控计划; b)应支持存储状态监控; d)应支持存储资源信息、文件信息以及历史操作等数据的获取。
存储管理要求如下: a)应支持存储分级策略,尤其是支持单机级、跨平台级等级分类的划分; b)应支持数据隔离机制,使不同数据使用方的数据相互独立不可见; c)应支持各类数据模型融合功能; d)应支持本地和远程的数据导人和导出等功能
存储备份要求如下: a)应支持备份进程并行的容错机制,备份进程的容机不影响数据的可用性 b)应支持数据备份的集中控制,应针对不同使用要求制定数据备份策略; c)应支持镜像备份、余备份等方式提高数据存储可靠性; d)应支持备份程序与应用程序的分离; e)应支持对备份数据进行压缩存储。
数据分析指对海量的感知/控制数据进行分析,挖掘数据的使用价值,要求如下: a)应支持基本分布式并行计算处理框架的分布式挖掘分析; b)应支持内存计算,实现实时分析; c)应支持数据分析模型的定义及执行; d)应支持数据挖掘模型的定义及执行; 应支持多种形式的分析结果输出; 应支持数据挖掘所需要的算法库,可提供多种数据挖掘算法
GB/T 38637.22020
应支持结构化数据、半结构化数据、非结构化数据等不同类型的数据呈现: 1)结构化数据应支持柱状图、曲线图、折线图、饼状图、雷达图等可视化方法; 2)半结构化数据应支持常用数据类型的展示和统计; 3)非结构化数据应支持分类与浏览。 b 应能通过缓存、内存计算、压缩传输等手段保证数据呈现良好的响应速度, C 应支持数据呈现模板功能,并且具备模板整合能力, 应具备扩展性,尤其是支持二次开发接口,能快速实现所需要的数据呈现方式。
7.1数据分发规则制定
数据分发根据预先设置好的规则将物联网平台的数据转发至其他平台上,要求如下: a)规则脚本语言应支持业务规则的定制化; b)应确保规则的推理机制及规则的匹配效率,且规则执行效率不应影响主业务逻辑: c)应支持解决规则链的规则冲突; d)应支持规则执行日志的查询操作
数据分发要求如下: a)应支持结构化数据、半结构化数据、非结构化数据等不同类型的数据发送: b)应支持满足数据接收方要求的数据过滤机制,减少无用数据的传输和接收: c)应保持数据分发过程的实时性和可靠性。
a)数据传输过程中的完整性应满足GB/T37025—2018中6.1和7.1的要求; 应通过封装签名、测试字验证、引用约束等机制对数据完整性进行检测,保证数据存储过程的 完整性电网标准规范范本,提供非完整数据的解决措施
数据加密性要求如下: a)对于特定的敏感字段或业务数据应使用加密方式存储; b 应支持国家密码管理主管部门批准使用的密码算法,使用国家密码管理主管部门认证核准的 密码产品,遵循相关密码国家标准和行业标准; C 应按照国家相关保密部门要求采用合适的加密算法、密钥长度和密钥管理机制; d)数据传输过程中的加密过程应符合GB/T37025一2018中6.3和7.3的要求
对于特定的敏感字段或业务数据应使用加密方式存储; D 应支持国家密码管理主管部门批准使用的密码算法,使用国家密码管理主管部门认证核准的 密码产品,遵循相关密码国家标准和行业标准; C 应按照国家相关保密部门要求采用合适的加密算法、密钥长度和密钥管理机制; d)数据传输过程中的加密过程应符合GB/T37025一2018中6.3和7.3的要求
8.3数据访问权限控制
数据访问权限控制要求如下:
GB/T 38637.22020
a)应支持制定安全策略,并根据安全策略启用控制用户对数据的访问; b) 应实现业务数据、系统数据和数据库系统等不同级别的用户权限分离管理机制,同时对用户访 问应分配最小访问权限: 数据提供给第三方访问时,应严格限制默认账户的访问权限,定期修改账户的口令
a)应支持制定安全策略,并根据安全策略启用控制用户对数据的访问; b)应实现业务数据、系统数据和数据库系统等不同级别的用户权限分离管理机制,同时对用月 问应分配最小访问权限; c)数据提供给第三方访问时,应严格限制默认账户的访问权限,定期修改账户的口令
数据可审计性要求如下: a)审计范围应覆盖业务数据的用户行为,针对数据的重要性设定不同级别的行为记录; b)审计记录应包括事件的日期、时间、类型、主体标识、客体标识和结果等; c)应能够根据记录数据进行分析,并生成审计报表; d)应保护审计记录城市道路标准规范范本,避免受到未预期的删除、修改或覆盖等
....- 数据标准 设备标准
- 相关专题: 物联网