DB14T 2939—2023能源监管服务数字化平台数据采集要求.docx

ICS35.240.9914CCS F 07山西省地方标准DB14/T 29392023能源监管服务数字化平台 数据采集要求Digital platform for energy regulatory services Data acquisition requirements2023 - 12 - 26 发布2024 - 03 - 25 实施山西省市场监督管理局发 布DB14/T 29392023目次前言II1 范围12 规范性引用文件13 术语和定义14 缩略语25 基本要求26 数据采集功能框架27 数据采集内容38 数据采集方式39 非功能性要求4参考文献6I前言本文件按照GB/T 1.12020标准化工作导则 第1部分：标准化文件的结构和起草规则的规定起草。本文件由山西省能源局提出、 组织实施和监督检查。山西省市场监督管理局对标准的组织实施情况进行监督检查。本文件由山西省能源标准化技术委员会归口。本文件起草单位：山西大数据产业发展有限公司、华为技术有限公司、山西省能源发展中心、精英数智科技股份有限公司。本文件主要起草人：张振中、康杰、贺一丹、王茂盛、侯秉让、杜青、邵国荣、王文逾、兰世忠、杨海鹏、赵芮、王晓宇、杨杰、宋兰兰、杨国庆、孙志刚、吉凤鸣、刘耀宏、杨少封、王艳、张晶亮、高雪淇、龚大立、赵存会、王磊。II能源监管服务数字化平台 数据采集要求1 范围本文件规定了能源信息监管服务数字化平台数据采集的基本要求、功能框架、数据采集内容、数据采集方式、非功能性要求等方面的要求。本文件适用于能源监管服务数字化平台的数据采集工作。2 规范性引用文件下列文件中的内容通过文中的规范性引用而构成本文件必不可少的条款。其中，注日期的引用文件， 仅该日期对应的版本适用于本文件；不注日期的引用文件，其最新版本（包括所有的修改单）适用于本文件。GB/T 352952017 信息技术 大数据 术语GB/T 36625.32021 智慧城市 数据融合 第3部分：数据采集规范GB/T 38673 信息技术 大数据 大数据系统基本要求DB14/T 29362023 能源监管服务数字化平台 通用要求DB14/T 29382023 能源监管服务数字化平台 数据支撑技术要求3 术语和定义GB/T 35295-2017、GB/T 36625.3-2021确立的以及界定的下列术语和定义适用于本文件。3.1数据采集 data acquisition从数据源中得到原始数据，通过标准化处理并转化为满足数据共享与利用需求的过程。来源：GB/T 36625.3-2021,3.23.2源系统 source system提供原始数据的各类信息系统，包括生产管理信息系统、安全监测系统、通风监测系统、人员定位系统、视频监控系统、设备监测系统等。3.3结构化数据 structured data一种数据表示形式，按此种形式，由数据元素汇集而成的每个记录的结构都是一致的并且可以使用关系模型予以有效描述。来源：GB/T 35295-2017，2.2.133.4半结构化数据 semi- structured data一种结构化数据表示形式，它并不符合关系型数据库或其他数据表的形式关联起来的数据模型结构，但包含相关标记，用来分隔语义元素以及对记录和字段进行分层。13.5非结构化数据 unstructured data不具备预定义模型或未以预定义方式组织的数据。来源：GB/T 35295-2017，2.1.254 缩略语下列缩略语适用于本文件。API 应用程序接口（Application programming interface） ERP 企业资源计划（Enterprise Resource Planning） HTTP 超文本传输协议（Hypertext Transfer Protocol） IoT 物联网（Internet of Things）MES 制造执行系统（Manufacturing Execution Systems）MQTT 消息队列遥测传输（Message Queuing Telemetry Transport）OPC 用于过程控制的OLE （OLE(Object Linking and Embedding) for Process Control） PLC 可编程逻辑控制器（Programmable Logic Controller）SCADA 数据采集与监视控制系统（Supervisory Control And Data Acquisition）5 基本要求5.1 应符合相关的法律法规和标准，保证数据的合法性和可信度。5.2 应遵循一次采集多次多处使用，数据真实准确、安全共享的原则，以自动化采集为主，人工填报为辅。5.3 应尽量避免重复、冗余和不一致，保证数据的完整性和有效性。5.4 应采用先进的技术手段和设备，保证数据的及时性和准确性。5.5 应建立有效的管理制度和安全措施，保证数据的保密性和可用性。5.6 应根据不同的业务需求和场景，合理地分配资源和任务，保证数据的充分性和灵活性。6 数据采集功能框架6.1 根据能源监管服务数字化平台业务场景要求，应采集业务所需的煤炭、油气、电力、新能源与可再生能源等能源行业的结构化数据、半结构化数据、非结构化数据，包括但不限于能源生产经营数 据、能源安全监管数据、能耗数据等相关系统数据。6.2 根据不同来源的数据采集场景可使用不同的采集方式，包括但不限于 IoT 采集、消息采集、批量采集、数据库同步采集、API 采集和人工采集等采集方式。6.3 能源监管服务数字化平台采集的各项数据，应按照DB14/T 2938-2023 的要求进行数据存储与分析、数据治理、数据发布等相关处理。6.4 应满足 DB14/T 29362023 对数据采集的要求，实现能源监管服务数字化平台数据采集功能， 数据采集功能框架应满足图 1 要求。2图 1 能源监管服务数据采集功能框架7 数据采集内容7.1 应支持从煤炭、电力、油气、新能源与可再生能源等行业相关设备、系统中采集结构化、半结构、非结构数据，并符合下列要求：a) 能源生产经营数据包括但不限于产量、生产计划、经营、营收等数据；b) 能源安全监管数据包括但不限于除煤矿安全外的监测监控、风控及隐患信息、设备管理等数据；c) 能耗数据包括但不限于重点用能单位能耗监测、碳排放、能源监测等数据。7.2 对于已经有相关数据采集规范的数据应遵循已有规范，包括但不限于重点用能单位能耗在线监测数据采集指南 第 10-1 部分 电力行业数据采集指南（试行）、重点用能单位能耗在线监测系统技术规范 第 10-3 部分 石油石化行业数据采集指南（试行）等。8 数据采集方式8.1 IoT 数据采集应用于采集实时性要求高的能源企业物联网数据，一般用于采集实时监测类数据。8.2 消息数据采集应用于采集实时性要求高的数据，包括但不限于场站视频监控分析结果、煤炭及油气运输方式监测等数据。8.3 批量数据采集3应用于采集时效性要求不高的数据，主要包括存放在数据库或文件的能源行业相关的生产经营数据，包括但不限于企业经营、营收、运销、人员等数据。8.4 数据库同步采集应用于无法进行批量采集的数据库系统，包括但不限于源数据库时间戳无法判断增量数据、源系统老旧无法改造输出增量数据等情况，作为批量采集的补充方式。8.5 API 数据采集应用于通过API方式获取的外部系统数据，包括但不限于监管单位、行业大数据平台等对外开放的服务接口数据。8.6 人工采集应用于无子系统支撑的数据采集，包括但不限于人工填报的企业基本信息、生产要素信息、建设基本条件信息等数据。9 非功能性要求9.1 可靠性要求能源监管服务平台故障恢复应具备出现问题时能自动检测和自愈的能力，并应遵从GB/T 38673-2020 中 7.1.4 的要求。9.2 兼容性要求能源监管服务平台应符合下列兼容性要求：a) 应支持计算架构兼容性，支持至少两种以上处理器架构体系。b) 应支持 2 种以上操作系统，优先支持国产操作系统。c) 应兼容开源组件接口，支持与开源生态对接。9.3 安全性要求应符合下列安全性要求：a)b)c)能源监管服务平台用户管理应遵从 GB/T 38673-2020 中 7.3.1 的要求。能源监管服务平台日志管理应支持日志审计和资源跟踪能力，并应遵从 GB/T7.3.3 的要求。能源监管服务平台应具备 TLS/DTLS 安全加密传输能力。38673-2020 中9.4 可扩展性要求应符合下列可扩展性要求：a) 应支持集群扩展，扩展前后保持数据均衡，实现性能提升。b) 应支持集群缩减，缩减后保持数据均衡。9.5 时效性要求应符合下列时效性要求：a) OT 数据的生成时间，应为设备终端采集时间。4b) 设备、服务器应支持时钟同步。5参 考 文 献1KSSJCJ11-2023智能化矿山数据融合共享规范通信接口与协议规范第1部分：基本要求2KSSJCJ11-2023智能化矿山数据融合共享规范通信接口与协议规范第2部分：接口3KSSJCJ11-2023智能化矿山数据融合共享规范通信接口与协议规范第2部分：服务4KSSJCJ11-2023智能化矿山数据融合共享规范通信接口与协议规范第2部分：发现5KSSJCJ11-2023智能化矿山数据融合共享规范通信接口与协议规范第2部分：连接6KSSJCJ11-2023智能化矿山数据融合共享规范通信接口与协议规范第2部分：报文7KSSJCJ11-2023智能化矿山数据融合共享规范通信接口与协议规范第2部分：配置8KSSJCJ11-2023智能化矿山数据融合共享规范通信接口与协议规范第2部分：安全9KSSJCJ11-2023智能化矿山数据融合共享规范通信接口与协议规范第2部分：管理10 煤矿智能化建设指南（2023年版）11 NHJC-10.01-2018 重点用能单位能耗在线监测系统技术规范 第 10-1 部分 电力行业数据采集指南（试行）12 NHJC-10.02-2018 重点用能单位能耗在线监测系统技术规范 第 10-2 部分 钢铁行业数据采集指南（试行）13 NHJC-10.03-2018 重点用能单位能耗在线监测系统技术规范 第 10-3 部分 石油石化行业数据采集指南（试行）6