ICS 35.240.01 L 70 DB15 内 蒙 古 自 治 区 地 方 标 准 DB15/T 1591—2019 政务数据生命周期管理规范 Government data lifecycle management specification 2019-02-20 发布 内蒙古自治区市场监督管理局 2019-05-20 实施 发 布 DB15/T 1591—2019 目 次 前言 ................................................................................ II 1 范围 .............................................................................. 1 2 规范性引用文件 .................................................................... 1 3 术语和定义 ........................................................................ 1 4 概述 .............................................................................. 2 5 政务数据采集 ...................................................................... 3 6 政务数据传输 ...................................................................... 3 7 政务数据存储 ...................................................................... 3 8 政务数据处理 ...................................................................... 4 9 政务数据使用 ...................................................................... 6 10 政务数据退役 ..................................................................... 6 I DB15/T 1591—2019 前 言 本标准按照GB/T 1.1—2009给出的规则起草。 请注意本文件的某些内容可能涉及专利。本文件的发布机构不承担识别这些专利的责任。 本标准由内蒙古自治区大数据发展管理局提出并归口。 本标准起草单位：内蒙古自治区大数据发展管理局、中国电子技术标准化研究院、内蒙古自治区标 准化院、江苏中堃数据技术有限公司、山东易拓信息咨询有限公司、北京国脉互联信息顾问有限公司。 本标准主要起草人：张世铭、包瑞林、敖继红、周佳琪、翟瑞霞、董建、张群、卫凤林、李冰、尹 卓、王为中、魏清、万欣、张海静、隗玉凯、杨翰学、殷文涛、简文鹏、夏乐乐 李丽、古庆、敖其尔。 II DB15/T 1591—2019 政务数据生命周期管理规范 1 范围 本标准给出了政务数据生命周期包含的政务数据采集、政务数据传输、政务数据存储、政务数据处 理、政务数据使用和政务数据退役六个阶段的要求。 本标准适用于内蒙古自治区政务数据的开放共享。 2 规范性引用文件 下列文件对于本文件的应用是必不可少的。凡是注日期的引用文件，仅注日期的版本适用于本文件。 凡是不注日期的引用文件，其最新版本（包括所有的修改单）适用于本文件。 GB/T 35295—2017 信息技术 大数据 术语 GB/T 35589—2017 信息技术 大数据 技术参考模型 3 术语和定义 GB/T 35295—2017和GB/T 35589—2017界定的，以及下列术语和定义适用于本文件。 3.1 政务数据 government data 各级政务部门及其技术支撑单位在履行职责过程中依法采集、生成、存储、管理的各类数据资源。 3.2 数据生命周期 data lifecycle 将原始数据转化为可用于行动的知识的一组过程。 3.3 政务数据提供者 government data provider 基于统一数据共享交换平台,利用各种技术向其他政府部门、事业单位、团体机构、企业或公众提 供政务数据的实体。 3.4 政务数据使用者 government data consumer 使用政务数据的实体，包括政府部门、事业单位、团体机构、企业或公众。 1 DB15/T 1591—2019 3.5 政务信息资源 government information resource 政务部门在履行职责过程中制作或获取的，以一定形式记录、保存的文件、资料、图表和数据等各 类信息资源，包括政务部门直接或通过第三方依法采集的、依法授权管理的和因履行职责需要依托政务 信息系统形成的信息资源等。 3.6 政务信息资源目录 government information resource directory 基于规范的元数据，对政务数据资源的构成、分类、分布、内容、格式、媒体等特征进行描述的一 组信息，以便于快速有序对政务数据进行定位、检索与获取。 4 概述 政务数据生命周期主要包括政务数据采集、政务数据传输、政务数据存储、政务数据处理、政务数 据使用和政务数据退役六个阶段，结构图见图1。 图1 数据生命周期结构图 ——政务数据采集：组织机构内部系统中新产生数据，以及从外部系统收集政务数据的阶段； ——政务数据传输：政务数据从一个实体通过网络流动到另一个实体的阶段； ——政务数据存储：政务数据以任何数字格式进行物理存储或云存储的阶段； ——政务数据处理：针对政务数据进行计算、分析、可视化等操作的阶段； ——政务数据使用：组织机构及个人发布或访问政务数据的阶段； ——政务数据退役：对政务历史数据的管理过程，包括归档和销毁操作。 2 DB15/T 1591—2019 5 政务数据采集 政务数据采集阶段要求如下； a) 应明确政务数据开放共享工作的领导机构和工作机制； b) 应明确政务数据开放共享的组织规划； c) 应实现政务数据的电子化、系统化建设及管理； d) 应对政务数据进行分类分级管理； e) 应对政务数据采集的合规性、正当性和执行上的一致性进行管理； f) 应对政务数据源的身份进行管理，防止数据仿冒和数据伪造； g) 应对政务数据采集过程中采集的数据质量进行管理； h) 应优先采用国家、行业等规范约定的数据格式，宜兼顾不同数据需求方的应用需求； i) 应提供可机读的电子格式及相关软件版本信息； j) 开放共享的数据集应以开放的、非专属的格式提供，包括电子文件格式、电子表格格式、图形 图像文件格式、流媒体文件格式、自描述格式等； k) 无法按照要求的形式提供政务数据的，政务数据提供者可通过安排查阅相关资料、提供复制件 或者其他适当形式提供； l) 应提供智能采集、自动采集、半自动采集和手工采集等多种采集方式； m) 应向政务数据采集对象明示数据采集的基本用途。 6 政务数据传输 政务数据传输阶段要求如下： a) 应对数据传输过程中的加密保护措施进行管理，保证传输通道、传输节点和传输数据的安全； b) 应对数据的传输进行完整性保护，包括完整性检测和恢复； c) 应对数据传输过程中的网络稳定性进行管理。 7 政务数据存储 政务数据存储阶段要求如下： a) 应按照统一规范编制数据资源目录； b) 应将已编制目录存储到本级共享交换平台，且同步存储到自治区及国家共享交换平台； c) 应根据数据资源共享方式分层、分级存储到相应的共享交换平台； d) 应支持文件的分布式存储机制和分布式数据库系统存储； e) 应支持结构化数据和非结构化数据的存储； f) 应支持包括批量，交互查询，实时流、内存计算等典型的大数据场景的存储； g) 应对数据存储介质进行管理，防止对介质的不当使用引发数据泄露； h) 应对数据的逻辑存储、存储容器和架构进行管理； i) 应对数据的备份和恢复进行管理。 3 DB15/T 1591—2019 8 政务数据处理 8.1 政务数据预处理 政务数据预处理阶段要求如下： a) 应将来源于本单位政务信息系统的数据库表资源和文件资源进行整理，形成便于政务数据使用 者识别与应用的可共享库表和文件资源； b) 应按规范的流程执行数据清洗加工、标准化、格式化操作，数据处理后满足如下质量要求； 1) 规范性：数据信息项定义应优先采用国家、行业相关数据标准，各级政务部门实施开放共 享数据工程前应先统一数据标准； 2) 完整性：对于应满足需求的数据记录不应有缺失、重复，数据信息应完整，对敏感数据去 标识化应保证最小颗粒度数据的完整展现； 3) 一致性：不同数据集中描述同一对象的同一度量值在信息含义上不可冲突； 4) 准确性：数据记录的内容应真实反映实际情况且有效，不能存在异常或错误，不能出现不 可识别的内容； 5) 及时性：数据记录应及时更新，保证数据的时效性和准确性。 c) 应进行数据去标识化工作。 8.2 政务数据分析 政务数据分析阶段要求如下: a) 应支持通过标准的数据库连接接口进行查询； b) 应支持 REST API 查询接口进行查询； c) 应支持建立数据索引，达到查询加速的效果； d) 应支持精确查询和模糊查询； e) 宜支持基于规则或者基于成本的查询优化； f) 宜支持数据分片和多副本技术优化查询速度； g) 宜支持通过 SQL 进行复杂条件高并发查询； h) 宜支持二级索引； i) 应提供多种数据分析的能力，包括描述性分析、诊断性分析、预测性分析、因果性分析； j) 应支持多种分析模式，包括离线分析、实时分析和交互式分析； k) 应提供统计分析、机器学习、文本分析、视频分析等多种分析方法、模型和工具； l) 应支持数据挖掘算法库、图处理算法库； m) 数据分析过程中应采取安全控制措施，防止有价值信息和个人隐私泄露。 4 DB15/T 1591—2019 8.3 政务数据可视化 政务数据可视化阶段要求如下： a) 应支持常见的数据源数据格式作为输入； 示例：Excel、关系型数据库、JSON、XML。 b) c) d) 应支持对高维数据的可视化展示； 支持可视化分析工具库,包括以下可视化形式： 1)