国内外大数据标准化现状及发展方向

图灵汇官网

大数据标准化工作的重要性

全球已经进入大数据时代,大数据作为云计算之后的新一代信息技术,对政府、企业和人们的生活方式产生了深远的影响。目前,各类大数据产品和面向各行各业的大数据应用不断涌现,迫切需要通过标准化途径来规范认知、整合资源,推动各方达成共识。这不仅有助于我国大数据产业的健康发展,还能为数据安全应用提供保障,并促进新兴服务模式如大数据交易的规范化发展。

大数据标准化工作对于推动我国大数据产业发展、加速技术与标准的融合、落实大数据国家战略具有重要意义。自2012年起,国内外的标准化组织如ITU-T、ISO/IEC、CCSA等相继开展了大数据标准化工作,目前已经发布了一些重要的标准。本文将从大数据标准体系框架出发,介绍当前国内外大数据标准化的重点方向及成果,并探讨这些方向的未来发展。

大数据标准化体系框架

大数据标准化需要科学的顶层设计。为了制定高质量、系统化的标准,大数据标准化工作组提出了我国的大数据标准体系框架。该体系总体上由七个类别组成:基础标准、数据标准、技术标准、平台和工具标准、管理标准、安全和隐私标准、行业应用标准。在大数据的不同发展阶段,标准化的需求和重点也会有所不同。例如,在标准化的初期,以术语和参考架构等基础性标准为主;随着技术的发展,其他类别的标准也变得越来越重要。例如,随着“中国制造2025”规划的提出,工业大数据的相关应用在我国迅速发展,相应的标准化工作也成为了热点。

当前国内外大数据标准化热点领域

基础标准

基础标准为整个标准体系提供了包括总则、术语、参考模型等基础性标准,是整个标准体系的基石。在这方面,ISO/IEC和ITU-T分别制定了ISO/IEC 20546和ITU-T Y.3600等标准,涵盖了大数据的概览、术语、参考架构等内容。在国内,信标委大数据标准工作组也发布了《信息技术 大数据 术语》和《信息技术 大数据 技术参考模型》等基础性标准。这些标准为大数据标准工作的进一步发展奠定了良好的基础。

数据标准

数据标准主要针对底层数据相关要素进行规范,包括数据资源和数据交换共享两个部分。数据资源包括元数据、数据元素、数据字典和数据目录等,数据交换共享则包括数据交易和数据开放共享的标准。大数据的核心价值在于对多个不同来源的数据进行关联分析,因此数据交易和开放共享的相关标准非常重要。在这一领域,ITU-T已发布了Y.3601—《大数据-数据交换框架与需求》等标准,而国内也正积极推动《信息技术 大数据开放共享》和《信息技术 数据交易服务平台》等标准的研制。

管理标准

管理标准作为数据标准的支撑体系,贯穿于数据生命周期的各个阶段,主要对数据管理、运维管理和评估进行规范。数据是企业的宝贵资产,但如何对其进行有效管理仍然是一个挑战。ITU-T SG16正在制定《数据资产管理框架》标准,国内CCSA TC601也在积极开展数据资产管理方面的标准化研究,并发布了《数据资产管理实践白皮书(2.0)》,目前正在编写3.0版本。未来还将继续进行主数据、数据标准和数据质量等标准的制订。

安全和隐私标准

数据安全和隐私保护是数据标准体系的重要组成部分,贯穿于整个数据生命周期的各个阶段。虽然大数据安全仍然继承了传统数据安全的特性,但在个人隐私保护、跨境数据流动等方面具有特殊性。欧盟颁布的《通用数据保护条例》(GDPR)进一步凸显了大数据时代数据隐私保护的重要性。在安全标准领域,ITU-T SG17正在制定多个大数据安全国际标准,国内的全国信息安全标准化技术委员会也专门设立了大数据安全标准特别工作组,已发布了《信息安全技术 个人信息安全规范》等标准,并将继续制定《大数据安全管理指南》、《个人信息安全影响评估指南》等相关标准。

行业应用标准

行业应用类标准主要是针对大数据为各个行业所提供的服务角度出发制定的规范,包括工业、政务、服务等领域。由于这些标准具有很强的针对性,国际标准组织较少涉及这一领域,但国内的热点行业标准化工作却比较活跃。尤其在工业大数据领域,信标委大数据标准工作组和CCSA TC601都在积极进行相关标准的研究。

本文来源: 图灵汇 文章作者: 达拉斯科技小牛