政府公共大数据资源共享与治理机制及实践研究

With the increasing penetration of big data into all aspects of society and economic activities, data and its resulting knowledge exchange frequents among all the participants. Big data sharing and coordinated management have thus become key issues in big data driven management and decision applications. Guizhou province is the pioneer in implementing the Big Data strategy of China. This project aims to explore the theory and methodologies for big data sharing and management mechanisms based on the PB bytes of government big data of Guizhou province as the data source.To achieve these goals, this project develops: 1) metadata standard of government data, correlation analysis and value estimation methods, data quality standard, processing and cleaning approaches for public big data; quality standards for sharing big data; 2) sharing mechanisms for government data resource directories; shared data resource pools of government data, data pipeline based sharing techniques, data sharing and exchange mechanisms for cross-levels, cross-department, and cross-region big data; 3) highly efficient load-balanced open storage technique based on the research of data sharing systems of public big data; application case studies of developed techniques. This transformative research will push the boundary of big data driven management and decision research in China and provide solid support for management decisions in the development of China society and economy.

随着大数据与社会经济生活的融合深化，数据及所产生知识在各主体间流动频繁，大数据资源治理和协同管理成为大数据驱动的管理与决策应用的核心问题。贵州是我国大数据战略的排头兵，项目以贵州省汇聚的PB级政府公共大数据为实证研究对象，研究大数据共享与治理机制的理论与方法：（1）研究政府核心元数据规范，设计数据关联分析和价值评价方法，构建公共大数据的数据质量标准与加工清洗规范，建立大数据共享的质量标准体系；（2）研究政府数据资源目录共享机制，政府数据共享资源池技术及基于数据管道的有效数据共享技术，建立跨层级、跨部门、跨地区的数据共享与交换机制，形成大数据资源的共享机制与治理模式；（3）在研究政府公共大数据共享平台体系结构的基础上，研发政府公共大数据融合共享平台并进行应用示范。项目成果将促使我国大数据驱动的管理与决策领域跻身国际前列，为我国经济社会发展的管理决策提供支持。

项目针对基于政府公共大数据“聚、通、用”的政府管理与决策过程中遇到的“质量差异，亟需标准”、“聚而不通，难以共享”、“顾虑重重，缺乏实践”三个痛点问题，在大数据共享的质量标准体系、大数据资源的共享机制与治理模式、政府公共大数据共享平台体系结构与实践等三方面开展理论研究和应用研究。.1）大数据共享的质量标准体系方面，结合政府数据资源共享和元数据基础理论，针对政府数据特征和描述需要，设计了符合我国政府共享数据的政府数据资源元数据格式，制定了《政府数据 开放数据核心元数据》标准。2）大数据资源的共享机制与治理模式方面，针对政府数据跨层级，跨部门，跨地区的特性，研究公共大数据的共享技术和方法，提出了可实时对流计算进行追溯且对大量异构数据进行实时转储的方法，提高数据在分布式数据库中的交换和共享，实现公共大数据在跨层级、跨部门、跨地区的实时有效共享。3）政府公共大数据共享平台体系结构与实践方面，基于“云上贵州”政府公共大数据，展开了示范应用。基于“三权五可”构建了政府数据治理体系的“一云一网一平台”；利用大数据技术，开发了集精准性、有效性、示范性于一体的精准扶贫大数据支撑平台；基于工业大数据信息获取、存取、应用、安全等方面的关键科学问题，研发了工业大数据“贵州工业云”平台；面向贵州高级人民法院数据实现了知识图谱构建，研发了智慧法院知识搜索平台。运用大数据手段提升了政府治理社会的能力、提高了政府决策管理能力、实现了政府公共大数据共享平台应用示范。.项目围绕政府公共大数据管理和决策过程的痛点问题，以政府公共大数据为研究对象，研究了政务大数据共享的质量标准体系、政务大数据资源的共享机制与治理模式、政府公共大数据共享平台体系结构与实践等内容。通过本项目的研究规范了政府数据基础体系、提高了政府数据共享效率、提升了政府数据治理能力、降低了政府数据管理成本。