大数据治理体系及技术应用——实现大数据价值转化

发布时间:2016-5-30信息来源:热度:

由云计算、社交计算和移动计算等三大趋势推动的大数据正在重塑业务流程、基础设施以及数据的获取、分发、存储管理、分析挖掘和使用方式。数据已经渗透到每一个行业和业务职能领域,成为一个重要的生产因素、成为未来竞争和增长基础、成为超越其同行的一种重要方式,引领新一波生产率增长和消费者盈余浪潮的到来。另一方面,计算科学和数据科学的发展,促进了海量数据分析和应用的深入,使得数据的巨大价值能够有效发掘出来,激发了数据密集型产业发展的新模式,进而对人类社会发展、科技研究、经济建设的各个领域产生革命性的影响,人类社会已经进入到“大数据(Big Data)”时代。

到2014年为止,全球的互联网用户数已达30亿人,全球互联网流量达77000PB每月。根据国际数据资讯(IDC)公司监测,全球数据量大约每两年翻一番,预计到 2020 年,全球将拥有 35ZB 的数据量,并且 85%以上的数据以非结构化或半结构化的形式存在。如此庞大的数据将如何治理?这将成为大数据发展里程中不可或缺的重要环节。

目前,国内外尚未提出完善的大数据治理体系,大数据治理仍处于空白阶段。上海软件中心围绕大数据治理的原则、范围、实施与评估等方面,开展大数据治理理论和方法研究,在现有的数据治理基础上,深入分析国内外IT治理相关的理论和方法、数据治理理念,分析大数据环境下数据治理的挑战,提出完整的大数据治理体系框架,指导组织开展数据治理;基于治理原则、驱动因素和治理机制的研究,从基础服务层、数据保障服务层、数据应用服务层三个层面,提出了数据治理标准化的要求并形成国家标准;提炼形成了可推广的大数据治理服务模式,能够协助组织有效发挥大数据的价值,并开展应用示范和业务创新;聚焦数据标准化规则及实施流程、数据质量等方面的研究,深入分析大数据治理过程中相关的支撑技术,实现数据资源的有效发现、查找、组织和管理,研发数据管理相关工具,为大数据治理的实施提供技术支撑。

大数据治理体系及技术应用研究,树立了国内在大数据治理领域的标杆,以期为其他研究者在大数据治理研究方面提供一定参考;同时也为大数据企业在大数据治理上提供一定的指导作用,帮助企业通过大数据治理的实施来进一步实现大数据价值的转化;并且可以使拥有大数据资源、需要大数据资源以及开展大数据应用研究的相关企业、行业组织、政府机构等,通过大数据治理来更好地实现大数据价值或创新服务。