海洋大数据标准体系

广东省大数据标准体系规划与路线图

（2018-2020）

（征求意见稿）

指导单位：广东省经济和信息化委员会

编制单位：广东省大数据标准化技术委员会工作组

二〇一八年五月

1

一、广东省大数据标准体系 （一） 编制原则

以《广东省促进大数据发展行动计划2016-2020》及《珠江三角洲国家大数据综合实验区建设实施方案》为基础，以继承、发展、创新、提高为出发点，全面梳理国际标准、国家标准、行业标准及地方标准，结合大数据技术及产业发展现状与趋势分析，建立适应广东省大数据产业发展需求的标准体系。标准体系建设遵循以下原则：

急用先行、成熟先上。对大数据领域急需的开放共享、交易流通等标准重点投入，先行研制；对国内外已有的数据分析、处理、数据质量、数据安全等相关国际标准及研究成果，优先支持等同转化。

面向需求、注重实效。从产业信息化和产业数字化发展的要求出发，面向我省电子政务、电子商务及重点行业的数字化服务需求，把规范服务行为、提升服务质量、培育新型服务模式为抓手，调动行业各参与方推进标准化工作的积极性，提升标准的科学性、合理性和有效性。

资源整合、统筹规划。以培育并形成完善的大数据服务市场为总体目标，明确标准化工作思路、内容及具体的推进措施，整合数据资源

感谢观看

广东省大数据标准体系规划与路线图

（2018-2020） （征求意见稿）

指导单位：广东省经济和信息化委员会 编制单位：广东省大数据标准化技术委员会工作组

二〇一八年五月

感谢您的观看

感谢观看

一、广东省大数据标准体系 （一） 编制原则

以《广东省促进大数据发展行动计划2016-2020》及《珠江三角洲国家大数据综合实验区建设实施方案》为基础，以继承、发展、创新、提高为出发点，全面梳理国际标准、国家标准、行业标准及地方标准，结合大数据技术及产业发展现状与趋势分析，建立适应广东省大数据产业发展需求的标准体系。标准体系建设遵循以下原则：

急用先行、成熟先上。对大数据领域急需的开放共享、交易流通等标准重点投入，先行研制；对国内外已有的数据分析、处理、数据质量、数据安全等相关国际标准及研究成果，优先支持等同转化。

面向需求、注重实效。从产业信息化和产业数字化发展的要求出发，面向我省电子政务、电子商务及重点行业的数字化服务需求，把规范服务行为、提升服务质量、培育新型服务模式为抓手，调动行业各参与方推进标准化工作的积极性，提升标准的科学性、合理性和有效性。

资源整合、统筹规划。以培育并形成完善的大数据服务市场为总体目标，明确标准化工作思路、内容

基于大数据分析的未来消费模式研究及应用

[摘要] 一开始，人们因为需要而消费，我们饿了所以要买食物，我们冷了所以要买衣服，生存问题解决后，人们因为欲望而消费，我们要过更好的生活，更体面，更高端，让别人羡慕仰望，所以商家拼命挑起我们的欲望，让我们心甘情愿地去买我们并不需要的东西。现在，感情也成为消费的一大动力了，对于商家来说，你对一个人的喜爱，也是可以换算成钱的，感情就这样变成了一门生意。也许这就是大数据时代的消费方式，你的每一种需要都能得到满足，你的每一次喜欢都能落到实处。你以为这都是你主动的选择，其实你的好恶早已被精确分析计算过，你爱上一个偶像，他及时又熨帖地奉上打着他的标签的商品，你惊喜地发现，这东西正是你的那杯茶，你没喜欢错人，于是，你心满意足地掏钱，他欢欣鼓舞地收钱，皆大欢喜。

第一章 背景概述

40多年在人类沧海桑田的历史上仅仅是弹指一挥间，摩尔定律却见证了电脑的数据处理和储存能力从K（Kilobyte）到M（Megabyte）到G（Gigabyte）到T（Terabyte）的变迁。尤其是互联网的出现，让我们急速地跨入了大数据（Big Data）时代。其主要的驱动力有以下几点：

1、随着社会经济的发展和个人收入的增加，人们

大数据

一、大数据概念

\大数据\是一个体量特别大，数据类别特别大的数据集，并且这样的数据集无法用传统数据库工具对其内容进行抓取、管理和处理。 \大数据\首先是指数据体量(volumes)大，指代大型数据集，一般在10TB规模左右，但在实际应用中，很多企业用户把多个数据集放在一起，已经形成了PB级的数据量；其次是指数据类别(variety)大，数据来自多种数据源，数据种类和格式日渐丰富，已冲破了以前所限定的结构化数据范畴，囊括了半结构化和非结构化数据。接着是数据处理速度（Velocity）快，在数据量非常庞大的情况下，也能够做到数据的实时处理。最后一个特点是指数据真实性（Veracity）高，随着社交数据、企业内容、交易与应用数据等新数据源的兴趣，传统数据源的局限被打破，企业愈发需要有效的信息之力以确保其真实性及安全性。

百度知道-大数据概念

大数据（big data），指无法在可承受的时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。

在维克托·迈尔-舍恩伯格及肯尼斯·库克耶编写的《大数据时代》[3] 中大数据指不用随机分析法（抽样调查

大数据

一、大数据概念

\大数据\是一个体量特别大，数据类别特别大的数据集，并且这样的数据集无法用传统数据库工具对其内容进行抓取、管理和处理。 \大数据\首先是指数据体量(volumes)大，指代大型数据集，一般在10TB规模左右，但在实际应用中，很多企业用户把多个数据集放在一起，已经形成了PB级的数据量；其次是指数据类别(variety)大，数据来自多种数据源，数据种类和格式日渐丰富，已冲破了以前所限定的结构化数据范畴，囊括了半结构化和非结构化数据。接着是数据处理速度（Velocity）快，在数据量非常庞大的情况下，也能够做到数据的实时处理。最后一个特点是指数据真实性（Veracity）高，随着社交数据、企业内容、交易与应用数据等新数据源的兴趣，传统数据源的局限被打破，企业愈发需要有效的信息之力以确保其真实性及安全性。

百度知道-大数据概念

大数据（big data），指无法在可承受的时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。

在维克托·迈尔-舍恩伯格及肯尼斯·库克耶编写的《大数据时代》[3] 中大数据指不用随机分析法（抽样调查

1.1 大数据技术国内外研究进展

近年来，大数据迅速发展成为工业界、学术界甚至世界各国政府高度关注的热点。《自然(Nature)》和《科学(Science)》等杂志相继出版专刊来探讨大数据带来的挑战和机遇。著名管理咨询公司麦肯锡声称，“数据已经渗透到当今每一个行业和业务职能领域，成为重要的生产因素。人们对于大数据的挖掘和运用，预示着新一波生产力增长和消费者盈余浪潮的到来”。在这样的背景下，美国政府2012年宣布投资2亿美元启动“大数据研究和发展计划”，这是继1993年美国宣布“信息高速公路”计划后的又一次重大科技发展部署。美国政府认为大数据是“未来的新石油”，一个国家拥有数据的规模和运用数据的能力将成为综合国力的重要组成部分，对数据的占有和控制将成为国家间和企业间新的争夺焦点。大数据已成为社会各界关注的新焦点，“大数据时代”已然来临。

与传统规模的数据工程相比，大数据的感知、获取、存储、表示、处理和服务都面临着巨大的挑战。这归因于大数据具有几个突出的特征：1)数据集合的规模不断扩大，已经从GB、TB再到PB，甚至已经开始以EB和ZB来计数。IDC的研究报告称，未来十年全球大数据将增加50倍，管理数据仓库的服务器数量将增加10倍以便适应这一增长

Uj2nm 大数据产业链及技术体系逐渐成熟

近年来，随着固网宽带、移动互联网、物联网等的快速发展，数据正呈爆炸式增长，大数据时代已经来临。对于电信运营商而言，如何让自己拥有的庞大数据资源，产生更大的价值成为业界各方关注的焦点话题。

大数据产业链及技术体系逐渐成熟

2001年，Gartner的研究员道格。莱尼将数据增长的挑战定

义为3个方面（3V）：日益增长的数据量（Volume）、速度（Velocity）、多样性（Variety）。2011年5月，维克托·迈尔—舍恩伯格在《大数据时代》一书中，指出大数据时代与传统“小数据”时代在处理数据的理念方面的巨大转变，企业必须积极适应、应对大数据的巨大转变，才能在未来的激烈竞争中占据有利地位，否则将会在整个价值链中被边缘化。

大数据的引入，相比传统的数据仓库与商务智能，在策略上与技术两个方面都带来一系列的挑战。麦肯锡在《大数据的下

一个前沿：创新、竞争和生产力》报告中正式提出大数据对创新、竞争与生产力的推动作用：数据更透明、更可用，改善企业流程绩效，改善客户体验，提升决策能力，业务模式和产品创新。 目前，大数据的产业链正在不断完善。大数据产业的上游是一批能够掌握大数据标准、入口、

《大数据》题目

一、 单选题

1)

大数据的4V特点：Volume、Velocity、Variety、Veracity，其中他们的含义分别是（ 1 ）、（ 2 ）、（ 3 ）、（ 4 ）。 A.价值密度低

B.处理速度快

C.数据类型繁多

D.数据体量巨大

2)

大数据技术的战略意义不在于掌握庞大的数据信息，而在于对这些含有意义的数据进行（ 5 ）。 A. 数据信息

B. 专业化处理

C.速度处理

D. 内容处理

3)

随着谷歌（ 6 ）和（ 7 ）的发布，大数据不再仅用来描述大量的数据，还涵盖了处理数据的 （ 8 ）。 6: A.Map

B.Docs

C. YouTube

D. MapReduce

D. Google

7: A. Google Mobile Docs 8: A.质量

4)

B. iGoogle C. GoogleFile System

B. 速度 C.精度 D. 进度

斯隆数字巡天是使用位于新墨西哥州阿帕奇山顶天文台的2.5米口径望远镜进行的红移巡天项目，2012年4月发布的关于Qu

大数据时代Is coming……

大数据时代 认识大数据 大数据带来的变革 大数据背景下的企业管理

大数据的商业价值 大数据的风险

大数据

何为大？—数据度量 1Byte = 8 Bit 1KB = 1,024 Bytes 1MB = 1,024 KB = 1,048,576 Bytes 1GB = 1,024 MB = 1,048,576 KB = 1,073,741,824 Bytes 1TB = 1,024 GB = 1,048,576 MB = 1,099,511,627,776 Bytes 1PB = 1,024 TB = 1,048,576 GB =1,125,899,906,842,624 Bytes 1EB = 1,024 PB = 1,152,921,504,606,846,976 Bytes 1ZB = 1,024 EB = 1,180,591,620,717,411,303,424 Bytes 1YB = 1,024 ZB = 1,208,925,819,614,629,174,706,176 Bytes

大数据 《红楼梦》含标点87万字(不含标点853509字) 每个汉字占

大数据综述

大数据作为互联网、物联网、移动计算、云计算之后IT产业又一次颠覆性的技术变革，正在重新定义社会管理与国家战略决策、企业管理决策、组织业务流程、个人决策的过程和方式。随着科技和社会的发展进步加上计算机和网络技术的兴起，社交网络、物联网、云计算以及多种传感器的广泛应用，使数量庞大，种类众多，时效性强为特征的数据的不断涌现，引发了数据规模的爆炸式增长[1]。

国际数据公司（International Data Corporation，IDC）研究报告称：2011 年全球被创建和被复制的数据总量超过1. 8ZB，且增长趋势遵循新摩尔定律（全球数据量大约每两年翻一番），预计 2020 年将达到 35ZB。与此同时，数据复杂性也急剧增长，其多样性（多源、异构、多模态、不连贯语法或语义等) 、低价值密度（大量不相关信息、知识“提纯”难度高）、实时性（数据需实时生成、存储、处理和分析）等复杂特征日益显著。预示着全球已然进入了“大数据”时代[2]。 1.大数据国外研究现状 1.1大数据相关理论的研究

“大数据”这一术语从2008年开始在科技领域中出现，随之引起学术界的广泛研究兴趣。《Nature》与《Science》杂志分别出版专刊，从互联