1大数据时代.docx

《1大数据时代.docx》由会员分享，可在线阅读，更多相关《1大数据时代.docx（3页珍藏版）》请在第一文库网上搜索。

1、大数据时代【摘要】“大数据“用来描述和定义这个年代产生的海量数据，指的是所涉及的资料量规模巨大到无法通过目前主流软件工具，在合理时间内达到撷取、管理、处理、并整理成为帮助企业经营决策更积极目的的资讯，并命名与之相关的技术发展与创新。大数据主要有四个特点：大量、高速、多样、价值。在经历了几年的批判、质疑、讨论、炒作之后，大数据终于迎来了属于它的时代。【关键词】大数据；概念；特点这是一个信息爆炸的时代，早在2012年，“大数据”一词就开始被越来越多的IT人挂在嘴边，人们通常用它来描述和定义这个年代产生的海量数据，并命名与之相关的技术发展与创新。大数据，通俗地说就是海量资料。指的是所涉及的资料量规模

2、巨大到无法通过目前主流软件工具，在合理时间内达到撤取、管理、处理、并整理成为帮助企业经营决策更积极目的的资讯。要理解大数据，首先要明白什么是数据，数据不只是简简单单的阿拉伯数字，这是门外汉的肤浅理解，此外，数据又并非单纯指人们在互联网上发布的信息，小到人们排队需要的分钟数，大到全世界的工业设备、汽车。仪表上有着无数数码传感器，随时测量和传递着有关位置、运动、震动、温度、湿度乃至空气中化学物质的变化，这也产生了海量的数据信息。最早提出大数据概念的学科是天文学和基因学，这两个学科从诞生之日起就依赖于基于海量数据的分析方法。大数据可以说是计算机和互联网结合的产物，计算机实现了数据的数字化，互联网实现

3、了数据的网络化，两者结合才赋予了大数据生命力。随着互联网如同空气、水、电一样无处不在地渗透入我们的工作和生活，加上移动互联网、物联网、可穿戴联网设备的普及，新的数据正在以指数级别的加速度产生。据说目前世界上90%的数据是互联网出现以后迅速产生的。但是大数据不是一个空泛的IT词汇，它在我们的生活中越来越占有更加重要的地位，尤其在商业方面。饭店如果可以获得用户在哪个时段的数量，以及他们购买的食品，店主就可以更好得采购材料，甚至提前做好食品，提供给食客们更快的服务，增加销售额，减轻销售员负担；当我们使用搜索网站进行搜索时，网页可能会记录下来我们的搜索历史，提交给搜索引擎，然后浏览器智能地分析我们的数

4、据，向我们推广相关产品的广告，等等这些都是在商业方面的应用。在我们的生活中大数据也有不可忽视的作用，当我们每天在公路上开车时，我们的智能手机会发送我们的位置信息以及速度，然后结合实时交通信息为我们提供最佳路线，从而避免堵车，结合位置应用程序，还可以为我们提供附近的餐馆、银行、加油站等信息，我们手机里的公交车软件甚至可以通过定位系统帮我们报站，以及提醒我们，让我们避免坐过站。不仅如此，洛杉矶警察局和加利福尼亚大学曾经合作利用大数据预测过犯罪的发生，谷歌流感趋势(GOOg1eF1uTrends)可以利用搜索关键词预测禽流感的散布，统计学家NateSi1Ver利用大数据成功预测美国选举结果。大数据具

5、有4V特点：第一，Vo1ume（大量），数据体量巨大。从TB级别，跃升到PB级别；第二，Ve1OCity（高速）处理速度快，1秒定律，这一点也是和传统的数据挖掘技术有着本质的不同；第三，Variety（多样）数据类型繁多。前文提到的网络日志、视频、图片、地理位置信息等等；第四，Va1ue（价值）价值密度低，商业价值高，以视频为例，连续不间断监控过程中，可能有用的数据仅仅有一两秒。大数据对于每个人、每个国家来说都是挑战和机遇并存的。去年，美国奥巴马管理当局宣布成立大型数据研究和发展倡议（BigDataResearchandDeve1opmentInitiative）,致力于帮助政府部门如何利用大

6、数据解决重大问题，该倡议包括84个不同的大数据项目工程和6个部门。奥巴马政府甚至将大数据定义为“未来的新石油此外，美国联邦政府还拥有当今世界上最顶级的十大超级计算机中的六个。这些都表明美国十分重视在大数据方面的发展，我们国家也开始鼓励培养更多的大数据人才。2013年5月10B,阿里巴巴集团董事局主席马云在淘宝十周年晚会上，将卸任阿里集团CEO的职位，并在晚会上做卸任前的演讲，马云说，大家还没搞清PC时代的时候，移动互联网来了，还没搞清移动互联网的时候，大数据时代来了。淘宝网双十一购物节活动的成功就离不开大数据。不仅淘宝公司重视大数据，其他互联网公司同样把大数据放在了至关重要的位置，微软公司生产

7、了一款数据驱动的软件，主要是为工程建设节约资源提高效率。在这个过程里可以为世界节约40%的能源。抛开这个软件的前景不看，从微软团队致力于研究开始，可以看出他们对大数据的重视，他们已经开始努力要在大数据方向走在前列。在经历了几年的批判、质疑、讨论、炒作之后，大数据终于迎来了属于它的时代。大数据时代来临首先由数据丰富度决定的。社交网络兴起，大量的UGC（互联网术语，全称为USerGeneratedContent,即用户生成内容的意思）内容、音频、文本信息、视频、图片等非结构化数据出现了。另外，物联网的数据量更大，加上移动互联网能更准确、更快地收集用户信息，比如位置、生活信息等数据。从数据量来说，已

8、进入大数据时代，但硬件明显已跟不上数据发展的脚步。未来，数据可能成为最大的交易商品。但数据量大并不能算是大数据，大数据的特征是数据量大、数据种类多、非标准化数据的价值最大化。因此，大数据的价值是通过数据共享、交叉复用后获取最大的数据价值。在他看来，未来大数据将会如基础设施一样，有数据提供方、管理者、监管者，数据的交叉复用将大数据变成一大产业。据统计，大数据所形成的市场规模在51亿美元左右，而到2017年，此数据预计会上涨到530亿美元。也基于此，大数据安全已经上升到了国家战略安全层面。传统意义上的国家安全，是指军队对国家领土安全的保护，是国家之间军事实力的较量。但在互联网高度发达的大数据时代，

9、网络变成了几乎是透明的虚拟世界，也因此使国家安全的环境和内涵发生了极大的变化，对大数据的安全保存、防丢失和防破坏等问题，成为我们必须要面对的安全难题。大数据安全，已经上升成为国家安全的重要组成部分。在大数据时代，数据安全的威胁随时都有可能发生。各种国家信息基础设施和重要机构所承载着的宠大数据信息，如由信息网络系统所控制的石油和天然气管道、水、电力、交通、银行、金融、商业和军事等，都有可能成为被功击的目标。此外，大数据也为网络恐怖分子提供了新的资源支持，有可能使恐怖分子通过网络侵入到人们工作生活的方方面面，并通过威胁、攻击、破坏，瘫痪民用或军事基础设施等手段，达到其制造心理恐慌和财产损失，威胁国

10、家安全和社会安全的目的。这就需要我们国家加快培养大数据人才的脚步，增加对大数据研究的投入。未来社会的竞争不是劳动生产率的竞争，而是知识生产率的竞争。数据是信息的载体，是知识的源泉，能够创造极大的价值和利润，未来基于知识的竞争将集中表现于数据竞争。而未来的数据竞争又将是大数据的竞争，大数据的收集、整理、分析和发布能力将成为关键之所在，某种程度上可以说是得大数据者得天下。另外，面对大数据时代的挑战，统计的一个重要职责是培养能够整理和分析大数据的人才，即“数据科学家数据科学家是指对数据的数字化重现与认识，并在数据领域有一定贡献的人，一般应具备统计分析、对数据的提取与综合以及数据的可视化表示等多种能力。