趣谈大数据

趣谈大数据似乎一夜之间，大数据（Big Data）变成一个IT 行业中最时髦的词汇。 首先，大数据不是什么完完全全的新生事物，Google 的搜索服务就是一个典型的大数据运 用，根据客户的需求，Google 实时从全球海量的数字资产（或数字垃圾）中快速找出最可 能的答案，呈现给你，就是一个最典型的大数据服务。只不过过去这样规模的数据量处理和 有商业价值的应用太少，在IT 行业没有形成成型的概念。现在随着全球数字化、网络宽带 化、互联网应用于各行各业，累积的数据量越来越大，越来越多企业、行业和国家发现，可 以利用类似的技术更好地服务客户、发现新商业机会、扩大新市场以及提升效率，才逐步形 成大数据这个概念。 有一个有趣的故事是关于奢侈品营销的。PRADA 在纽约的旗舰店中每件衣服上都有RFID 每当一个顾客拿起一件PRADA进试衣间，RFID 会被自动识别。同时，数据会传至PRADA 部。每一件衣服在哪个城市哪个旗舰店什么时间被拿进试衣间停留多长时间，数据都被存储起来加以分析。如果有一件衣服销量很低，以往的作法是直接干掉。但如果RFID 传回的数 据显示这件衣服虽然销量低，但进试衣间的次数多。

那就能另外说明一些问题。也许这件衣 服的下场就会截然不同，也许在某个细节的微小改变就会重新创造出一件非常流行的产品。 还有一个是关于中国粮食统计的故事。中国的粮食统计是一个老大难的问题。中国的统计， 虽然有组织、有流程、有法律，但中央的统计人员依靠省统计人员，省靠市，市靠县，县靠 镇，镇靠村，最后真正干活或上报的是基层兼职的调查人员，由于众所周知的KPI 考核导向 的原因，层层加码，几乎没有人相信这个调查数据，而其中国家统计局的人是最不信的。在 前两年北京的一个会议上，原国家统计局总经济师姚景源向我们讲述了他们是如何做的。他 们采用遥感卫星，通过图像识别，把中国所有的耕地标识、计算出来，然后把中国的耕地网 格化，对每个网格的耕地抽样进行跟踪、调查和统计，然后按照统计学的原理，计算（或者 说估算）出中国整体的整体粮食数据。这种做法是典型采用大数据建模的方法，打破传统流 程和组织，直接获得最终的结果。 最后是一个炒股的故事。这个故事来自于2011 年好莱坞的一部高智商电影《永无止境》， 讲述一位落魄的作家库珀，服用了一种可以迅速提升智力的神奇蓝色药物，然后他将这种高 智商用于炒股。库珀是怎么炒股的呢？就是他能在短时间掌握无数公司资料和背景，也就是 将世界上已经存在的海量数据（包括公司财报、电视、几十年前的报纸、互联网、小道消息 等）挖掘出来，串联起来，甚至将Face Book、Twitter 的海量社交数据挖掘得到普通大众 对某种股票的感情倾向，通过海量信息的挖掘、分析，使一切内幕都不是内幕，使一切趋势 都在眼前，结果在10 天内他就赢得了200 万美元，神奇的表现让身边的职业投资者目瞪口 呆。

这部电影简直是展现大数据魔力的教材性电影，推荐没有看过的IT 人士看一看。 从这些案例来看，大数据并不是很神奇的事情。就如同电影《永无止境》提出的问题：人类 通常只使用了20％的大脑，如果剩余80％大脑潜能被激发出来，世界会变得怎样？在企业、 行业和国家的管理中，通常只有效使用了不到20%的数据（甚至更少），如果剩余80%数据 的价值激发起来，世界会变得怎么样呢？特别是随着海量数据的新摩尔定律，数据爆发式增 长，然后数据又得到更有效应用，世界会怎么样呢？ 单个的数据并没有价值，但越来越多的数据累加，量变就会引起质变，就好像一个人的意见 并不重要，但1 千人、1 万人的意见就比较重要，上百万人就足以掀起巨大的波澜，上亿人 足以改变一切。 数据再多，但如果被屏蔽或者没有被使用，也是没有价值的。中国的航班晚点非常多，相比 之下美国航班准点情况好很多。这其中，美国航空管制机构一个的好做法发挥了积极的作用趣谈大数据， 说起来也非常简单，就是美国会公布每个航空公司、每一班航空过去一年的晚点率和平均晚 点时间，这样客户在购买机票的时候就很自然会选择准点率高的航班，从而通过市场手段牵 引各航空公司努力提升准点率。

这个简单的方法比任何管理手段（如中国政府的宏观调控手 段）都直接和有效。这里多说一两句，过去一个暴政国家对内的控制主要是物理上的暴力， 就是强力机构权力无限大，搞国家恐怖主义；而现在一个暴政国家，主要是就靠垄断信息、 封锁信息，让民众难以获得广泛而真实的信息，从而实现国家的控制。这个信息封锁，就是 对大数据的封锁。 没有整合和挖掘的数据，价值也呈现不出来。《永无止境》中的库珀如果不能把海量信息围 绕某个公司的股价整合起来、串联起来，这些信息就没有价值。 因此，海量数据的产生、获取、挖掘及整合，使之展现出巨大的商业价值，这就是我理解的 大数据。在互联网对一切重构的今天，这些问题都不是问题。因为，我认为大数据是互联网 深入发展的下一波应用，是互联网发展的自然延伸。目前，可以说大数据的发展到了一个临 界点，因此才成为IT 行业中最热门的词汇之一。

（编辑：源码门户网）

【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容!