大数据的前世今生——
从科学“预言”中走来
大数据的历史可追溯到上世纪80年代。1980年,著名未来学家阿尔文·托夫勒在《第三次浪潮》一书中作出预言,“如果说IBM的主机拉开了信息化革命的大幕,那么大数据则是第三次浪潮的华彩乐章。”可以想见,在那个岁月,还没有多少人能明白大数据的具体含义,更没有多少人能“远眺”大数据在30年后从书中跳入现实世界。
回顾近些年的技术发展,从数据存储介质容量的变化可以很直观地看到数据规模的变化。就在几年前,几百兆的移动存储设备还是主流。而现在,GB、TB级别的移动存储设备已成为个人普通设备,企业级应用则到了PB、EB级别。传统数据产生的来源比较集中,现在,依照摩尔定律和吉尔德定律,数据以大约12个月翻一番的“爆炸”速度急速增长。传统数据格式多是文本为主的结构化数据。而现在,半结构化和非结构化数据越来越多,包括网络日志、地理位置、图片、音频、视频等。传统数据间的关系大多数为已知的,而现在,数据间很少有已知的关系。
大数据有多“大”?比较公认的解释认为,大数据是指那些已经超出了传统数据的尺度,一般的技术与工具难以获取、存储、管理和分析。这里,超出传统数据尺度的海量数据,也即“大”,并不需要给出普遍适用的定义。如麦肯锡全球研究所就认为,我们不需要给大数据之“大”定出一个具体“尺寸”,因为随着技术进步,这个尺寸本身还在不断增大。对于不同的领域而言,“大”的定义也是不同的。大数据具有规模性(Volume)、多样性(Variety)、实时性(Velocity)、价值性(Value)的“4V”特征,被视为“未来的新石油”。通过大数据的交换、整合、分析,新的知识、新的规律将被发现,新的意义、新的价值将被产生。人们期盼大数据催生“大知识”“大科学”,引导“大转变”“大创造”,带来“大利润”“大发展”。
大数据用于军事领域——
可望改变未来战争
美国战略之页网站1月5日报道,自2009年以来,美国海军一直在研发和测试一系列微型机器人潜艇。这些潜艇在水下自动运行,收集盐分与温度数据,每隔1小时左右短暂浮出水面,并通过卫星回传数据。这些数据将提高友军使用声呐系统的有效性,更易于侦察和跟踪敌军潜艇。这正是大数据在军事领域应用的一个范例。
从计算机到因特网,军事领域一直都是人类最先进科技的“孵化器”和“实验床”。大数据也享受了这一“待遇”。美国政府在财政非常紧张的情形下,依然慷慨地向国防部下属的各项大数据研究计划投入数亿美元巨资来加强研究。可以预见,美军大数据的应用,很可能在军事领域带来一场新的变革,甚至改变未来战争的面貌。
首先,大数据将使情报侦察和决策能力产生质的飞跃。以美国为例,美军明确提出,要通过大数据将其情报分析能力提高100倍以上。如果这一目标实现,那在这一领域其他国家与美军的差距就不能以简单的代差来衡量。美军通过多年的发展,已拥有全球最先进的情报侦察系统,对海量情报数据的分析,一直是美军情报侦察能力的短板,而大数据正好能够帮助美军突破这一瓶颈。
其次,大数据将促进各类新型武器装备加速产生。美军大数据研究的第一个重要目标,就是通过大数据创建真正能够自主决策和自主行动的无人系统。以无人机为例,未来无人机有可能摆脱人的控制而实现完全的自主行动。美军2013年试飞的X-47B就是这一系统的代表,它已经可以在完全无人干预的情况下,自动在航母上完成起降并执行作战任务。












