企业网D1Net 2012年3月23日 如今，计算机正喷涌出一系列涉及各个领域的庞大数据量，如同“滚滚的岩浆”在网络的传播下喷向世界各地。这些数据如蔓延在空中的“火山灰”，影响广泛，是企业日常运营过程中不可或缺的财富，但也给企业带来了一此问题和挑战!

上个世纪80年代的软盘存储空间还相当有限，而现在存储空间已扩大了成千上万倍。据说，1981年，盖茨在推出的IBM PC后曾断言： “ 640KB应是已经足够的了”。但盖茨一直否认他曾有这样的断言，对此人们各持所见，并对早期微软称 “英特尔8088处理器原有的供电PC只能处理640千字节的随机存取存储器（RAM）”的存储限制很小表示质疑。我相信断言的真实度确实有待进一步证实，盖茨作为计算机领域的佼佼者，应该明白计算机技术的更新周期之短与前景的无限性，妄下断言，斩断自己的发展退路，他还不至于会犯这样低级的错误。

但盖茨并没预测到，三十年之内计算机处理数据的量会如泄洪般猛增，我们不得不用整一套新的倍数来形容它的爆炸 —— 从千兆兆字节到数TB到PB ， EB, zettabytes再到yottabytes（2^80或10^23） 。三十几年之后，我在电脑上写下这篇约有四个千兆字节（GB ）的文章，已大约是原来的PC工作记忆6000倍，计算机的存储量可见一斑。

近年来，我们的数字生态系统的数据量爆炸性的增长，其范围涉及各个领域。例如，在科研领域，现在已高达140万亿字节和计数，按此趋势，到2016年时，若其继续联机，其庞大的数据量可想而之，再有就是大型强子对撞机（LHC）的喷出，仅在2010年，就有13 PB ——13米千兆字节 的 数据量，而在生活应用上，一些大的网上零售商，如沃尔玛， Tesco和亚马逊，每隔一小时就有数百万计的交易，每天必然有相应庞大的数据存入数据库。通过数据库，他们如“扫雷”般在数据库中获取相关的数据以探知市场行情，消费行为和其他信息。同样，大家平时常用的一些软件，如百度，谷歌，Facebook和Twitter等一样有相应的数据库以存储大量数据。

信息时代的今日，数据对企业而言就是新的黄金。数据如洪流般袭来，其发展速度极快，它的规模是可预见的。在非虚拟世界中，技术已经产生，廉价而轻巧的传感器已遍及各个领域，它为信息的收集提供了更大的便利。而新的互联网址协议和IPv6提供的地址空间已足够大，它给每个人一个唯一的地址，这就意味着计算机可以“养活”按日，小时乃至分钟的数据，其精确度甚至到可以探知到航空母舰上的某处斑点。

但当我们以最大的限度收集和存储数据，并享受它带来的便利时，我们也不得不考虑一个问题——我们的能力——处理数据的能力。数据本身并没有告诉我们太多，为能转换成有用或有意义的信息，我们必须能够分析它，然而，事实却证明，我们分析数据的工具，目前是相当不足的。目前常用的工具只限于如Matlab和Microsoft Excel，这是优秀的小数据集，但不能处理的大的数据量和一些科研的专业数据。

缺乏有效的数据处理工具带来的不便是显而易见的，如同有十亿美元隐藏在漫无边际的杂草堆中，但我们却只能因缺乏相应的搜寻工具而望而止步。当然，在科技高速发展的今天，我们也看到了一些的解决问题的可能性。谷歌透露，它正开发一种处理工具，这种工具甚至可以通过数据预测流感疫情的传播途径。

同时，我们也需要认识到，大的数据 ，可能会打破独立的科研机构和企业界对数据的挖掘与使用。当下，各企业在对数据的收集及处理的投资是巨大的，但大多数在数据密集型领域工作的高端人才仍然停留在写着自己的分析软件，计算其周期，对数据的处理问题仍然有待解决。

面对今天庞大的数据量，研究理事会和其他供资机构应在平抑这种特殊的演奏领域中加大投资IT基础设施。毕竟，在大数据的国度，仅仅用Excel已经再也无法完全满足其数据处理的需求了。