大数据

大数据是一种现代云基础架构，它包含了多种与其他人连接和共享信息的方法。它推动了“物联网”的发展，如通过社交网站连接人、通过共享朋友或网络来寻找人们之间互相认识的可能性。大数据的背后运行着人工智能，而它对于大多数人而言是完全透明的，人们不知道背后有这样的技术。大数据位于人们日常使用的智能手机之后，然后人们通过它给移动互联网贡献信息，即使他们并没有意识到这一点。

在北京，每五位的哥中就有一个人使用嘀嘀打车，嘀嘀打车日成交破万，这样的成绩是怎么来的呢?归根结底，这一切的实现都离不开大数据。今天，我们打开打车APP，以乘客为中心，可以看到，在他的附近有多少辆出租车正在待客;以司机为中心，可以看到，他的附近有多少人正在打车，其中又有多少人愿意加价。乘客、司机不再是在互不相知的情形下随机遇到，而是可以在一个APP工具上互相找到。其起点，正在于乘客、司机都上线(online)了。在这一步之前，乘客和司机的所有关联仅仅是路边偶遇，乘客下车后，和司机也基本不再有任何联系，这是离线(offline)的;而一旦使用打车APP，他和司机就开始建立起一种联接。这就是一个简单的O2O模型。这个模型的成立是建立在掌握大量打车客户和出租车司机数据收集的基础上的。如果没有大数据，这些可能看起来还是天方夜谭的事情。我曾经坐过一个安装了滴滴打车软件出租车司机的车，在和他交谈中知道，通过这以软件的应用，他的生意比以前好了很多，收入也有了相应的增加，这就是大数据改变着我们生活的表现。未来图景将是如此：所有人、所有物、通过大数据在任何地点、适合时间、永远在线，实时互动。

为什么大数据如此重要?

大数据的重要性体现在很多方面。首先，它可以识别人们上网浏览的模式，从而给特定类型的人或群组推送与访问内容相关的广告及发送电子邮件或社交媒体广告。其次，它可以扫描用户选择屏蔽的内容，如特定类型的广告或媒体。第三点可能也是最重要的一点，它可以根据用户的上网浏览活动推荐各种网站或广告。这可以根据广告点击、视频观看、社交网站链接点击和特定关键词来实现。

Hadoop是什么?

Hadoop提供了一个用于存储大规模数据的开源平台。Hadoop是一个开放工具集，支持可变连接类型和数据结构。它开放给云环境中位于多个主机的分布式数据平台。简单地说，它是一种数据存储方式，支持使用多个平台和多个操作系统的多个计算机。它是一个Apache开源项目，支持搜索Web中的大数据。它是一组批处理工具，可供任何公司使用。它并不是单独一个下载后在网站或应用中运行的应用程序。

Hadoop有何作用?

互联网巨头谷歌、Twitter和Facebook等一直都有能力利用Hadoop管理超大规模数据。Hadoop是一个用于解决大规模数据问题的非商业解决方案。Hadoop是一个分布式计算系统，底层基于Linux操作系统。这意味着Hadoop在处理数据时并不需要使用传统的高端超级计算机，而是用许多普通计算机来处理数据。Hadoop系统能够在任意时间处理超大规模且不断增长的数据，而计算机网络则是它的重要组成部分。换而言之，原来需要购买昂贵硬件和雇佣专业技术人员才能完成的工作，现在都可以在云中交由一些非专业人员完成。增加业务效率就可以在不增加员工数量的前提下完成更多的工作。大数据的设计初衷就是这一点。除了财务和销售，许多公司还使用大数据解决方案跟踪员工和内部流程。为什么呢?因为这些数据可以帮助他们发内部的“漏洞”，发现员工在哪些方面最需要改进和帮助。这自然就转化为开展定制培训或精简组织结构。用大数据构建的内部蓝图清楚地告诉人们：业务决策完全可以变成一种轻松愉快的过程。

因此，为业务发展提供帮助是Hadoop的一个重要任务。它依靠各种相对廉价的计算机。如果有一台计算机出现问题，那么更换它也比更换一直使用的大规模超级计算机容易得多。Hadoop包含一组工具，而不只是一个提供数据管理功能的软件。它也是一个开源平台，这意味着它可以根据公司需求而扩展，并且不需要大规模硬件或软件投入。

总结

在大数据时代到来的时候，要用大数据的思维去发掘大数据的潜在价值。大数据的意义不在于掌握庞大的数据信息，而在于对这些含有意义的数据进行专业化处理。从前我们所了解的数据是冷冰冰的、死气沉沉的，被存到冷备份默默地等着人拿出来用，我们对待数据的感觉十分消极，要先想清楚其用处才开始分析应用。现在，数据时代来临了，人们正在试图点燃数据，使其变热，赋予生命。所谓“活数据”，是动态的数据，流通的数据，因互动而产生，因产生而互动，是自然演化的数据，要用大数据的思维去考虑这些数据怎样才能带来效益。未来大数据的发展前景非常好，与大数据相关的职业比如数据挖掘师，数据分析师等必定会有广阔的发展空间。