当前位置:数据中心企业动态 → 正文

英特尔与大数据的不解之缘 —— 专访英特尔数据中心软件部CTO苗凯翔

责任编辑:黄心怡 作者:黄心怡 |来源:企业网D1Net  2013-11-15 10:00:41 原创文章 企业网D1Net

企业网D1Net 11月15日讯

英特尔给人的传统印象,是一家非常有名的芯片制造商,按照最为传统的分法,属于“硬件”厂商。但其实,它早已涉足软件业务,其软件部门已经有了十多年的历史,位于中国的研究院一直都进行开源软件的研究。援引英特尔高级副总裁Boyd Davis的话来说,”英特尔不只是硬件制造商,而是一家开源的软件公司。“

谈到英特尔在开源软件方面的进展,今年2月英特尔推出的Hadoop发行版,是无法绕过的话题。Hadoop是目前最为流行的大数据开源工具,Hadoop的发行版本则是指基于Hadoop架构而改造的商业解决方案。本文就将从英特尔数据中心软件部CTO苗凯翔的视角,聊聊英特尔与大数据的不解之缘。

英特尔数据中心软件部CTO苗凯翔在全球云计算大会Cloud Connect上接受记者采访

缘起

“英特尔从09年就开始研究大数据,在业内起步是比较早的。Hadoop发行版完全由中国团队研发,这也是因为国内客户对大数据最早有需求,电信运营商是我们最早切入的行业。”苗凯翔表示。

随着3G的普及,手机用户产生巨额流量费用而引发的投诉和诉讼屡见不鲜,由于手机流量详单无法查询,费用产生的原因难以知晓,用户不满,运营商为此也感到头疼。

“中国联通用户每日的上网记录从几万到数十万不等,全国每日新增约10TB数据,每月近万亿条记录,存放6个月的话,需要2PB。现有系统难以支撑如此海量数据的查询。通过采用英特尔Hadoop 发行版和硬件平台,中国联通搭建了全国最大的HBase集群 ,实现用户上网记录的快速查询服务,从而解决了3G业务的清单查询难题 。”

“现如今,英特尔Hadoop发行版在医疗、金融、智慧城市等各个领域有了部署和应用。以智能交通为例,“国内第一个利用Hadoop分布式系统构建实时交通信息系统,就是通过英特尔的解决方案。”

“传统的方案无法满足数据处理要求,而英特尔的Hadoop方案通过跨数据中心的分布部署以及线性扩展,极好地了适应业务要求。”

“在传统方案下,过车查询至少需要30秒,套牌分析至少要1小时,碰撞分析大于八小时,每PB的数据库成本高达6000万元。采用Hadoop方案,过车查询小于1秒钟,套牌分析低于20秒,碰撞分析最多只要2分钟。数据库成本降低至1000万元/PB。”

优势

除了英特尔之外,大数据初创企业Cloudera,传统的IT巨头EMC、IBM等也拥有自己的Hadoop发行版。

“英特尔的优势是对硬件较为深刻的理解,英特尔硬件工厂从设计到生产的能力可能是世界最强的了,这使得英特尔Hadoop方案可以具备很强的硬件能力,比如硬件的加密解密,性能是软件方式的20倍。”

“英特尔在大数据领域起步较早,积累的应用场景经验丰富,团队的能力强,对Hadoop技术的理解比较深刻。这些也都是英特尔的强项。” 

英特尔的Hadoop发行版 

“目前,戴尔已经推出了基于英特尔Hadoop发行版的大数据一体机解决方案。英特尔还与SAP建立了战略合作关系。SAP的HANA在结构化数据的实时处理能力非常强,而Hadoop擅长非结构化化数据。不久后,‘Hadoop +HANA’的解决方案就将推出。“

未来

Hadoop是大数据的重要架构之一,但Hadoop并不等同于大数据。大数据所涵盖的范围更广泛。英特尔在大数据的布局自然也不只是Hadoop。苗凯翔指出英特尔在大数据领域的五个战略方向分别为:

1、边缘传感器/设备的分布式分析需要基于标准、互联、托管、安全的端到端架构。

2、通过更快速、更高效的CPU、存储、I/O 和网络架构加快大数据分析。

3、通过提供优化的软件堆栈和服务推动大数据应用的创新与发展

4、通过合作伙伴协作推动大数据增长,注重实用模式示例和参考部署架构

5、投资解决方案研究和学术协作

其中,第一个战略方向格外引人注目,令人联想到英特尔近日新成立的物联网解决方案部门。众所周知,传感器是物联网的底层基础,而大数据的运用对于物联网的发展极为重要,可以说以大数据为核心驱动力的产业。目前,国内的物联网产业尚未成熟,仍是一片混乱的蓝海。既具备芯片设计制造能力的”硬“实力,也具有大数据“ 软” 实力的英特尔会在大海中掀起怎样的风浪,着实令人期待。

关键字:大数据英特尔

原创文章 企业网D1Net

x 英特尔与大数据的不解之缘 扫一扫
分享本文到朋友圈
当前位置:数据中心企业动态 → 正文

英特尔与大数据的不解之缘 —— 专访英特尔数据中心软件部CTO苗凯翔

责任编辑:黄心怡 作者:黄心怡 |来源:企业网D1Net  2013-11-15 10:00:41 原创文章 企业网D1Net

企业网D1Net 11月15日讯

英特尔给人的传统印象,是一家非常有名的芯片制造商,按照最为传统的分法,属于“硬件”厂商。但其实,它早已涉足软件业务,其软件部门已经有了十多年的历史,位于中国的研究院一直都进行开源软件的研究。援引英特尔高级副总裁Boyd Davis的话来说,”英特尔不只是硬件制造商,而是一家开源的软件公司。“

谈到英特尔在开源软件方面的进展,今年2月英特尔推出的Hadoop发行版,是无法绕过的话题。Hadoop是目前最为流行的大数据开源工具,Hadoop的发行版本则是指基于Hadoop架构而改造的商业解决方案。本文就将从英特尔数据中心软件部CTO苗凯翔的视角,聊聊英特尔与大数据的不解之缘。

英特尔数据中心软件部CTO苗凯翔在全球云计算大会Cloud Connect上接受记者采访

缘起

“英特尔从09年就开始研究大数据,在业内起步是比较早的。Hadoop发行版完全由中国团队研发,这也是因为国内客户对大数据最早有需求,电信运营商是我们最早切入的行业。”苗凯翔表示。

随着3G的普及,手机用户产生巨额流量费用而引发的投诉和诉讼屡见不鲜,由于手机流量详单无法查询,费用产生的原因难以知晓,用户不满,运营商为此也感到头疼。

“中国联通用户每日的上网记录从几万到数十万不等,全国每日新增约10TB数据,每月近万亿条记录,存放6个月的话,需要2PB。现有系统难以支撑如此海量数据的查询。通过采用英特尔Hadoop 发行版和硬件平台,中国联通搭建了全国最大的HBase集群 ,实现用户上网记录的快速查询服务,从而解决了3G业务的清单查询难题 。”

“现如今,英特尔Hadoop发行版在医疗、金融、智慧城市等各个领域有了部署和应用。以智能交通为例,“国内第一个利用Hadoop分布式系统构建实时交通信息系统,就是通过英特尔的解决方案。”

“传统的方案无法满足数据处理要求,而英特尔的Hadoop方案通过跨数据中心的分布部署以及线性扩展,极好地了适应业务要求。”

“在传统方案下,过车查询至少需要30秒,套牌分析至少要1小时,碰撞分析大于八小时,每PB的数据库成本高达6000万元。采用Hadoop方案,过车查询小于1秒钟,套牌分析低于20秒,碰撞分析最多只要2分钟。数据库成本降低至1000万元/PB。”

优势

除了英特尔之外,大数据初创企业Cloudera,传统的IT巨头EMC、IBM等也拥有自己的Hadoop发行版。

“英特尔的优势是对硬件较为深刻的理解,英特尔硬件工厂从设计到生产的能力可能是世界最强的了,这使得英特尔Hadoop方案可以具备很强的硬件能力,比如硬件的加密解密,性能是软件方式的20倍。”

“英特尔在大数据领域起步较早,积累的应用场景经验丰富,团队的能力强,对Hadoop技术的理解比较深刻。这些也都是英特尔的强项。” 

英特尔的Hadoop发行版 

“目前,戴尔已经推出了基于英特尔Hadoop发行版的大数据一体机解决方案。英特尔还与SAP建立了战略合作关系。SAP的HANA在结构化数据的实时处理能力非常强,而Hadoop擅长非结构化化数据。不久后,‘Hadoop +HANA’的解决方案就将推出。“

未来

Hadoop是大数据的重要架构之一,但Hadoop并不等同于大数据。大数据所涵盖的范围更广泛。英特尔在大数据的布局自然也不只是Hadoop。苗凯翔指出英特尔在大数据领域的五个战略方向分别为:

1、边缘传感器/设备的分布式分析需要基于标准、互联、托管、安全的端到端架构。

2、通过更快速、更高效的CPU、存储、I/O 和网络架构加快大数据分析。

3、通过提供优化的软件堆栈和服务推动大数据应用的创新与发展

4、通过合作伙伴协作推动大数据增长,注重实用模式示例和参考部署架构

5、投资解决方案研究和学术协作

其中,第一个战略方向格外引人注目,令人联想到英特尔近日新成立的物联网解决方案部门。众所周知,传感器是物联网的底层基础,而大数据的运用对于物联网的发展极为重要,可以说以大数据为核心驱动力的产业。目前,国内的物联网产业尚未成熟,仍是一片混乱的蓝海。既具备芯片设计制造能力的”硬“实力,也具有大数据“ 软” 实力的英特尔会在大海中掀起怎样的风浪,着实令人期待。

关键字:大数据英特尔

原创文章 企业网D1Net

电子周刊
回到顶部

关于我们联系我们版权声明隐私条款广告服务友情链接投稿中心招贤纳士

企业网版权所有 ©2010-2024 京ICP备09108050号-6 京公网安备 11010502049343号

^