当前位置:云计算企业动态 → 正文

阿里云披露ODPS与iDST在机器学习领域进展

责任编辑:editor007 |来源:企业网D1Net  2015-04-27 21:49:00 本文摘自:C114

近日,在Qcon会议上阿里云大数据产品经理韦啸(花名龙场)透露阿里单个ODPS具有百万以上服务器管理和调度的能力,并与iDST进行合作,在机器学习、深度学习方面有了突破,其中参数服务器计算框架能够轻松应对百亿级别特征的监督学习实例。

ODPS适用于政企、金融、游戏、物联网等对于数据计算有高要求的行业,蚂蚁金服最近推出的花呗、阿里妈妈的“直通车”等服务均得到ODPS支持。未来这些能力将通过阿里云计算予以开放。

龙场在《云上大数据-生于战火的云端计算平台:ODPS与阿里PAI》的演讲中介绍了ODPS的一些技术特点。龙场表示,相对于普通工具,ODPS主要优势在于多租户管理、超大规模、安全和丰富的计算框架。他举例说,就规模而言目前单个ODPS部署可以扩展到百万台服务器规模,且性能可以随着规模的扩展而线性增强。

“说阿里巴巴的数据能力建立在ODPS上也不为过”,他表示。仅仅存储数据并不会带来价值,计算平台起到将数据资源充分挖掘从而高效的产生价值的作用,相当于为数据赋能。

ODPS和阿里PAI是伴随阿里巴巴超大规模数据计算场景而产生的,包含了3个层面:在硬层面将CPU、存储、网络等硬件统一调度,并通过一系列业界广泛使用的分布式计算框架使之成为可用的生产力,在软层面则包含了数据处理、统计、机器学习和深度学习等技术,在服务层面为客户提供可视化等的用户界面。

目前ODPS在内部环境下已有上万用户同时使用,每天处理100万以上作业任务,并发处理2万以上的任务。

此前,阿里巴巴董事局主席提出基于数据的计算处理将决胜未来,并提出了DT时代的判断。在阿里巴巴的DT规划中,包括了云平台、计算平台以及数据平台3部分。

iDST(Institute ofData Science&Technologies)是阿里巴巴集团的一个数据科学研究部门,在美国和中国的多个城市组建团队,将就大数据领域进行前瞻性研究。重点研究机器学习、人工智能、多媒体数据处理与挖掘等。

关键字:ODPS机器学习IDST

本文摘自:C114

x 阿里云披露ODPS与iDST在机器学习领域进展 扫一扫
分享本文到朋友圈
当前位置:云计算企业动态 → 正文

阿里云披露ODPS与iDST在机器学习领域进展

责任编辑:editor007 |来源:企业网D1Net  2015-04-27 21:49:00 本文摘自:C114

近日,在Qcon会议上阿里云大数据产品经理韦啸(花名龙场)透露阿里单个ODPS具有百万以上服务器管理和调度的能力,并与iDST进行合作,在机器学习、深度学习方面有了突破,其中参数服务器计算框架能够轻松应对百亿级别特征的监督学习实例。

ODPS适用于政企、金融、游戏、物联网等对于数据计算有高要求的行业,蚂蚁金服最近推出的花呗、阿里妈妈的“直通车”等服务均得到ODPS支持。未来这些能力将通过阿里云计算予以开放。

龙场在《云上大数据-生于战火的云端计算平台:ODPS与阿里PAI》的演讲中介绍了ODPS的一些技术特点。龙场表示,相对于普通工具,ODPS主要优势在于多租户管理、超大规模、安全和丰富的计算框架。他举例说,就规模而言目前单个ODPS部署可以扩展到百万台服务器规模,且性能可以随着规模的扩展而线性增强。

“说阿里巴巴的数据能力建立在ODPS上也不为过”,他表示。仅仅存储数据并不会带来价值,计算平台起到将数据资源充分挖掘从而高效的产生价值的作用,相当于为数据赋能。

ODPS和阿里PAI是伴随阿里巴巴超大规模数据计算场景而产生的,包含了3个层面:在硬层面将CPU、存储、网络等硬件统一调度,并通过一系列业界广泛使用的分布式计算框架使之成为可用的生产力,在软层面则包含了数据处理、统计、机器学习和深度学习等技术,在服务层面为客户提供可视化等的用户界面。

目前ODPS在内部环境下已有上万用户同时使用,每天处理100万以上作业任务,并发处理2万以上的任务。

此前,阿里巴巴董事局主席提出基于数据的计算处理将决胜未来,并提出了DT时代的判断。在阿里巴巴的DT规划中,包括了云平台、计算平台以及数据平台3部分。

iDST(Institute ofData Science&Technologies)是阿里巴巴集团的一个数据科学研究部门,在美国和中国的多个城市组建团队,将就大数据领域进行前瞻性研究。重点研究机器学习、人工智能、多媒体数据处理与挖掘等。

关键字:ODPS机器学习IDST

本文摘自:C114

电子周刊
回到顶部

关于我们联系我们版权声明隐私条款广告服务友情链接投稿中心招贤纳士

企业网版权所有 ©2010-2024 京ICP备09108050号-6 京公网安备 11010502049343号

^