企业网D1Net 11月13日讯
导语 :小编第一次听说11.11"光棍节“,是在大一的时候,宿舍楼的底下,大学男生谈着吉他,热闹地开着“光棍节”晚会。现如今,“光棍节”已经在天猫的带领下摇身变成了“购物狂欢日”。根据阿里巴巴公布的数据,今年双十一凌晨第一分钟的成交额就达到1.17亿人民币,中午13时达到191亿,只用半日就追平去年全天的销售额纪录,最终全天的总交易额高达350亿元。双11自然不只是阿里巴巴的狂欢,京东、易迅、1号店,甚至去年没什么动静的亚马逊也加入了双11促销的行列,双11当天电商总销售额估计超过500亿元。
个人感觉,交易额大幅攀升没有给天猫带来非常大的影响。虽然在凌晨开抢的那一刻,购物车还是崩溃了一下(导致小编2样东西没抢到),但支付的时候排队等待了一会,便能完成,整个时间只用了10分钟,比起去年大有进步(和12306比起来,简直是无敌了)。显然阿里巴巴在数据中心IT架构方面做了一定的准备。
阿里巴巴关键词:SDN和Alirack
“双11业务量相比平日会有N倍增长,业务容量波动明显。”阿里巴巴高级总监张磊在Cloud Connect大会上曾特别以“双十一”为例,分析互联网的运营特点。
“互联网业务的特点是容量变化快,需求变化快。因此需要弹性的IT架构,像绿巨人一样能变形。”
“现有的商业设备难以应对天猫双十一的业务量,需要自定义的IT架构。不再是由厂商提供解决方案,而是根据服务的需求,再将资源封装。从别人提供技术到我们自己来制定标准。”
在具体实践方面,张磊介绍了两点,一是阿里巴巴对网络进行定义,研发交换机操作系统,定制化交换机,通过SDN控制网络。二是Alirack,即阿里巴巴整机柜服务器,将一个机柜的服务器作为一个节点整体交付。
Alirack
京东关键词:自研文件系统JFS
作为天猫的最大竞争对手之一,京东双11当天访问量超过5.3亿,是平日的2.7倍。11月1至12日的总销售额达到100亿。即使是在非双11的日子,京东每日的订单也能达到数亿,几十亿商品图片的存储成为京东的巨大挑战。
“传统的关系型数据库价格昂贵,没法按需扩容,只能定期删除数据,很麻烦。开源存储系统虽然便宜,但难以选型、定制和维护。”京东云平台首席架构师刘海峰分析现有文件存储的痛点时表示。
因此,京东选择自己研发文件系统JFS(Jingdong Filesystem),“If you believe you can。”刘海峰笑称。
刘海峰在QCon2013上分享的JFS总体架构
该系统的定位很明确:针对海量非结构化的小文件,要求强可靠、强一致和高可用,并且key由系统本身生成。
“之前京东是采用HDFS作为数据存储子系统,由于其85%的存储容量都是小于1MB的对象,对hadoop的扩展性和性能带来严重问题。”刘海峰表示。
现在京东已经用JFS已经替换了HDFS负责小文件存储,“未来期望JFS能成为对象存储服务的唯一后端。”
JFS KEY
1号店关键词:Hedwig
1号店在长江三角洲的影响力依然不小,如果想买进口零食、进口牛奶神马的,1号店还是很丰富的。1号店CTO韩军在QCon2013上透露,目前1号店的IT团队达到1000人,系统的负载能力支持5000单/分钟,在北京、上海等地均有数据中心。
1号店平台整体架构
“Hedwig是1号店平台的核心中间件,采用完全分布式架构,无中心、无单点,可管理上万个节点,支持故障隔离,优雅降级,可以跟踪完整的请求生命周期,实现快速响应。”
1号店Hedwig架构
1号店的平台包括:
SBY开放平台-开放1号店积累的有形的、无形的资源,比如仓库,快递,流量,算法,系统,培训,采购等,同时引入第三方的系统开发能力,为供应商/商家提供各类增值服务。
1号店信息化平台-1号店自己的企业门户,为HR和财务部门服务,涵盖简历系统、考勤系统、培训系统、财务系统等。
研发工作平台Trident-针对1号店的开发模式和组织架构定制的项目开发和管理工具,需求、开发、测试、上线系统信息流完全打通,形成闭环,提升开发效率20%以上。
1号店下一阶段的目标是3万单/分钟。
结语:
阿里巴巴去年开始发起的”去IOE“话题曾颇为火热,从小编的走访来看,在软件层面,电商们确实开始走向了定制化软件开发的道路,特别是在非结构化数据的处理上。而在硬件层面,和国外互联网公司一样,更倾向于高密度优化服务器。阿里巴巴的整机柜服务器就是类似的服务器,这也是BAT(百度、阿里、腾讯)发起的天蝎计划的重要组成部分。
但也有不少人质疑诸如“去IOE”这样的话题只是为了阿里推销自己的云实力,有众多网友表示不要老说整天去IOE,敢不敢去掉英特尔。这话说得也不无道理,先不说英特尔等芯片厂商在国产服务器架构中占据的地位,英特尔在BAT发起的天蝎计划里可也占据重要角色。而且,目前电商的大量数据处理和存储还是在依赖传统的IT架构。
从普通用户的角度来看,只要不在“双11”秒杀异常激烈的时候,跳出“网站需要歇一会”的页面,其他皆是浮云啊。