淘宝大数据分析应对双十一来袭

    一年一度的双十一（11月11日）已进入倒计时，双十一“光棍节”当作是又一个情人节，身为“单身贵族”双十一这天该怎样“脱光”呢？

    这一天对于“淘宝控”们来说也是个大日子，去年的双十一单日淘宝商城销售额破33.6亿，之后的一个月内多家物流严重爆仓。作为2012“末日”前的最后一个节日，你是否会疯狂一把呢？今年的双十一又会有怎样的情况呢？从预热开始，我们已经可以预估到其火爆程度。面对数以亿计的交易量，淘宝如何应对高并发性的数据处理呢？淘宝正在做那些准备呢？

    在今年10月WOT2012云计算架构师峰会上，淘宝架构师毛波先生发表主题演讲时对“双十一”的应对也有所提及。

    应对如此高并发性的分析需求，淘宝目前的准备主要在于提前做系统清理；硬件临时扩容；救急方案预备；数据分散化；以及人肉应急待命这5各方面。具体情况如下图：

 
 

    毛波先生表示，Hadoop在实时分析上并不占优势，但是重点在于之前的准备，通过对往年的情况、用户消费习惯、搜索习惯、浏览习惯等的分析，作为当天数据分析的基础。

 
    淘宝整体的数据架构逻辑图

 
    淘宝整体的数据物理架构图