谈谈阿里系的技术积累
程序员文章站
2022-03-03 18:42:55
...
本文作者为丁香园（DXY.com) 技术负责人冯大辉（Fenng）。原文内容如下：
喧嚣的双 11 促销活动已经结束，淘宝、天猫、支付宝等阿里旗下的网站在当天爆发出惊人的能量，让人瞠目结舌：全天总交易额达到 191 亿，其中天猫132 亿，淘宝 59 亿，支付宝日订单数量超过一亿笔。金额已经超过美国去年“网购星期一”最高纪录，当然也超过今年的黑色星期五的 10.42 亿美元。尽管大淘宝在促销开始的时候服务稍有不稳定，但整天下来服务堪称可靠。这是个值得称赞的成就。 从另一个角度看数据，峰值数据是每分钟 89678 笔交易，峰值时刻一分钟超过 1700 万人民币的交易额，对比之下，eBay 披露的数据是每秒钟 2500 美元(峰值或许会更高一些)。但经此一战，可以说，阿里系在电商领域上的技术积累的确是全球独步了。
阿里系能达到今日的技术积累，绝非一朝一夕之功，依笔者个人的看法，以下几个先决条件素不能不提：
第一，支付宝、淘宝团队在大规模分布式事务（Transaction）处理能力上多年来的技术积累，这份经验相当宝贵；
第二，在 2009 年，阿里巴巴骨干传输网 ABTN (Alibaba Backbone Transmission Network) 的建成为整个阿里系子公司的网络服务能力提供了网络基础保障，这也是国内第一家运营商级别的电子商务骨干网；
第三，以开源领域技术专家，LVS 项目创建人章文嵩先生加盟淘宝为标志，淘宝在底层基础设施上的技术能力大幅提升，章带领的基础核心软件研发团队基于 LVS 实现高性能负载均衡组件，构建了强大而且高效的 CDN 系统，CDN 系统大量采用低功耗服务器，绿色节能；
第四，硬件带来的红利。固态硬盘（SSD）与 PCI-E Flash 等硬件组件技术已经足够成熟并被大规模应用，为数据库服务器处理能力提供了硬件层面上的支撑能力，可以更加灵活部署，成本更低，不必再像过去那样单纯依赖于小型机与高端存储的支撑；
第五，在 2008 与 2009 年大刀阔斧的系统结构改进，比如外界所知道支付宝的 SOA 化，淘宝五彩石项目等，最近两三年仍然在做精细化的提升，但是总结架构没有太大的变动；
第六，淘宝技术团队对运维能力的掌控与技术积累（为防止阿里云掠美，必须要说一下此事与阿里云无关，各自是独立的团队），具备相当灵活的分配调度硬件以及网络资源的能力。或许有人会指摘限流的问题，要知道，对系统限流的能力也是技术实力的体现，以前的几次大促活动中某银行网管因为对流量控制措施不当，直接导致核心设施不可用，造成了非常大的负面影响。
在 2010 年与 2011 年的两次双 11 促销活动中，技术团队积累了足够的运维与运营经验，能够有针对性的进行全面准备，而且，通过过去几次“压力测试”，也促使国内银行系统对于网银网关处理能力进行了扩容与改造，否则，按照今天的交易量，各家银行网关也无法承载如此大的支付请求的冲击。
阿里技术团队这几年来，在开源软件研发上进行了很大的技术投入，比如在 MySQL 数据库研发与部署实践上，已经能够有实力解除对 Oracle 数据库的依赖，而本次活动中，最核心的MySQL集群一天共支持了 20 亿个事务，MySQL 核心数据库顶住了每秒钟 10 万次事务、百万次 SQL 执行（不过支付宝最核心的数据库依旧是在 Oracle 数据库上，淘宝天猫的核心库已经在 MySQL 上）的压力；在 Java 核心技术上的技术投入，针对业务特点优化定制的 JVM（TaobaoJVM）已经在淘宝、天猫等网站上线，全部替换了 Oracle（Sun）官方 JVM 版本，成果显著，并已经逐步反馈到开源社区中去；再比如淘宝在 Nginx 基础上改进的 Web 服务器 Tengine……
此外，淘宝根据电子商务业务自行研发的各种关键组件，比如流控与防攻击模块等，也对这次成功大促起到了很好的保障作用。技术团队在开源软件领域的投入取得了惊人的回报，现在来看，此乃相当有前瞻性的举措，值得肯定。阿里技术团队正在试图掌控整个网站体系中的所有组件的核心技术，这将是一个趋势。
最后，技术的背后，最关键的还是人和团队。阿里巴巴数年来在电子商务技术领域吸引了不少业界技术专家，如王文彬、章文嵩等，造就了一批顶尖技术牛人，也培养并且储备了一大批技术人才，锻炼了一个有实战经验有战斗力的技术团队。正是这一批踏实肯干的技术人使得这一切成为可能。
后记：或许有人说这是在神话或者神化淘宝技术团队，应该说，以上只是客观事实。国内想跟淘宝同台竞技的团队，更应该反思一下到底差距在哪里，哪些地方可以借鉴并且少走一点弯路。
喧嚣的双 11 促销活动已经结束，淘宝、天猫、支付宝等阿里旗下的网站在当天爆发出惊人的能量，让人瞠目结舌：全天总交易额达到 191 亿，其中天猫132 亿，淘宝 59 亿，支付宝日订单数量超过一亿笔。金额已经超过美国去年“网购星期一”最高纪录，当然也超过今年的黑色星期五的 10.42 亿美元。尽管大淘宝在促销开始的时候服务稍有不稳定，但整天下来服务堪称可靠。这是个值得称赞的成就。 从另一个角度看数据，峰值数据是每分钟 89678 笔交易，峰值时刻一分钟超过 1700 万人民币的交易额，对比之下，eBay 披露的数据是每秒钟 2500 美元(峰值或许会更高一些)。但经此一战，可以说，阿里系在电商领域上的技术积累的确是全球独步了。
阿里系能达到今日的技术积累，绝非一朝一夕之功，依笔者个人的看法，以下几个先决条件素不能不提：
第一，支付宝、淘宝团队在大规模分布式事务（Transaction）处理能力上多年来的技术积累，这份经验相当宝贵；
第二，在 2009 年，阿里巴巴骨干传输网 ABTN (Alibaba Backbone Transmission Network) 的建成为整个阿里系子公司的网络服务能力提供了网络基础保障，这也是国内第一家运营商级别的电子商务骨干网；
第三，以开源领域技术专家，LVS 项目创建人章文嵩先生加盟淘宝为标志，淘宝在底层基础设施上的技术能力大幅提升，章带领的基础核心软件研发团队基于 LVS 实现高性能负载均衡组件，构建了强大而且高效的 CDN 系统，CDN 系统大量采用低功耗服务器，绿色节能；
第四，硬件带来的红利。固态硬盘（SSD）与 PCI-E Flash 等硬件组件技术已经足够成熟并被大规模应用，为数据库服务器处理能力提供了硬件层面上的支撑能力，可以更加灵活部署，成本更低，不必再像过去那样单纯依赖于小型机与高端存储的支撑；
第五，在 2008 与 2009 年大刀阔斧的系统结构改进，比如外界所知道支付宝的 SOA 化，淘宝五彩石项目等，最近两三年仍然在做精细化的提升，但是总结架构没有太大的变动；
第六，淘宝技术团队对运维能力的掌控与技术积累（为防止阿里云掠美，必须要说一下此事与阿里云无关，各自是独立的团队），具备相当灵活的分配调度硬件以及网络资源的能力。或许有人会指摘限流的问题，要知道，对系统限流的能力也是技术实力的体现，以前的几次大促活动中某银行网管因为对流量控制措施不当，直接导致核心设施不可用，造成了非常大的负面影响。
在 2010 年与 2011 年的两次双 11 促销活动中，技术团队积累了足够的运维与运营经验，能够有针对性的进行全面准备，而且，通过过去几次“压力测试”，也促使国内银行系统对于网银网关处理能力进行了扩容与改造，否则，按照今天的交易量，各家银行网关也无法承载如此大的支付请求的冲击。
阿里技术团队这几年来，在开源软件研发上进行了很大的技术投入，比如在 MySQL 数据库研发与部署实践上，已经能够有实力解除对 Oracle 数据库的依赖，而本次活动中，最核心的MySQL集群一天共支持了 20 亿个事务，MySQL 核心数据库顶住了每秒钟 10 万次事务、百万次 SQL 执行（不过支付宝最核心的数据库依旧是在 Oracle 数据库上，淘宝天猫的核心库已经在 MySQL 上）的压力；在 Java 核心技术上的技术投入，针对业务特点优化定制的 JVM（TaobaoJVM）已经在淘宝、天猫等网站上线，全部替换了 Oracle（Sun）官方 JVM 版本，成果显著，并已经逐步反馈到开源社区中去；再比如淘宝在 Nginx 基础上改进的 Web 服务器 Tengine……
此外，淘宝根据电子商务业务自行研发的各种关键组件，比如流控与防攻击模块等，也对这次成功大促起到了很好的保障作用。技术团队在开源软件领域的投入取得了惊人的回报，现在来看，此乃相当有前瞻性的举措，值得肯定。阿里技术团队正在试图掌控整个网站体系中的所有组件的核心技术，这将是一个趋势。
最后，技术的背后，最关键的还是人和团队。阿里巴巴数年来在电子商务技术领域吸引了不少业界技术专家，如王文彬、章文嵩等，造就了一批顶尖技术牛人，也培养并且储备了一大批技术人才，锻炼了一个有实战经验有战斗力的技术团队。正是这一批踏实肯干的技术人使得这一切成为可能。
后记：或许有人说这是在神话或者神化淘宝技术团队，应该说，以上只是客观事实。国内想跟淘宝同台竞技的团队，更应该反思一下到底差距在哪里，哪些地方可以借鉴并且少走一点弯路。