淘宝技术这十年

淘宝网有着我国最大的hadoop分布式计算群集之一，日增加数据信息50TB，有40PB海量信息储存。遍布在国内各地80好几个连接点的CDN互联网，适用的总流量超出800Gbps。淘宝的百度可以对数十亿的产品数据信息开展即时检索，此外还有着自主研发的文档存储系统和缓存文件系统，及其java中间件和消息中间件系统，这一切构成了一个巨大的相应实际操作系统。此外从金融数据上看来，AMAZON的财务报告表明2011年完成了大概 480亿美元的成交额，EBAY2011年财务报告全年度完成了大概600亿美元的成交额（不包括其单独的车辆平台交易）。无论从成交额、产品总数、同比增长率等指标值上看，淘宝网均远超在此，是现阶段世界最大的相应服务平台。

一切网站的进步都并不是一蹴而就的。它在快速发展历程中会碰到各式各样的情况和业务流程产生的工作压力。恰好是这种难题和工作压力推动着技术的发展和发展趋势，而技术的快速发展相反又会推动业务流程的更高提高。现如今淘宝网的关键字排名已经是全世界前15名、中国前3名，其系统网络服务器也从一台发展趋势到万部之上。
《淘宝技术这十年》从技术工程师的视角叙述淘宝这一集成电路工艺互联网技术系统的成长过程，以及全部积极和被动技能的技术转型的来龙去脉。书里有背后小故事、商品工作经验、构架演变、技术启蒙教育，也是有大神发展、业界八卦、不成功实例、励志小故事。《淘宝技术这十年》笔风顺畅，有技术工作人员独有的幽默风趣；內容积极主动正脸，有临场感，所有是创作者真实经历。

淘宝技术发展趋势（本人网站）：

2003年4月7日，马云，在杭州市，创立了一个隐秘的机构。他喊来十位职工，要她们签了一份协议书，这一份协议书规定她们马上离去阿里，去做一个神密的新项目。这一新项目规定絕對信息保密，老刘誉为“连睡觉做梦被媳妇听见都不好，谁如果透漏出去，我将袭击到海角天涯”。这一份合同是英语版的，匆忙之间，大部分人压根赶不及看懂，但出自于对老刘的信赖，都翻卷被褥离开阿里。

她们来到一个隐秘的聚集点——湖畔花园住宅小区的一套未室内装修的房屋里，房屋的主人家是马云。这伙人刚进来的情况下，马云给他布局了一个每日任务，便是在很短的時间内作出一个本人对本人（C2C）的产品交易的网站。如今出一个难题考阅读者，看着你适不适合做淘宝的创业者。亲，如果使你来做，你怎么做？

在讲出这一回答以前，容我先卖个关子，介绍一下这一创业者的组员：三个研发工程师（虚竹、三丰、多隆）、一个UED（二当家）、三个经营（宝宝、阿珂、诛魔）、一个主管（财神爷）、也有便是马云和他的文秘。那时候对全部团队而言侧压力较大的便是時间，怎样在最少的時间内把一个几乎就沒有的网站从零开始创建起來？掌握淘宝历史时间的人了解淘宝是在2003年5月10日发布的，这中间仅有一个月。如果你一直在这一精英团队里，你怎么做？大家的回答便是：买一个来。

买一个网站显而易见比成一个网站要方便一些，可是它们的理想并不是做一个小网站罢了，要做大，就并不是随意买一个就可以了的，要有较为低的维护保养成本费，要可以方便快捷的扩大和二次开发。那下面便是第二个难题：买一个什么样子的网站？回答是：轻巧一点的，简单一点的，因此购买了那样一个构架的网站：LAMP（linux apache mySQL PHP）。这一直到如今或是一个很常见的网站构架实体模型。这类构架的特点是：不用编译程序，公布迅速，PHP功能齐全，能做从网页页面3D渲染到数据信息浏览全部的事儿，并且使用的技术全是开源系统的，完全免费。

那时候大家是以一个外国人那边买回来的一个网站系统，这一系统的名称称为PHPAuction（她们的官方网网站http://phpauction.net这一名称很直接，一眼就看出去这一系统是用什么语言做的、是做什么用的），PHPAuction有好多个版本号，大家买的是最大版的，作用比较多，并且最重要的是另一方接受了源码。最大版较为贵，花了大家2000美元（好像如今减价了，只需946美金）。买回来以后并不是随便就能用的，必须许多本土化的改动，比如页面设计改的好看一点，页头底部再加上自身的网站介绍等，在其中最有技术成分的是对数据库查询开展了一个改动。原先是以一个数据库查询开展任何的存取数据，拿过来以后多隆把它给拆分为一个主库、2个从库，读写分离。那么做的益处有几个方面：存储量提升了，拥有备份数据，促使安全系数提升了，读写分离促使读写能力高效率提高了。那样全部系统的构架就如下图所显示：


在其中pear DB是一个PHP控制模块，承担数据信息浏览层。此外也用开源系统的社区论坛系统PHPBB（http://phpbbchina）构建了一个小的社区论坛，虚竹承担设备购置、配备、搭建等，三丰和多隆承担编号，她们把买卖系统和社区论坛系统的客户信息连通，给营销工作人员开发设计出管理后台（admin系统）的作用，把交易方式从仅有竞拍这一种提升为竞拍、一口价、购买产品、宣传海报产品（意思是还没有发布的产品，先挂个宣传海报出去）这四种。（PHPAuction仅有竞拍的买卖，Auction即竞拍的含意。@_行癫在新浪微博中提及：今天eBay全部买卖中竞拍买卖依然占了40%，而在我国，此类方式在淘宝基本上从一开始就无法占有优点，现如今在流行的买卖中基本上可以忽略。身后的缘故一直匪夷所思。我大概可以得出在其中一种表述，eBay基本上在资本主义国家进行业务流程，加工制造业业务外包后，相应的基本上人群大多数只有表达为零散的个人间买卖。）

在经历了此外一些有意思的事以后（这种有意思的事包含“淘宝”这一名字的来历，职工好听的花名的来历这些，因为这书关键叙述技术层面的小故事，对这种有感兴趣的可以去在网上找），网站逐渐正式上线运作了。


在下面的半年多時间里，这一网站快速表明出了它的活力。这儿必须提一下当初的市场环境，抗击非典（SARS）的席卷促使大家都不敢出门，尤其是去大型商场这类人多的地方。此外在大江南北上最开始发生的C2C网站ebay易趣也正忙的乐此不疲，2002年3月，eBay以3000万美金回收了ebay易趣企业33%的股权，2003年6月以1.5亿美金回收了ebay易趣企业剩下67%的股权。那时候淘宝网容许交易双方留有联系电话，容许同城送货，全部操作流程简易轻轻松松。而eBay为了更好地扣除交易佣金，是严禁那么做的，这必定多了交易方式的难度系数。并且eBay为了更好地全世界统一，把ebay易趣原先的系统换成了英国eBay的系统，客户体验一下子全发生变化，实际操作起來十分不便，这等因此把累积的客户作揖赠给了淘宝。为了更好地不造成eBay的留意，淘宝网在2003年里一直宣称自身是一个“本人网站”。因为这一创业者强劲的市场拓展和运营能力，淘宝网发展趋势的十分迅速，2003年底就吸引住了申请注册客户XXX，最大每日31万PV，从5月到年末成交量4000万。这沒有造成eBay的留意，却造成了阿里內部许多公司员工的留意，她们感觉这一网站之后会变成阿里强悍的敌人。乃至有些人以内网发帖子，告诫高管要当心这一刚发展的网站，但高管好像视而不见。（这一精英团队的保密做的真棒）

在销售市场和经营的后才，淘宝网的技术精英团队也在迅速的做着系统的改善和自主创新。这儿也有个有趣的小故事，eBay和ebay易趣初期都是有职工在社区论坛上回应客户的要求，eBay的社区论坛用粉红色背景来区别职工的讲话，ebay易趣的公司员工在社区论坛上呢称都选各种各样痘痘，比如黄豆豆、豇豆豆等。淘宝在探讨运营策略的是提及这个问题，规定全部的职工都去社区论坛上回应客户的难题。最开始解答问题的任務落在宝宝头顶，那大家用什么名字好呢？“淘淘”？“小宝宝”？宝宝都不满意，太男性化了。探讨了好长时间以后，宝宝灵光乍现，索性取个名字叫“宝宝”吧，宝宝带七个媳妇来开实体店，迎来诸位客官，很有故事类。因此许多古代武侠小说中的角色逐渐在社区论坛中侠义天下，这种呢称下边意味着“淘宝店小二”，她们回应着多种多样的难题，快速响应着客户的各类要求。如果是技术可以处理的，几个人商量一下，立刻就开发设计、检测、公布发布。相反比照一下，ebay易趣被eBay回收以后，系统拆换变成全球通用的版本号，回应客户的一个要求必须逐层审核，反应速率当然慢了出来。

那时候淘宝第一个版本号的系统里边早已涵盖了产品公布、管理方法、检索、商品详情、竞价选购、点评举报、我的淘宝这种作用（如今主流程中也是这种控制模块。在2003年10月提升了一个作用连接点：“安全性买卖”，这个是支付宝钱包的原型）。伴随着用户需求和数据流量的持续提高，系统上边干了许多的日常改善，网络服务器由起初的一台变成了三台，一台承担推送email、一台承担运作数据库查询、一台承担运作webApp。过一段时间以后，商品查询的作用占有数据库查询資源太大（用like检索的，比较慢），又从阿里中文网站搬回来她们的百度搜索引擎iSearch，最初iSearch数据库索引的文档放到电脑硬盘上，伴随着信息量的提高，又选择了NetApp网络服务器置放iSearch。

这般节奏快的工作中，实际上大家都累到不好，有些人就建议大伙儿随时的加强锻炼，但是外边SARS猖狂，在一个一百多方的房屋里，如何锻炼呢？高挑美女阿珂建议大伙儿训练瘦腰操，这一提议遭受男性的一致抵制，之后虚竹就教大伙儿训练倒立起来，这一大家都能接纳。因此这一倒立起来的传统式一直持续迄今，和好听的花名文化艺术、武侠江湖文化艺术一并承传了出来。

伴随着浏览量和信息量的飞快增涨，难题迅速就出来，第一个难题发生在数据库查询上。mySQL那时候是第4版的，大家用的是正常的储存模块myisam，这类种类读

文件目录：

第0章 前言：单身节的欢乐
第1章 本人网站
LAMP构架的网站
武侠江湖和倒立起来文化艺术的发源
第2章 本人网站的升級
数据库查询从mySQL到Oracle
支付手段的自主创新——支付宝钱包
沟通交流方法的自主创新——淘宝淘宝旺旺
第3章 公司级Java网站
洗心革面的升級——拆换编程语言
坚若磐石——紧紧围绕特性、容积和费用的演变
第4章 造就技术
淘宝文档系统——TFS
淘宝KV缓存文件系统——Tair
第5章 分布式系统相应实际操作系统
服务创新
分布式数据库
Session架构
Session架构
开发者平台
第6章 我还在淘宝这八年
第一年（2004年—2005年）
第二年（2005年—2006年）
第三年（2006年—2007年）
第四年（2007年—2008年）
第五年（2008年—2009年）
第六年（2009年—2010年）
第七年（2010年—2011年）
第八年（2011年—2012年）
第7章 牛P本纪
正明——集团公司关键系统高級研究者
正祥——淘宝高級研究者，OceanBase项目经理
毕玄——集团公司关键系统杰出技术权威专家
放翁——淘宝开发者平台项目经理
吴翰清——阿里云服务器集团公司网络信息安全核心高級安全性权威专家
云铮——大数据平台与产品研发杰出技术权威专家
小龙——淘宝UED前面通用性服务平台高級技术权威专家
淘宝热血传奇技术工程师多隆的程序流程全球