贝索斯2010年股东信Tags贝索斯股东信作者贝索斯编辑Rework阅览室整理致股东的一封信·2010一技术的本质一致我们的股东们：随机森林、单纯的贝叶斯估计器、RESTful服务、八卦协议、最终一致性、数据分片、反熵、拜占庭仲裁、擦除编码、矢量时钟…走进亚马逊的某些会议，你可能会一时觉得你无意中听到了电脑科学讲座。注：原文的术语如下，每个字都认识，但啥意思不知道。Random forests,naiveBayesian estimators,RESTful services,gossip protocols,eventualconsistency,data sharding,anti-entropy,Byzantine quorum,erasure coding,vector clocks。仔细看看一本关于软件架构的教科书，你会发现一些我们在亚马逊没有采用的模式。我们使用高性能的交易系统、复杂渲染和对象缓存、工作流和排队系统、商业智能和数据分析、机器学习和模式识别、神经网络和概率决策，以及各种各样的其它技术。虽然我们的许多系统都是基于最新的计算机科学研究，但这往往还不够：我们的设计师和工程师们不得不朝着学术界尚未采取的方向推进研究。我们所面临的许多问题很多在教科书上没有解决方案，所以我们很高兴地发明了新的方法。我们的技术几乎完全作为服务来实现：数个逻辑位封装了它们所操作的数据，并提供硬接口，作为访问其功能的唯一方式。这种方法减少了副作用，并允许服务以自己的贝案斯2010年股东信速度演化，而不会影响整个系统的其它组件。注：有点配件的意味。面向服务的体系结构（简称SOA)是亚马逊技术的基本构建理念。多亏了一个由工程师和架构师组成的深思熟虑、目光远大的团队，这种方法早在SOA成为业界流行语之前就在亚马逊上得到了应用。我们的电子商务平台由数百个软件服务联合体组成，这些软件服务协同工作，提供从推荐到订单配送到库存跟踪等各种功能。例如，要为访问亚马逊网站的客户构建一个产品详细信息页面，我们的软件需要200到300个服务来为该客户呈现高度个性化的体验。状态管理是任何需要发展到非常庞大规模的系统的核心。许多年前，亚马逊的需求达到了这样一个地步一我们的许多系统无法再由任何商业解决方案提供服务：我们的关键数据服务存储许多千兆字节的数据，每秒处理数百万个请求。为了满足这些苛刻要求和不寻常的需要，我们开发了几种可选的、专门构建的持久性解决方案，包括我们自己的键值存储和单表存储。为了做到这一点，我们从分布式系统和数据库研究社区中大量地学习了核心原则，并从中继续发展。我们率先开发的存储系统在保持对性能、可用性和成本的严格控制的同时，还展示了极大的可扩展性。为了实现它们的超尺度特性，这些系统采取了一种新的数据更新管理方法：通过放宽需要向大量副本发送更新的同步要求，这些系统能够在最苛刻的性能和可用性条件下使用。这些系统的实现基于最终一致性的观念。亚马逊工程师在数据管理方面的进步已经成为亚马逊网络服务(AWS)提供的云存储和数据管理服务下的架构起，点。例如我们的简单存储服务、ElasticBlockStore和Simple DB都是从独特的亚马逊技术中派生出它们的基本架构的。亚马逊业务的其它领域也面临类似复杂的数据处理和决策问题，如产品数据摄取和分类、需求预测、库存分配和欺诈检测。基于规则的系统可以成功地使用，但是它们很难维护，并且随着时间的推移会变得脆弱。在许多情况下，先进的机器学习技术提供了更精确的分类，并且能够自我修复以适应不断变化的条件。例如我们的搜索引擎使用在后台运行的数据挖掘和机器学习算法来构建主题模型，我们应用信息提取算法来识别属性并从非结构化描述中提取实体，从而允许客户缩小搜索范围并快速找到所需的产品。我们在搜索相关性中考虑了大量的因素来预测客户兴趣的概率并优化结果的排名。产品的多样性要求我们采用现代的回归技术，如经过训练的决策树随机林，灵活地将数千种产品属性在排名时间内合并。所有这些幕后软件的最终结果是什么呢？快速、准确的搜索结果，帮助你找到你想要的。如果我们把技术放在某个研发部门的一边，那么我们投入到技术上的所有努力可能就没那么重要了，但我们并不这样做。技术注入到我们所有的团队、所有的流程和我们的决策，以及我们在每个业务中的创新方法中。它深深地融入了我们所做的一切。一个例子是WhispersSync,我们的Kindle服务旨在确保无论你走到哪里，无论你带着什么设备，你都可以访问你的图书馆和所有的标记、笔记和书签。所有这些都能够在Kindle设备和移动应用中同步。这项技术的挑战在于使拥有数亿本书和数百种设备的生活在全球100多个国家的数百万Kindle用户能够7X24小时的灵活使用。WhispersSync的核心是一个最终一致的复制数据存储，应用程序定义的冲突解决方案必须并且可以处理持续数周或更长时间的设备隔离。当然，作为Kindle的客户，我们对您隐藏了所有这些技术。所以当你打开Kindle的时候，它同步到正确的页面上。用亚瑟·C克拉克的话来说，就像任何足够先进的技术一样，它和魔法是没有区别的。现在，如果一些认真阅读这封信的股东被这一点所蒙蔽，我会提醒你，在我看来，这些技术并不是漫无目的地追求一它们直接导致自由现金流。