欢迎订阅我的频道，https://bit.ly/3tnM6wI ，佛系上新😊 阳振坤：支付宝如何处理双十一的巨大交易量？这个东西至关重要 格致论道 | 2025年1月8日 北京 这个世界需要怎样的数据库 支付宝如何处理巨大的交易量？这离不开我们团队研发出的分布式数据库。相比于传统的集中式数据库，它有着独一无二的优点，在性能榜单上也遥遥领先… 演讲者：阳振坤 OceanBase 数据库创始人&首席科学家 起初，没有人愿意用我们的产品，直到十年前的那次“双十一” “别人都没有分布式数据库，你们凭什么说做出来了？”于是，我们决定去跑个分。 大家好，我是来自OceanBase数据库的阳振坤，很高兴能跟大家介绍我们在数据库方面做的一些工作。 我很幸运，上大学的时候来到了北京大学，并且遇到了王选院士。我跟着王老师先做实习生，后来跟着他读博士，再之后留在北京大学计算机研究所，继续跟着王老师工作，从事计算机汉字激光照排技术的研究。 这张照片右手边的第二个人是王老师，王老师背后角落里的那个人就是我。那时候的我比今天胖很多。 这张照片是我们的工作获得了北京市科技进步奖一等奖。这个奖的大部分工作其实是我在博士期间跟着王老师做的，博士生的工作毫无疑问是在导师的指导下完成的。而且当时我在这个领域研究的时间还比较短，很多具体的方法、算法上也都是王老师手把手教出来的。但是，王老师仍然把我的名字放在了第一位。 不仅如此，我觉得这些年我跟王老师学到了一个更重要的东西，就是要“技术顶天，市场立地”。我决定做OceanBase数据库的时候，也是这两句话在指导着我。 到了2002年，当时互联网的发展已经非常迅速了，对社会的影响也逐渐扩大。于是我选择了离开，离开科研机构，离开北大。我想到互联网一线看一看，看一看互联网一线的工作和学校里的工作有哪些差别。 离开了北大之后，我先到了联想的研究院，后来到了微软的研究院做了一些工作。幸运的是，这两段经历让我有机会开始做分布式系统的工作，为我后来选择分布式数据库奠定了基础。 到了2010年年初，我离开上一家公司，接受了淘宝的offer。在去淘宝报到之前，我提了一个要求，希望他们给我一个月的时间。这一个月时间干什么呢？我希望休息休息，想一想我自己去了淘宝之后能做什么、要做什么？什么事情能够发挥我的价值呢？ 我是一个做软件开发的人，淘宝的业务系统我肯定也能做。但是我觉得，这不是我最大的长项，我最大的长项还是底层系统。于是在那时候，我就看到了数据库这个机会。 为什么要做数据库？ 在讲接下来内容之前，我先简单地跟大家介绍一下究竟什么是数据库。虽然我们每天都在和数据库打交道，但只有很少的人会直接使用数据库。因为当我们用订票软件、用网购APP的时候，见到的是业务系统，其实这些业务系统都需要跟数据库打交道。 就像我们在买火车票的时候，因为可能同时有很多的人在买这个日期、这趟车次的车票，那如何保证这张座的票只卖给了一个人呢？只能依靠数据库。 包括网上购物，假如衣服只有3件库存，你要是能卖4件，那系统肯定是有问题的。谁来保证这件衣服最多只能卖出去3件呢？数据库。 数据库是当今信息社会的基石，也是市场价值非常大的产品。在2023年，全球的数据库的市场规模超过了1000亿美元。美国大概占了其中的50%，其次是欧洲，之后就是咱们中国。这么大的一个市场，竞争对手也一定非常强大。 而且数据库还有一个很好的特征，就是它跟语言文化或者地域无关，是全球通用的，所以赢者通吃。大家可能会说，我们有地理信息的数据库、有医药的数据库呀？但这些都是数据库的应用，是数据库里的数据，而数据库系统本身其实跟这些东西无关。 那今天世界上数据库业务做得最好的是谁呢？Oracle，也就是甲骨文，而且甲骨文也是所有数据库里面真正赚大钱的。其他的数据库要么赚一点小钱，要么就是在温饱线挣扎地活着。 还有一个很优秀的数据库MySQL，它也是甲骨文这家公司的，它是个开源的数据库。 那既然已经有了开源的、免费的数据库，为什么还要用一个新的还要花钱的数据库呢？这些都是我们做数据库之前需要考虑和解决的问题。 但是我觉得，15年前开始做数据库，对于我们来说是赶上了一个非常好的机会。这也是我说服公司当时相关领导人来做这个决策的重要原因。因为在一家互联网公司里，做一个长远的项目是一个很大的挑战。当时我的老板就是今天阿里集团的CEO吴泳铭，最终我说服了他，他也愿意支持我们做这个项目。 我跟他讲到了要做这个项目的几个原因。第一个原因“天时”，传统的数据库是集中式的，需要用高端硬件，因为它们的可靠性要很高。在互联网到来之后，数据量、访问量已经有了几百倍几千倍的增长。在这种情况下继续使用这种高可靠性的高端硬件，成本是让人难以接受的。这就导致了集中式数据库这条路很难走下去。适合这个大数据时代的数据库，一定是分布式的。 第二个原因“地利”，我们从阿里的双11的数据就能看得到。从2009年第一次双11开始，那时候大概做了5000多万的业务。到了10年以后的2019年，业务量为2600多亿，出现了几千倍的增长。 整个阿里先有淘宝，后来有了天猫，还有支付宝，这些业务系统都是构建在数据库之上的。那我们的数据库就有了机会在这些业务系统上成长、成熟起来。所以说，电子商务在中国的井喷式发展，特别是在淘宝和支付宝上的发展，给了我们一个特别好的做数据库的机会。 第三个原因是“人和”。其实这也是这个项目最大的争议之一，因为当时的我并没有数据库的背景。大家说，你一个没有数据库背景的人怎么能做一个这么难的项目？我们国家也罢、全世界也罢，当时已经有十几年没有出现过新的数据库产品了。凭什么要让一个不懂数据库的人来做数据库呢？ 我的理由是，数据库在集中式这条路上，技术上已经走到了尽头，它一定会往分布式方向走。分布式数据库还没有人做过，因为它有很多的困难。而我自己最近这些年做的就是分布式的工作。 但是，数据库发展了这么多年，甲骨文公司有十几万人在做数据库，为什么他们没有做分布式数据库呢？我们当时整个阿里包括淘宝和支付宝一共才几千人，就算一个人顶别人十个人，我们也做不出来数据库跟人家来竞争啊。 分布式数据库能做成吗？ 那我们先来看看，分布式数据库到底好在哪里，它的难点我们究竟能不能克服。 就像刚才说的，分布式数据库最重要的价值，就在于它的容量是可以伸缩的，可以说解决了数据库系统的容量问题。其次，硬件的成本也会大幅度地降低，因为分布式系统不再会使用也不再需要那些高端的硬件了。 那最大的困难在哪儿呢？大家知道，数据库里面一些很关键的操作，是需要有“原子性”和“持久性”的。比如转账从一个账户转到另一个账户，如果用一台集中式高可靠性的机器，它就会很少出故障。但是在分布式系统里面，整个系统的故障跟结点数密切相关，结点越多出故障的概率也越大。 如果我昨天跟人做了一笔生意，别人给我转了一个亿，结果银行今天告诉我，因为数据库的硬盘故障了，一个亿没了，我想没有人能接受这样的情况。所以这是我们在做分布式数据库之前首先要解决的。如果不解决这个问题 👇🏽歡迎嘗試我頻道裡的其他影片👇🏽 通信：https://youtube.com/playlist?list=PLB9Z6EK7D1pA3YNZg7Vd54gu9j-3lu9xW 人工智能：https://youtube.com/playlist?list=PLB9Z6EK7D1pDbRLnJxM-PEfZ1W_s2nRDD 航天：https://youtube.com/playlist?list=PLB9Z6EK7D1pAyFQasWXGZxmxOPksoswWO 宇宙：https://youtube.com/playlist?list=PLB9Z6EK7D1pC_0V2bllUY0-byY89NHFX6 教育：https://youtube.com/playlist?list=PLB9Z6EK7D1pDjQ_3XtuKkNEa1iT7i3wdZ 少年中国：https://youtube.com/playlist?list=PLB9Z6EK7D1pDK84f6vdIZ4XsrIEI-Mr8e 植物：https://youtube.com/playlist?list=PLB9Z6EK7D1pAuvffvEL-xSlMhT9K5SWfH 生物：https://youtube.com/playlist?list=PLB9Z6EK7D1pBn7e2LFaAPUS11idLYouKM 心理：https://youtube.com/playlist?list=PLB9Z6EK7D1pDxxCMFA_XtfzE78yIMZYI_ 医学：https://youtube.com/playlist?list=PLB9Z6EK7D1pC5H2fLJqFB-h_weTvHaddl 生态：https://youtube.com/playlist?list=PLB9Z6EK7D1pC5H2fLJqFB-h_weTvHaddl 环境：https://youtube.com/playlist?list=PLB9Z6EK7D1pBvEcPpC36E6AOjPoK_BKka 药学：https://youtube.com/playlist?list=PLB9Z6EK7D1pCixaMNMdGjnCcd8RLdr91s 数学：https://youtube.com/playlist?list=PLB9Z6EK7D1pAXjBANV55Nt9hYG19KLT1N 物理：https://youtube.com/playlist?list=PLB9Z6EK7D1pBNdoA2y7-RW5jfRnxXdtQ5 化学：https://youtube.com/playlist?list=PLB9Z6EK7D1pAew_hXCBptVsjcg6teWJlg 艺术：https://youtube.com/playlist?list=PLB9Z6EK7D1pDHAhKsuy4dIHb5g_ethAzw 摄影：https://youtube.com/playlist?list=PLB9Z6EK7D1pC7yr0V9nIzhMf_nNK2rLys 传媒：https://youtube.com/playlist?list=PLB9Z6EK7D1pAM2Z-BDaoi3BLFySYqc4BW 考古：https://youtube.com/playlist?list=PLB9Z6EK7D1pBOSQ8G2F-lrNwfYDqjF2GY 恐龙：https://youtube.com/playlist?list=PLB9Z6EK7D1pBXkbu-DKCpnuJrr-xUSE4t 地震：https://youtube.com/playlist?list=PLB9Z6EK7D1pCeAVPX8_-YaWSQIkHWkPWe 诺贝尔奖：https://youtube.com/playlist?list=PLB9Z6EK7D1pAIi1rM6DhUcReUpkEd7pbU 工程：https://youtube.com/playlist?list=PLB9Z6EK7D1pBucKmv2hF3pa97N6qKJQrr 音乐：https://youtube.com/playlist?list=PLB9Z6EK7D1pBzbhvnowIN6CjKwxZr60HO 建筑：https://youtube.com/playlist?list=PLB9Z6EK7D1pA4r-cnJjNLjJ68ZWt0d-lO 能源：https://youtube.com/playlist?list=PLB9Z6EK7D1pBSdQw87Lr6gWrzlIvu2huc #中科院 #格致论道 #科学 #科普 #知识 #知识科普 #格致論道 #科學 #知識 #知識科普 #教育 #self