導(dǎo)語：

　　1年前OceanBase團(tuán)隊開了個會，定了個小目標(biāo)，接下來的一年中這群工程師閉關(guān)攻堅。從掉頭發(fā)到睡幾個小時就跳起來看郵件，更甚至有人天天焦慮地捧著手機(jī)等郵件。

　　1年后，螞蟻金服自研數(shù)據(jù)庫OceanBase登上TPC-C排行榜榜首，這一成績開創(chuàng)了多項世界先河：中國數(shù)據(jù)庫第一次登上TPC-C榜單;第1次基于公有云通用機(jī)型進(jìn)行測試;分布式無共享關(guān)系數(shù)據(jù)庫第1次通過審計并取得創(chuàng)紀(jì)錄成績。今天，我們走到幕后看成績背后的光榮與夢想，艱辛與淚水。

　　2010年，在全球OLTP數(shù)據(jù)庫權(quán)威測試TPC-C中，老牌數(shù)據(jù)庫巨頭Oracle取得了tpmC 3000多萬的成績，接近第二名IBM的3倍，堪稱“獨步武林”。此后的9年中，這一紀(jì)錄無人能破。

　　在2011年，阿里巴巴內(nèi)部一個數(shù)據(jù)庫團(tuán)隊在備戰(zhàn)雙11時遇到了點麻煩，他們所支持的淘寶收藏夾業(yè)務(wù)只要流量一大就反復(fù)宕機(jī)。大戰(zhàn)在即，團(tuán)隊全員立刻匯合，緊急修改代碼。

　　今天看來這不過是個小問題，但在當(dāng)時卻生死攸關(guān)。“要是解決不了這個問題，我們的項目就掛了。”

　　螞蟻金服研究員楊傳輝當(dāng)時就站在負(fù)責(zé)修改代碼的工程師背后，一行一行給他review。他的身旁站著陽振坤——他們的Leader，也是這個數(shù)據(jù)庫項目的創(chuàng)始人。

　　他們的項目名叫OceanBase，第一次正式承接雙11流量時，這個數(shù)據(jù)庫還沒滿2歲，淘寶收藏夾是他們唯一支持的業(yè)務(wù)。

　　那一年誰也沒有想到，九年之后，OceanBase一舉超越Oracle，登上了TPC-C benchmark的榜首。

　　“聽到目標(biāo)的那一刻驚呆了”

　　TPC-C是全球目前最具公信力的聯(lián)機(jī)交易處理(OLTP)數(shù)據(jù)庫的功能與性能結(jié)合的測試標(biāo)準(zhǔn)。簡而言之，一款商業(yè)數(shù)據(jù)庫想要向業(yè)界證明自身實力，TPC-C測試是一項硬指標(biāo)。TPC-C的排行榜長期被Oracle、IBM等外國廠商占據(jù)，從未出現(xiàn)過中國自研品牌的身影。

　　很高的測試門檻，把眾多廠商擋在門外。首先，TPC-C測試需要模擬真實的交易環(huán)境去運(yùn)行，整個測試的工具，包括所有鏈路在內(nèi)，都需要自己搭建，而且要嚴(yán)格按照TPC委員會發(fā)布的標(biāo)準(zhǔn)來做——一份100多頁的PDF，事無巨細(xì)，全是英文。其次，交易數(shù)據(jù)庫性能的提升本身就是一件極為困難的事，Oracle已經(jīng)站在巔峰，想超越它談何容易。

　　“我們不是去年才想起要跑TPC-C測試的，我們從2010年立項第一天就研究過這個指標(biāo)。”楊傳輝說。但是他們也清楚地知道，拿著尚未成熟的產(chǎn)品去跑測試是白費功夫：“三四十名可能都拿不到。”

　　厚積薄發(fā)。這一“積”就是九年多。

　　2018年8月，螞蟻金服技術(shù)專家鄒銀超和OceanBase團(tuán)隊一起開了個會。在這場為籌備TPC-C測試而開的項目會上，楊傳輝定下了打榜“小目標(biāo)”：超越Oracle的紀(jì)錄。但陽振坤的預(yù)期不止于此。“我們來創(chuàng)造一個Oracle永遠(yuǎn)趕不上的新紀(jì)錄吧。”OceanBase之父拍板定音。

　　鄒銀超感到震驚。Oracle 3000多萬的紀(jì)錄已經(jīng)保持了九年，無人可以撼動，OceanBase起步至今也才九年，對于數(shù)據(jù)庫來說還非常年輕，第一次沖擊TPC-C紀(jì)錄，就直接劍指數(shù)據(jù)庫王者Oracle。

　　“這個項目大概要做兩三年吧?”他當(dāng)時如此揣測。

　　按照既有的經(jīng)驗，兩三年時間都很緊張。螞蟻金服資深技術(shù)專家蔣志勇作為OceanBase團(tuán)隊的核心成員，在籌備的初期階段跟隨陽振坤先后拜訪了浪潮集團(tuán)喬鑫總經(jīng)理和清華大學(xué)陳文光教授，學(xué)習(xí)和了解TPC-C測試的相關(guān)流程。而為了做出符合TPC-C規(guī)范的測試工具，需要將大量的人力和資源投入到產(chǎn)品研發(fā)和改進(jìn)方面。“不管怎么說，測試只是手段，做出更好的產(chǎn)品才是目的。”蔣志勇說。

　　專攻測試工具的團(tuán)隊很快組建起來，蔣志勇牽頭，成員人數(shù)一只手就數(shù)得過來。

　　TPC-C項目北京團(tuán)隊閉關(guān)攻堅

　　技術(shù)攻堅組也組建到位，北京一個團(tuán)隊，杭州一個團(tuán)隊，各占一個項目室，開始閉關(guān)攻堅。

　　其他各個團(tuán)隊都伸出了援手：硬件團(tuán)隊、中間件團(tuán)隊、阿里云……DBA團(tuán)隊和業(yè)務(wù)團(tuán)隊也以極大的包容，在人手緊張資源不足的情況下，支持著OceanBase技術(shù)攻堅。

　　困難雖多，但開弓沒有回頭箭。“螞蟻的技術(shù)人是使命必達(dá)的。”正如DBA團(tuán)隊的資深運(yùn)維專家?guī)熚膮R所言，定下了世界第一的目標(biāo)之后，所有人都會團(tuán)結(jié)一致，就會傾盡全力去戰(zhàn)斗。“追求極致，沒有上限。”

　　“審計員都沒見過的新玩意兒”

　　TPC-C測試的流程中，非常重要的一環(huán)是審計員來現(xiàn)場審計，以確認(rèn)測試的所有細(xì)節(jié)符合規(guī)范。審計員全世界只有三位，滿世界飛來飛去，日程緊張。

　　鄒銀超來自數(shù)據(jù)技術(shù)部，在項目中負(fù)責(zé)硬件選型、系統(tǒng)性能優(yōu)化和測試方案評估，幾乎每天都要和審計員進(jìn)行郵件溝通。因為十多個小時的時差，他最常做的事就是凌晨把郵件發(fā)出去，睡幾個小時，然后跳起來看審計員有沒有回復(fù)。

　　一開始的測試方案是基于物理機(jī)做的傳統(tǒng)方案。但到了2019年新年前后，策略發(fā)生了變化：準(zhǔn)備使用阿里云ECS虛擬機(jī)進(jìn)行測試。

　　比起使用昂貴的專用設(shè)備，上云意味著大幅度降低實際測試成本，以及優(yōu)秀的可擴(kuò)展性。OceanBase的這個方案，硬件成本僅占18%，遠(yuǎn)低于Oracle的硬件成本占比，但是在公有云上做TPC-C測試，前所未有。

　　審計員對此表示出了強(qiáng)烈的興趣。分布式數(shù)據(jù)庫來測TPC-C，OceanBase已經(jīng)是第一家了，以如此大規(guī)模的集群上云測試，更是聞所未聞。

　　但是面對這樣一種全新的形式，審計員也很謹(jǐn)慎，每一個細(xì)節(jié)都“摳字眼”式地確認(rèn)。“有時候我們所有測試都跑完了，審計員忽然指出‘這里不合規(guī)’，就又得重頭來過。”回憶起艱辛的溝通過程，蔣志勇苦笑。

　　“來回溝通了三個月左右，因為拿不準(zhǔn)會測什么和怎么測，每一種測試方案都要準(zhǔn)備和溝通。”鄒銀超說，“天天焦慮地捧著手機(jī)等郵件。”

　　更讓他們焦慮的事來了：到了2019年5月，整整一個星期，審計員沒有任何反饋。

　　陽振坤保持淡定：“再等兩天。”

　　兩天過去了，仍然杳無音信。團(tuán)隊坐不住了，寫郵件過去詢問。這一次審計員回了一封極長的郵件，原來是因為OceanBase的測試方案從未有人做過，而且規(guī)模特別龐大，審計員自己也沒把握，專程去了一趟TPC組織總部，把方案提交給TPC-C技術(shù)委員會開會討論。

　　討論的結(jié)果反饋到了陽振坤手中，他第一時間把消息發(fā)到了整個項目的每一個相關(guān)群里。“通過了!”測試方案最終獲得了TPC-C委員會的認(rèn)可。“心頭的一塊大石頭總算落了地。”蔣志勇松了口氣。各個群里一片歡騰，但這還只是路程中的第一塊里程碑。

　　“大家像戰(zhàn)友一樣，把后背交給對方”

　　“聚到一個項目里，大家從肉體到心靈，都靠得更近了。”

　　TPC-C項目杭州攻堅團(tuán)隊

　　螞蟻金服技術(shù)專家曹暉是早期就加入TPC-C測試項目的成員之一，這一年多來，他最常感到的就是“時間不夠用”。物理機(jī)換成虛擬機(jī)，單機(jī)50%的性能差距很快顯現(xiàn)出來，如何在短時間內(nèi)找到優(yōu)化點提升性能，成為團(tuán)隊攻堅的重點任務(wù)。

　　杭州閉關(guān)室的墻上畫著一張性能表，每周更新，這條性能曲線也成為團(tuán)隊成員的“心情曲線”：“看著它像階梯一樣一步一步地走高，大家就非常高興;要是連續(xù)一段時間爬不上去，就要開始掉頭發(fā)了。”曹暉笑著說。

　　掉頭發(fā)的不僅僅是OceanBase的攻堅團(tuán)隊。師文匯和DBA團(tuán)隊也每天都在“發(fā)愁”穩(wěn)定性和研發(fā)效能。螞蟻最核心的業(yè)務(wù)全部都運(yùn)行在OceanBase上，穩(wěn)定性絲毫不容有失，但大量人力和資源投入到TPC-C項目后，支持和維護(hù)日常業(yè)務(wù)的重?fù)?dān)都落到DBA團(tuán)隊和業(yè)務(wù)團(tuán)隊肩上，工作量激增。

　　“最緊張的是研發(fā)環(huán)境，如果出問題，很多業(yè)務(wù)開發(fā)都會受影響。”整整一個半月，DBA、交付、系統(tǒng)等團(tuán)隊都在攜手應(yīng)對這個問題，終于，風(fēng)險排除了。

　　TPC-C測試的結(jié)果公布后，陽振坤在群里向所有兄弟團(tuán)隊表示感謝：“感謝大家對OceanBase的理解和寬容。”

　　想要取得任何重大成就，一個團(tuán)隊的力量始終有限，但百川匯海，聚沙成塔。“一場仗，一顆心。”楊傳輝用這六個字總結(jié)這場舉全員之力的聯(lián)合作戰(zhàn)，師文匯的說法更熱血也更感性一些：“勝則舉杯同慶，敗則拼死相救。大家像戰(zhàn)友一樣，把后背交給對方。”

　　“從來沒見過這么平穩(wěn)的曲線”

　　7月底，性能攻堅告一段落，真正用于測試的大規(guī)模集群由阿里云準(zhǔn)備到位，交到了項目團(tuán)隊手中。曹暉被任命為“操作員”，掌控兩百多臺ECS云服務(wù)器。

　　意想不到的事又發(fā)生了。之前在小規(guī)模集群上解決掉的問題，一上到大規(guī)模集群，又一一暴露出來。“壓力不均勻，抖動很厲害，還出現(xiàn)了不少完全沒預(yù)料到的問題。”蔣志勇說，“而且這還只是一些基礎(chǔ)問題，把它們解決掉之后，還得把曲線跑得很平穩(wěn)才行。”

　　按照TPC-C的要求，在測試取值的2小時之內(nèi)，系統(tǒng)抖動不能超過2%。

　　而此時距離審計員前來杭州現(xiàn)場審計，時間僅剩兩周。

　　從拿到正式測試的大規(guī)模集群開始，大家就開始連軸轉(zhuǎn)。曹暉天天在群里“釘”人，他盯著200多臺云服務(wù)器的運(yùn)行，只要發(fā)現(xiàn)問題，馬上“釘”到對應(yīng)的同學(xué)，被“釘”的同學(xué)無論在杭州還是北京，第一時間抄起電腦就沖到閉關(guān)室。

　　阿里云團(tuán)隊也傾力配合，IaaS層的配置和性能的優(yōu)化，問題一個一個地在他們的支持下被攻克。

　　“想法很簡單，就是往前沖。沒有退路，很多崗位連backup都沒有。”

　　沒有兩三年時間，只用了一年，OceanBase就迎來了TPC-C的最終大考。

　　8月6日，TPC-C審計員抵達(dá)杭州螞蟻金服總部。

　　“一邊很有信心，一邊又很緊張。”楊傳輝這樣形容當(dāng)時的心情。信心來自于九年以來的積淀，他們自信已經(jīng)具備了沖擊Oracle紀(jì)錄的實力;緊張來自于時間緊迫，最后針對大規(guī)模集群的調(diào)試只有兩周，會不會有不可預(yù)知的問題發(fā)生?

　　測試工具啟動，OceanBase開始運(yùn)行，預(yù)熱的時間中，審計員出去喝了杯咖啡。等他再回來時，性能曲線已經(jīng)展示在了屏幕上——極其平穩(wěn)，沒有絲毫抖動。

　　經(jīng)驗豐富的審計員大為驚嘆，因為從來沒有見過這么平穩(wěn)的曲線：“Very impressive!”

　　TPC-C的性能測試要求取值時段是2小時，OceanBase是8小時;TPC-C要求的抖動幅度是不超過2%，OceanBase是低于0.5%。

　　現(xiàn)場審計結(jié)果獲得審計員認(rèn)可，接下來又經(jīng)過了一個多月的調(diào)優(yōu)，9月底，OceanBase跑出了Final run結(jié)果。凌晨4點，曹暉和鄒銀超把最終報告發(fā)給審計員。

　　10月2日一早，審計通過的結(jié)果出現(xiàn)在了TPC-C官網(wǎng)上——tpmC 6088萬，是Oracle紀(jì)錄的兩倍多，新的紀(jì)錄誕生了。

　　“那一刻真沒有感覺到特別興奮，反而覺得，這就是理所當(dāng)然的。”蔣志勇說。鄒銀超也有同感：“覺得就應(yīng)該是這么優(yōu)秀的。”

　　“技術(shù)男不會特別情緒化。而且，我們在2014年就已經(jīng)興奮過了。”楊傳輝說。這位從頭看著OceanBase誕生和成長的工程師經(jīng)歷過更多風(fēng)浪，最情緒化的反應(yīng)留在了當(dāng)年OceanBase第一次承接核心支付業(yè)務(wù)成功的時刻，“寫代碼這件事，只要堅持得足夠長，肯定能做出來，但是就是需要堅持，這種堅持可能以十年二十年為單位。到了真正做出來的時刻，就會覺得是理所當(dāng)然的了。”

　　“不管是在做TPC-C還是日常工作中，我覺得螞蟻的技術(shù)人是使命必達(dá)的，在做一件事情或者確定一個目標(biāo)以后，傾盡全力去戰(zhàn)斗。就像TPC-C項目啟動的時候，陽老師說一定要做到世界第一，然后大家團(tuán)結(jié)一致為了這個目標(biāo)去努力。”師文匯說，“螞蟻技術(shù)人一直在追求極致，不斷的用創(chuàng)新去突破當(dāng)前技術(shù)的限制，這個在雙十一、TPC-C測試以及日常的工作中都有所體現(xiàn)，比如想盡辦法去優(yōu)化CPU的消耗、用各種方法降低RT時間。”

　　“家人終于知道我是做什么的了”

　　這個來之不易的世界第一，不僅足以讓每一個從事數(shù)據(jù)庫行業(yè)的工程師感到驕傲，也屬于為之努力過的每一位技術(shù)人。

　　“比打破紀(jì)錄更重要的，是OceanBase為這個行業(yè)打開了全新的可能性。”蔣志勇說，“假如按Oracle的路子走，Oracle就是頂峰了，但OceanBase用分布式的方式去做這件事，取得了一個新的紀(jì)錄，讓市場和客戶有了新的選擇。”

　　以這個世界第一為契機(jī)，平時不太接觸技術(shù)領(lǐng)域的人，也開始了解中國自研的數(shù)據(jù)庫。“我的家人終于知道我是做什么的了。”曹暉感慨說，“更讓我高興的是，他們已經(jīng)開始給別人講什么是數(shù)據(jù)庫了。”

　　楊傳輝把OceanBase登頂成功的報道轉(zhuǎn)到了朋友圈，他很快接到了母親的電話：“你朋友圈里發(fā)的那個‘世界第一’是什么?”七歲的女兒也興致盎然地來問他，他對孩子解釋說，這是一個跑得很快很快的東西。

　　但每一位工程師都清楚地知道，“跑得很快”只是一個優(yōu)秀數(shù)據(jù)庫的必要條件，而非充分條件。

　　“數(shù)據(jù)庫像個跑車。極限速度取決于發(fā)動機(jī)，但跑車不僅僅只是一個發(fā)動機(jī)。OceanBase在TPC-C測試的成績，證明我們在‘發(fā)動機(jī)’性能方面達(dá)到了全球領(lǐng)先水平。但是數(shù)據(jù)庫的綜合能力方面，我們還有很大的進(jìn)步空間。”

　　下一步，OceanBase還要開發(fā)更豐富的功能，提升復(fù)雜查詢的能力，在同一套引擎里既支持OLTP又支持OLAP。此外還要基于上下游產(chǎn)業(yè)來營造一整套生態(tài)系統(tǒng)。這些就像是跑車的外觀、車內(nèi)設(shè)施、配套服務(wù)等等，只有全都做好，才能打造出一款頂級跑車。

　　此外，螞蟻金服還決定將自己開發(fā)用于TPC-C測試的工具開源。這意味著TPC-C將變成一種“普惠”測試。“任何一家公司只要在阿里云上租用資源，用這個開源工具跑測試，然后請審計人員來審計就可以了。”楊傳輝說，“關(guān)鍵只在于，你的產(chǎn)品夠不夠好。”

　　2018雙十一中的OceanBase團(tuán)隊

　　OceanBase用了九年將自己的產(chǎn)品打磨至此，但創(chuàng)造一個新紀(jì)錄并不是它最終的目的。更重要的是，它為中國自研的數(shù)據(jù)庫鋪平了一條道路，任何人只要有信心和決心，都可以去挑戰(zhàn)這個行業(yè)的王者。

特別提醒：本網(wǎng)內(nèi)容轉(zhuǎn)載自其他媒體，目的在于傳遞更多信息，并不代表本網(wǎng)贊同其觀點。其原創(chuàng)性以及文中陳述文字和內(nèi)容未經(jīng)本站證實，對本文以及其中全部或者部分內(nèi)容、文字的真實性、完整性、及時性本站不作任何保證或承諾，并請自行核實相關(guān)內(nèi)容。本站不承擔(dān)此類作品侵權(quán)行為的直接責(zé)任及連帶責(zé)任。如若本網(wǎng)有任何內(nèi)容侵犯您的權(quán)益，請及時聯(lián)系我們，本站將會在24小時內(nèi)處理完畢。