“不服跑個分?”是一個老梗了。雖然，我們不能盲目崇信跑分，但跑分的確是一種比較直觀反映軟硬件性能的方式。不過，相比手機(jī)跑個分，數(shù)據(jù)庫性能測試卻要復(fù)雜的多……

　　最近，一家小公司顛覆了我們的認(rèn)知!它完整的通過數(shù)據(jù)庫界最難的一個測試標(biāo)準(zhǔn)TPC-DS，說是登頂了數(shù)據(jù)庫領(lǐng)域的最高峰，并不為過，因為，此前的12年里，全球還沒有任何一家公司成功過。

　　5月3日，這家公司還在自家的用戶大會上發(fā)布了一系列創(chuàng)新產(chǎn)品：人工智能平臺智子;一站式大數(shù)據(jù)平臺產(chǎn)品：TDH6.0，分布式圖數(shù)據(jù)庫StellarDB，分布式閃存數(shù)據(jù)庫ArgoDB;大數(shù)據(jù)云平臺產(chǎn)品Data Cloud。

　　這家公司叫“星環(huán)科技”，創(chuàng)始人團(tuán)隊均出自Intel，或許Intel都不曾想到，五年前被砍掉的一個項目，居然成就了今天這個估值超過20億，年營收超過2個億，騰訊都搶著投錢下注的公司。

　　TPC測試委員會主席Raghu

　　我們首先回顧下事情的經(jīng)過，5月3日，全球知名的數(shù)據(jù)管理系統(tǒng)評測基準(zhǔn)標(biāo)準(zhǔn)化組織TPC宣布，星環(huán)TDH平臺成為全球首個經(jīng)過TPC官方審核的TPC-DS基準(zhǔn)測試的數(shù)據(jù)平臺，打破了該領(lǐng)域十二年來沒有公司通過該項測試的局面，在世界范圍內(nèi)填補(bǔ)了該項技術(shù)的空白。

　　該基準(zhǔn)測試使用思科UCS集成基礎(chǔ)架構(gòu)用于大數(shù)據(jù)和分析以及Transwarp Data Hub v5.1。

　　也許很多人不清楚TPC是個什么組織，TPC-DS是個什么測試，我們先行腦補(bǔ)。

　　眾所周知，用戶在選用平臺時，面對的是一個繽紛繁雜的世界。用戶希望有一種度量標(biāo)準(zhǔn),能夠量化計算機(jī)系統(tǒng)的性能，以此作為選型的依據(jù)。因此，誕生了眾多標(biāo)準(zhǔn)化組織，而TPC就是其中之一。

　　TPC (事務(wù)性能管理委員會)是目前全球最知名的數(shù)據(jù)管理系統(tǒng)評測基準(zhǔn)標(biāo)準(zhǔn)化組織。它的功能是制定商務(wù)應(yīng)用基準(zhǔn)程序(Benchmark)的標(biāo)準(zhǔn)規(guī)范、性能和價格度量，并管理測試結(jié)果的發(fā)布。

　　在過去二十多年間，該機(jī)構(gòu)發(fā)布了多項數(shù)據(jù)庫評測基準(zhǔn)，如TPC-A、TPC-D、TPC-H和TPC-DS，在業(yè)界得到了廣泛應(yīng)用，相對而言，TPC在學(xué)術(shù)界和工業(yè)界擁有更強(qiáng)的影響力。

　　TPC-DS最早是用來衡量數(shù)據(jù)庫分析性能的基準(zhǔn)測試。它是2006年在第32屆VLDB數(shù)據(jù)庫會議上提出，有99個測試。但基準(zhǔn)測試不僅僅涉及這些查詢。測試過程和指標(biāo)包括以下六個步驟(更多詳細(xì)信息，請參閱TPC-DS規(guī)范)：

　　數(shù)據(jù)負(fù)載測試(LD)。

　　功耗測試(PT)，在一個流中運(yùn)行99個查詢。

　　吞吐量測試1(TT1)，它在多個流中運(yùn)行99個查詢。

　　維護(hù)測試1(DM1)，它使用刷新功能更新數(shù)據(jù)庫。

　　吞吐量測試2(TT2)，在多個流中重新運(yùn)行99個查詢。

　　維護(hù)測試(DM2)，使用刷新功能重新更新數(shù)據(jù)庫。

　　這99個查詢被定義為模板。每個查詢都有幾個參數(shù)，這些參數(shù)由dsqgen和SEED確定，具體為“被選為用格式mmddhhmmsss”表示的數(shù)據(jù)庫加載時間結(jié)束時間(加載結(jié)束時間)的時間戳。這個時間戳“保證查詢替換參數(shù)值在運(yùn)行之前是未知的”。除參數(shù)外，不同流的查詢順序也不相同。圖1顯示了執(zhí)行順序。

　　TPC-DS的性能結(jié)果取決于每個步驟的時間(生成SQL的時間不是結(jié)果的一部分)。根據(jù)TPC-DS測試流程，SQL語法和事務(wù)支持，優(yōu)化，穩(wěn)定性和可伸縮性被確定為DBMS的關(guān)鍵因素。

　　自從這個標(biāo)準(zhǔn)提出到今天，12年來，一直沒有一個產(chǎn)品能通過。因此，被視為數(shù)據(jù)庫界最難的一個測試標(biāo)準(zhǔn)，每隔一兩年都會在數(shù)據(jù)庫頂級會議上被討論，但遺憾的是一直沒有人能通過。

　　而TPC-DS測試模擬場景的數(shù)據(jù)量都比較大，一般10TB起步，傳統(tǒng)數(shù)據(jù)庫廠商多年都未通過，如IBM、Oracle、Teradata都曾做過嘗試，但并沒有成功。而大數(shù)據(jù)庫廠商出現(xiàn)以后，為了衡量SQL和Hadoop誰更好，從 2014年開始，主流Hadoop廠商(如Cloudera, Hortonworks，Databricks)也開始試圖攻破這一難題，每年都會去測上一次，也依然沒有取得什么實質(zhì)進(jìn)展。

　　星環(huán)科技創(chuàng)始人、董事長孫元浩在接受筆者采訪時表示：“我們參與測試的目的，并不是為了測試而測試，最初，我們的目的只是為了衡量我們的產(chǎn)品處于什么樣的水平階段，同時看看能不能通過測試。”

　　孫元浩說：“實際上，我們在2014年底就通過了第一階段測試，而后面的步驟花了三年多的時間，去年7月，我們把測試結(jié)果提交給TPC組織，他們花了五個月的時間去審計結(jié)果。審計完以后再把所有測試結(jié)果和過程的全部公開在網(wǎng)上，接受質(zhì)疑，所以它的難度是非常高的。”

　　目前，國外廠商對TPC-DS的攻關(guān)還處在第一階段，孫元浩補(bǔ)充道。

　　由于SQL或事務(wù)支持限制，大多數(shù)基于Hadoop的廠商無法運(yùn)行完整的TPC-DS基準(zhǔn)測試。由于架構(gòu)和優(yōu)化限制，傳統(tǒng)數(shù)據(jù)庫廠商難以通過測試或無法取得良好結(jié)果，尤其是在大數(shù)據(jù)環(huán)境下，比如傳統(tǒng)數(shù)據(jù)庫由于架構(gòu)限制，當(dāng)有大量數(shù)據(jù)交換時，會導(dǎo)致單個節(jié)點(diǎn)瓶頸。為了降低影響，一些廠商會引入了特殊設(shè)備來處理數(shù)據(jù)交換，這使得系統(tǒng)的成本很高。

　　而星環(huán)能通過完整測試，毫無疑問的證明，在某些領(lǐng)域星環(huán)已經(jīng)超越國外廠商了，技術(shù)的差距總體來說已經(jīng)很小了，甚至在某些方面已經(jīng)超過了國外廠商。

特別提醒：本網(wǎng)內(nèi)容轉(zhuǎn)載自其他媒體，目的在于傳遞更多信息，并不代表本網(wǎng)贊同其觀點(diǎn)。其原創(chuàng)性以及文中陳述文字和內(nèi)容未經(jīng)本站證實，對本文以及其中全部或者部分內(nèi)容、文字的真實性、完整性、及時性本站不作任何保證或承諾，并請自行核實相關(guān)內(nèi)容。本站不承擔(dān)此類作品侵權(quán)行為的直接責(zé)任及連帶責(zé)任。如若本網(wǎng)有任何內(nèi)容侵犯您的權(quán)益，請及時聯(lián)系我們，本站將會在24小時內(nèi)處理完畢。