不再卡脖子 這一國產核心技術終於”硬”了起來!

在叢林里,最終能存活下來的,往往不是最高大、最強壯的,而是對變化能作出最快反應的物種。

——英國生物學家、進化論奠基人 達爾文

對現在的IT行業來說,新舊勢力的對決已經司空見慣,例如,當年風靡的諾基亞卻被蘋果、三星所打敗,又如在企業中,傳統的IT系統正在被雲計算所取代。這一幕也正在數據庫市場上演。

不再卡脖子 這一國產核心技術終於
甲骨文公司(Oracle)創始人拉里·埃里森(LarryEllison)

多年來,中國數據庫市場一直牢牢的被國外廠商所佔據,僅甲骨文一家就佔了半壁江山。當甲骨文研發中心撤出中國時,創始人埃里森說的那番話想必都深深地刺痛了國人的心:不能任由中國培養出比美國還多的工程師!

自從中興事件之後,”關於核心技術,中國還缺什麼”這一話題就在業界持續發酵。一時間,芯片、操作系統、光刻機、觸覺傳感器、工業軟件等等,都被劃歸到”卡脖子”的領域,希望得到更多大眾的關注。

而在沉寂了很久的國產數據庫領域,也突然熱鬧起來。

去年5月15日,華為正式推出了分佈式數據庫GaussDB,整合了人工智能技術,實現了數據庫的自我監測、自主運維。今年5月14日,騰訊雲也對外透露,旗下分佈式數據庫TDSQL的金融政企用戶數突破600家……

不再卡脖子 這一國產核心技術終於
(來源:TPC-C基準測試官網)

令人振奮的是,今年5月,螞蟻金服自研的分佈式數據庫OceanBase在素有”數據庫領域世界盃”之稱的TPC-C基準測試中,性能分數首次突破億級大關,達到7.07億tpmC,意味着每分鐘創建新訂單數7.07億。

而這距離其上次打破世界紀錄(6088萬tpmC)僅僅過去7個月,成績大幅提升近11倍,這也打破了由甲骨文等美國公司長達9年”霸榜”的現狀。

就在近日,螞蟻金服再次宣布,將OceanBase獨立進行公司化運作,成立由螞蟻100%控股的數據庫公司北京奧星貝斯科技,並由螞蟻集團CEO胡曉明親自擔任董事長。

這意味着,OceanBase這款自研的數據庫產品,已經成為螞蟻金服旗下一家面向B端的獨立技術服務公司,代表其數據庫業務商業模式的成熟,其在螞蟻集團內部的升格,進入到了一個全新的發展階段。

國產數據庫為什麼不行?

數據庫的概念最早可追溯至上個世紀60年代。顧名思義,數據庫就是一個存放數據的倉庫,並且是按照一定的數據結構進行組織、存儲的。我們需要按照數據庫的方法來管理數據,提取數據,利用數據。它也被視為是一項底層的、必要的核心技術能力。

到了70年代,關係模型已經誕生。80年代關係數據庫逐漸成為整個社會的信息基礎設施。在40多年的發展過程中經歷了多次演進,以甲骨文為代表的傳統商業數據庫仍舊統治着市場。

數據庫處於整個產業最底層的位置,替換風險相當大,但收益卻小得多。這也是即便像IBM、微軟這樣的後來者也無法取代Oracle的原因。這就導致了數據庫變成了一個門檻極高、強者恆強的領域,後來者很難居上。

在國產數據庫發展的40年中,最初源於國家的引導、支持和扶植。這一階段,國產數據庫的研發源於高校,直至今日,這幾家擁有高校背景的數據庫公司仍然是國產數據庫的重要參與力量,達夢、人大金倉、南大通用也被稱為傳統三劍客。

但是只有國家扶植、高效投入還不夠,無論是學術基因、市場缺失,還是生態支持,都使得國產數據庫的發展舉步維艱。

不再卡脖子 這一國產核心技術終於
1977年黃山首屆數據庫年會

達夢–由華中理工馮玉才教授創辦,完全自主研發。以Oracle為參照、追趕對象。

人大金倉–由人民大學王珊教授創辦,自主研發。普通的關係型數據庫。

南大通用(Gbase 8a)-南開大學的背景,2010年左右自主研發的,基於列式存儲的,面向數據分析、數據倉庫的數據庫系統。

20世紀90年代,市場上的國產關係型數據庫,多源自或者借鑒開源MySQL、PostgreSQL數據庫及其變種,或收購商業源碼(例如Informix)+自研的方式。純自研的國產數據庫還是少數,數據庫種類也不夠豐富。

此時的甲骨文數據庫軟件,功能已經極為豐富,支持的語句非常全面,超過ANSISQL的標準,代碼量堪稱浩瀚。

數據庫管理系統行業觀察家曉軍在《國產數據庫發展現狀分析》中指出:”數據庫技術發展到今天,國人並非不知道數據庫底層該怎麼開發,而是自己寫的代碼在市場上磨練比較少,對穩定性信心不足,而這種信心的不足同樣來自客戶方面。”

不可否認,高校背景出身的數據庫廠商也有自身的優勢,在技術方面也在不斷的成長,也為國產數據庫的發展起到了領路人和培育人才的作用。

2007年之後,除了傳統的數據庫廠商、數據服務商,互聯網廠商、雲計算廠商、硬件廠商、新興的創業公司也越來越多地投入到數據庫的研發中,呈現了百花齊放的局面。螞蟻金服的OceanBase就是代表之一。

OceanBase是怎麼誕生的?

隨着互聯網、電商、手機支付的發展,並發訪問量驟增,甚至達到百萬至千萬的級別,企業對數據庫提出了更高的擴展性和通用性需求,而傳統商業數據庫越來越難容納和處理如此巨大的數據量和訪問量。

在2010年之前,IBM的小型機、Oracle數據庫、EMC存儲設備(合稱IOE)幾乎成為銀行、電信等各大公司的標配,這些企業追求高可靠性而又不差錢,都非常喜歡IOE。但對於後來崛起的互聯網公司來說,隨着業務高速增長,傳統關係數據庫的缺點越來越明顯:擴展性差、容量小、處理能力不足、成本又非常高。

擁有着國內最大電商、支付體量的阿里巴巴,最先吹響了去”IOE”的號角。2009年,剛剛加入阿里的王堅院士提出,將IOE從阿里的IT體系中去除,代之以自主研發的系統,這一目標也體現在了2010年阿里的技術預算工作彙報中。

不再卡脖子 這一國產核心技術終於
來源:阿里技術公眾號

當時還發生了一個小故事:現在的高德總裁劉振飛,在當時負責組建淘寶技術保障部。他在給王堅博士彙報預算的時候,還得意地說到:”(淘寶)2010年不再購買小型機”,卻被王博士狠狠批評了一頓:”既然2010年可以不再購買小型機,為何還要給自己留下活口,2011年以後還可以買呢?加一個字:2010年起不再購買小型機!”

隨後,由阿里掀起的”去IOE”浪潮也開始在整個行業內引發了巨大的影響。

2010年,已經做了兩年多分佈式系統研究的陽振坤加入了阿里巴巴,開始進行分佈式數據庫OceanBase的研發。作為OceanBase的創始人,陽振坤放棄了基於成熟的開源數據庫做二次開發的這條老路,毅然決絕的選擇了周期長、投入大,還有可能面臨失敗的自研道路。

不再卡脖子 這一國產核心技術終於

螞蟻金服高級研究員、OceanBase創始人陽振坤(來源:OceanBase)

面對日益增長的流量壓力,他認為,單機數據庫已經走到了盡頭,下一步只能走向分佈式。如果能將分佈式技術揉到傳統關係型數據庫里,就能夠解決單機數據庫存在的各種問題,這對於當時整個互聯網的基礎設施都將是一個巨大的進步。

在第二年,OceanBase的第一個版本發佈,首先在淘寶收藏夾上小試牛刀,把服務器數量降低一個數量級,取得了非常好的效果。隨後的幾年,採用分佈式技術的OceanBase快速迭代,從對內支撐發展為對外技術輸出:

2014年,OceanBase替代Oracle在支付寶交易系統上線,負擔”雙十一”10%流量;

2015年,網商銀行成立,OceanBase成為全球首個應用在金融核心業務系統的分佈式關係數據庫;

2016年,OceanBase在支付寶賬務系統上線,支撐12萬筆/秒支付峰值;

2017年,支付寶首次把賬務庫在內的所有核心數據鏈路搬到OceanBase 上,創造4200萬次/秒數據庫處理峰值紀錄;

同年,OceanBase首次在阿里之外的商業銀行——南京銀行上線。

從關係數據庫的角度看,在如此大體量下,通過TPC-C基準測試已經非常困難,保持系統性能就更加困難。1500多個數據庫節點,5000多萬個倉庫以及對應數量的客戶端,並進行8個多小時的持續壓測,對整個系統是極大的考驗。

而OceanBase實現突破的關鍵就在於採用了新一代分佈式技術,顛覆了傳統數據庫集中式處理技術架構。

一般而言,傳統數據庫只能通過提升單機性能來提升整體性能,難以滿足市場持續擴張的數據處理需求。OceanBase通過分佈式擴展集群實現擴展能力的大幅提升,實現整體性能的數量級提升。

數據庫上雲,阿里們的新機會

根據Gartner的研究,2019年全球數據庫市場已經達到520億美元,漲幅達到18.2%,成為了整個基礎軟件行業中增速最快也是最大的市場。而在中國大陸,這一增長數字更是達到32%,越來越多的廠商和資本參與進來。

Gartner高級研究總監孫鑫對創業邦表示,從現在看來,國產數據庫廠商並不會對甲骨文形成太大的衝擊。在過去的十年,雖然行業中一直存在”去IOE”的聲音,但甲骨文就像一座難以逾越的大山,其市場份額依然穩居第一。同時,以阿里、騰訊、華為為代表的國產數據庫新生力量依然擁有非常大的機會。

首先,國產數據庫逐漸會變成政府、央企以及國企的首選。基於現在政策層面的原因,會使得這些機構重新認知國產數據庫或者開源數據庫,將其納入到採購體系當中。

其次,雲將主導數據庫市場的未來,成為大多數企業部署數據庫的首選。雲廠商正在撕裂傳統數據庫固若金湯的防線,往雲上走正在變成國企、央企重點考慮的事情。

就拿金融行業來說,近兩年,金融行業對擁抱開放的技術的需求越來越明顯,而現階段單純的雲服務已經無法真正滿足企業的需求。此前,銀監會提出銀行業應穩步實施架構遷移,到”十三五”末期,面向互聯網場景的重要信息系統全部遷移至雲計算架構平台,其他系統遷移比例不低於60%。

Gartner預測到2022年,全球75%的數據庫都會跑在雲上,只有5%的數據庫會考慮部署在本地。在中國,雲計算市場無疑是BAT、華為等國內廠商的天下,這些廠商所推出的數據庫產品在雲上的生態也將會越來越繁榮。

不再卡脖子 這一國產核心技術終於
來源:Gartner(2019年6月)

孫鑫指出,實際上,阿里、騰訊、華為也正在利用他們在雲計算市場上的優勢,帶動其數據庫業務營收的迅速增長。由Gartner公布的全球DBMS(數據庫管理系統)市場份額排名顯示,阿里雲第9位、華為第11位、騰訊雲第13位,雖然距離甲骨文、微軟、IBM這三座大山還有一段距離,但是其增長速度已經十分驚人。

作為全球雲計算的老大,AWS憑藉其豐富的雲產品和生態能力,其數據庫業務體量已經超越了老牌廠商IBM。我們也有理由相信,數據庫市場的未來就是雲計算。

BAT等雲廠商也不只做數據庫,其雲上的周邊產品也異常豐富,並且進行了大量的創新和增值服務。

例如,阿里雲的BI(商業智能)產品QuickBI,作為阿里數據中台的核心產品,用戶通過拖拽式操作即可完成數據的建模和分析。這也讓用戶能夠越來越深刻的認知到,基於數據庫產品其實能夠做更多的事情,而不僅僅是把數據存起來而已。雲也能夠給企業帶來更多的增值,而不僅僅是把數據換一個地方而已,這樣雲的生態也會讓更多人參與進來。

目前,雲上的生態已經基本建立起來了。大多數企業數據產生的地方就是在雲端,如果將雲上的數據拉到本地再做數據分析、數據存儲,就會增加很多整合的困難。因此,很多國企、央企也在考慮如何在一個純粹的雲環境下進行數據庫的部署和整合。

從創新的角度來看,無論是數據庫公司還是前端的商業BI公司,他們開發和創新的關注點也都在雲上。無論是算法、工具還是能力,基本都是優先基於雲的環境,甚至有些能力只能在雲上運行。因此,如果中國的企業想尋求創新,上雲幾乎是其必經之路。

未來幾年,雲計算無疑將成為國內外數據庫廠商爭奪的焦點。阿里作為國內雲計算的”一哥”,旗下螞蟻金服的OceanBase在雲上的創新也會進一步引起用戶的關注。

螞蟻金服的”一箭雙鵰”

從2017年開始,螞蟻金服面臨了相當大的金融監管壓力:備付金上繳央行且一度不產生任何利息,在2017年消費貸(花唄和借唄)ABS(資產證券化)發行量超過3000億元峰值之後,監管層強調槓桿率,2018年發行規模急轉直下,此外,也存在着餘額寶規模放緩等關鍵問題。

在此背景下,公司面臨加速轉型。從2017年螞蟻金服拆分數據來看,支付連接佔比54%;金融服務佔比11%;技術服務佔比34%。螞蟻金服提出,2021年,技術服務收入將上升至總收入的65%,超過支付收入成為第一大收入項,這也被視為規避支付業務的監管風險之舉。

不再卡脖子 這一國產核心技術終於
螞蟻金服三大業務(來源:中信證券)

廣發證券曾預測,螞蟻金融技術服務是公司未來的”增長極”之一,致力於為機構用戶提升營銷、風控能力,帶來增量收入。技術輸出作為螞蟻金服的主要發展方向,在這其中也經歷了多個階段。

2015年,螞蟻金服集團董事長井賢棟提出”互聯網推進器”計劃;2016年,螞蟻金服強調TechFin定位,宣布對外開放金融科技;2017年螞蟻宣布全面對外開放;2018年9月,螞蟻金融雲升級為螞蟻金融科技,開放加速。

通過開放金融雲服務,為中小銀行搭建業務系統,幫助銀行等傳統金融機構的數字化轉型,成為了螞蟻金服技術輸出的主要內容。

螞蟻金服副總裁劉偉光說過,公司經歷了自身架構調整的過程,通過不斷挖掘市場需求,形成自身的產品。在螞蟻金融科技的開放板塊中,主要包括區塊鏈、金融智能、金融安全、分佈式架構、移動開發以及OceanBase所在的分佈式數據庫板塊等。

據悉,OceanBase獨立後的新公司將在今年內發佈重大版本升級,在原有功能基礎上增加分析型業務處理能力,OceanBase將升級為一款支持HTAP混合負載的企業級分佈式數據庫。OceanBase同時宣布,將在未來三年內服務全球超過萬家企業客戶。

不再卡脖子 這一國產核心技術終於
來源:OCeanBase

孫鑫對創業邦表示,螞蟻金服將OceanBase獨立進行公司化運作,其實對OceanBase本身並沒有太大的改變,改變的是其和螞蟻金服的實體關係。而這種實體關係的改變將帶來”一箭雙鵰”的作用,可謂一部妙棋。

從資本層面看,截至2020年6月,螞蟻金服共發生9次融資事件。其中,Pre-IPO輪的140億美元的融資金額是迄今為止全球最大的單筆私募融資。此次融資後,螞蟻金服的估值達到1500億美元。

關於螞蟻金服到底何時何地上市,這幾年各種消息翻來覆去。作為超級獨角獸,螞蟻金服似乎距離上市也越來越近了。

不再卡脖子 這一國產核心技術終於
螞蟻金服融資歷程(來源:創業邦)

孫鑫認為,OceanBase獨立之後,螞蟻金服會有一個更加明確的定位,可以更加專註的作為一家專業的金融公司去運營,類似銀行這樣一個實體存在,這或將也是作為一個獨角獸上市的路徑。

此外,傳統銀行使用互聯網金融公司的產品還是會存有一些顧慮和畏懼感的。螞蟻金服作為阿里旗下一家科技金融公司,自身擁有技術能力,傳統金融公司在使用OceanBase產品過程中,必然會對數據的安全性、隱私性等問題產生擔憂。

OceanBase獨立後,作為一家面向B端的數據庫產品公司,金融客戶無論是從心態上還是從信任度上都會有較大改變。

南京銀行”鑫雲+”互聯網金融平台是OceanBase最早的對外商業項目。2017年10月,阿里雲、螞蟻金服合作打造的平台上線,南京銀行互金核心系統的交易處理能力、成本控制以及對接效率都得到了極大的提升。

平台上線後,業務快速增長,貸款交易處理能力全面升級,從原來的10萬筆/天提高到100萬筆/天。輕資產模式使得單賬戶管理成本從30-50元降低到4元。較傳統銀行業務系統,維護人員僅約為1/5。

可以說,此次螞蟻金服將OceanBase獨立運作,不管是為上市前做鋪路準備,還是為其大規模商業化打消客戶的安全性擔憂,都是不無裨益的。

馬雲曾說過,

核心技術很難,但也不是高不可攀,

我們錯過了昨天的機會,我們再也不能錯過明天的機會。

真正的大企業不是看市值有多大,

而是擔當有多大,不是看市場份額有多大,

而是看是否掌握了核心和關鍵的技術。

參考資料:

《陽振坤:用10年時間打造一個”頂天立地”的產品》,IT168

《一文讀懂數據庫70年發展史》,常壘資本 馮斯基

《盤點2019:對國產數據庫的一點觀察和總結》,老魚

618特惠活動匯總>>

2020天貓618超級紅包點擊領取
天貓超市6月16日0點開搶
京東618主會場 最高可領618元紅包
京東超市618購物大促
微軟官方商城618促銷 認證翻新Surface 4折起
榮耀智慧屏X1 55英寸 百億補貼 1699元
雀巢咖啡1+2微研磨原味三合一速溶咖啡粉100條*15g券後96.00元
愛奇藝視頻會員限時優惠5折
優酷視頻會員年卡5折購(99元)
騰訊視頻會員年費99元/京東plus聯合年卡128元
芒果TV 13個月 98元(6.16-6.22)