近日參加2019 DTCC大會(huì),幾日下來,可謂收獲多多。了解技術(shù)趨勢(shì),感知行業(yè)動(dòng)態(tài),不禁想動(dòng)動(dòng)筆,寫點(diǎn)個(gè)人感受。以下內(nèi)容,僅代表個(gè)人觀點(diǎn),如有偏頗,歡迎指正。 關(guān)鍵詞:振興 2018年,國產(chǎn)數(shù)據(jù)庫蓬勃發(fā)展,百花齊放。在本次大會(huì)的廠商站臺(tái),就可見一二。從國產(chǎn)數(shù)據(jù)庫來看,三種不同發(fā)展路徑,都有不錯(cuò)的進(jìn)展。
關(guān)鍵詞:博弈 至于云數(shù)據(jù)庫,近些年來發(fā)展更為迅速。從阿里-李飛飛分享披露的數(shù)字,目前全球云數(shù)據(jù)庫占比為8%多一點(diǎn),其余為傳統(tǒng)數(shù)據(jù)庫份額。據(jù)Gartner預(yù)測(cè),在未來5年,云數(shù)據(jù)庫份額將擴(kuò)大到20~30%的市場(chǎng)。面對(duì)千億美元的市場(chǎng),這數(shù)字無疑是巨大的。因此各大云廠商均不遺余力的推出、完善自己的云數(shù)據(jù)庫產(chǎn)品。以AWS的aurora為起始代表,各大廠商紛紛跟進(jìn)。從這一點(diǎn)來看,國產(chǎn)云廠商(以阿里、騰訊、華為等為代表),在這一領(lǐng)域已均有較大投入,甚至發(fā)展超過國外云廠商。阿里的Polardb、騰訊的CynosDB、華為等,其他包括金山、京東、平安、青云等,均拿出了自己的產(chǎn)品。未來數(shù)年,云廠商巨頭們將在這一領(lǐng)域,競(jìng)爭(zhēng)加劇。其背后原因是,面對(duì)廣大的企業(yè)用戶市場(chǎng),作為底層支撐的數(shù)據(jù)庫至關(guān)重要,各家無疑均需占據(jù)這一技術(shù)制高點(diǎn)。 關(guān)鍵詞:沒落 記得在4~5年前,DTCC大會(huì)還會(huì)設(shè)置Oracle、SQLServer、DB2等專場(chǎng);但近些年來,這些國際大廠已漸漸勢(shì)微。作為傳統(tǒng)商業(yè)數(shù)據(jù)庫的老大,Oracle可以說是保留了最后尊嚴(yán)。本次大會(huì),做了開場(chǎng)演講并設(shè)置了小展臺(tái)。但作為一點(diǎn)不和諧聲音,似乎Oracle近期的裁員風(fēng)波更能引起大家的熱議。不可否定的是,以O(shè)racle 19c為代表最新版本,其技術(shù)底蘊(yùn)仍然無人撼動(dòng),其自治化思想令人驚嘆(如之前我轉(zhuǎn)發(fā)的AI自動(dòng)創(chuàng)建索引)。但其昂貴的價(jià)格、傲慢的態(tài)度、僵化的服務(wù),常常讓人詬病。且隨著國家自助可控的戰(zhàn)略要求及Oracle自身在云戰(zhàn)略的短視,未來在中國市場(chǎng),其必然受到一定的影響。至于其他廠商,似乎除了在個(gè)別傳統(tǒng)領(lǐng)域尚有使用外,幾乎已經(jīng)聽不到任何聲音。 關(guān)鍵詞:成熟 如果說幾年前,分布式還是實(shí)驗(yàn)室里的'玩具',那么近幾年來其已悄然成熟。在眾多領(lǐng)域已經(jīng)開始推廣,甚至在金融等高端領(lǐng)域也有所涉及。其技術(shù)細(xì)節(jié)上,各家實(shí)現(xiàn)上也各有差異。這類不談所謂'真假'分布式的問題,因?yàn)槟壳斑€缺乏統(tǒng)一的認(rèn)識(shí)。去年國家信通院搞的分布式數(shù)據(jù)庫標(biāo)準(zhǔn)的制定,正在試圖從國家層面規(guī)范這一領(lǐng)域的標(biāo)準(zhǔn)。從應(yīng)用角度來看,分布式數(shù)據(jù)庫無疑是一個(gè)'銀彈',其針對(duì)三個(gè)核心問題:性能、容量、高可用均有不錯(cuò)的解決。對(duì)于過度依賴傳統(tǒng)大型商業(yè)數(shù)據(jù)庫的企業(yè)來講,無疑是一個(gè)新的選擇。但我們也要清醒地看到,現(xiàn)有分布式數(shù)據(jù)庫還無法與傳統(tǒng)單機(jī)數(shù)據(jù)庫,達(dá)到同樣的使用感受。在應(yīng)用架構(gòu)、結(jié)構(gòu)設(shè)計(jì)等諸多領(lǐng)域,還需要多多關(guān)注。 關(guān)鍵詞:未來 云數(shù)據(jù)庫的概念,已然存在多年;但近年來云原生數(shù)據(jù)庫隨著AWS的aurora的出現(xiàn),其已成為云數(shù)據(jù)庫的必然發(fā)展階段??梢哉f云原生數(shù)據(jù)庫是云數(shù)據(jù)庫的'2.0'版本。至于什么是云原生,可以參考CNCF的12條準(zhǔn)則,其技術(shù)表現(xiàn)上以“存儲(chǔ)與計(jì)算分離”等特征為代表。其核心可概括為計(jì)算能力彈性擴(kuò)展、存儲(chǔ)能力按需分配。實(shí)現(xiàn)上其往往表現(xiàn)為強(qiáng)大的存儲(chǔ)層、精簡(jiǎn)的引擎層及新興硬件架構(gòu)的引入。云原生思想的誕生,已然顛覆了傳統(tǒng)數(shù)據(jù)庫的開發(fā)思想,在學(xué)術(shù)上這部分仍然在快速發(fā)展階段。從廠商表現(xiàn)上,各大巨頭紛紛發(fā)力,阿里、騰訊、華為等均發(fā)布了產(chǎn)品,甚至初創(chuàng)企業(yè)-極數(shù)云舟也依靠多年積累推出了自己的云原生數(shù)據(jù)庫。從使用者角度來看,云原生無疑頗具吸引力,想想秒級(jí)備份、分鐘級(jí)擴(kuò)展實(shí)例,DBA們夢(mèng)里都會(huì)笑醒吧:)。當(dāng)然我們也要看到云原生數(shù)據(jù)庫與傳統(tǒng)數(shù)據(jù)庫,其設(shè)計(jì)理念差異較大,對(duì)于DBA們是需要做一定的技術(shù)貯備轉(zhuǎn)型。 關(guān)鍵詞:軟硬一體 隨著云原生概念的興起及近些年存儲(chǔ)技術(shù)的變革,RDMA、NVMe、3D XPoint、GPU、FPGA等硬件技術(shù)與數(shù)據(jù)庫相結(jié)合,為數(shù)據(jù)庫的發(fā)展帶來的技術(shù)上的變革。在相當(dāng)長一段時(shí)間內(nèi),軟件技術(shù)發(fā)展是領(lǐng)先于硬件架構(gòu)設(shè)計(jì)的。但近些年來,隨著上述這些硬件的出現(xiàn),軟件技術(shù)似乎落后于硬件的發(fā)展。如何與這些新興硬件結(jié)合?如何適應(yīng)更為強(qiáng)大的計(jì)算、存儲(chǔ)、傳輸能力?在軟件架構(gòu)思想上,目前還處于探索期,相信在不久的將來,將有更加顛覆性的軟件產(chǎn)品誕生。在這其中,數(shù)據(jù)庫作為重資源的基礎(chǔ)軟件,受硬件發(fā)展影響更大,在這方面尤甚。 此外,本地大會(huì)還有新的風(fēng)向,那就是軟硬一體的代表-一體機(jī)方案,有漸熱的跡象。作為一體機(jī)的始祖-Oracle Exadata,其昂貴的價(jià)格一直在國內(nèi)受到某些質(zhì)疑。近些年,國內(nèi)的一體機(jī)產(chǎn)品(如浪潮、華勝等)也不斷涌現(xiàn),甚至聽聞某云大廠的私有化部署也是以一體機(jī)方式交付的。不可否認(rèn),一體機(jī)模式將軟硬一體發(fā)揮到了極致,其快速交付、簡(jiǎn)潔運(yùn)維、性能極致頗具吸引力。這種趨勢(shì),未來值得關(guān)注。 關(guān)鍵詞:多態(tài) 關(guān)系模型,從70年代誕生到現(xiàn)在火了40多年。在描述數(shù)據(jù)方面,關(guān)系模型無疑是不錯(cuò)的一種選擇。但近些年來,隨著場(chǎng)景的不斷多元化,非關(guān)系類數(shù)據(jù)越來越多,如何處理這樣數(shù)據(jù),成為各家必須面臨的問題。于是,我們看到兩種處理方法:
關(guān)鍵詞:混合 作為數(shù)據(jù)處理,TP類和AP類需求之前是嚴(yán)格區(qū)分的。舊的做法是通過ETL方式,抽取數(shù)據(jù)到大數(shù)據(jù)平臺(tái)進(jìn)行處理。這種方式的弊端在于數(shù)據(jù)延時(shí)。即使輔助以流式處理等手段,其時(shí)效性仍無法滿足某些場(chǎng)景。面對(duì)這種情況,混合處理(HTAP)應(yīng)允而生,其特點(diǎn)是數(shù)據(jù)存儲(chǔ)一份(可能為多態(tài)),通過不同的計(jì)算引擎,分別進(jìn)行處理。一些大廠和新興數(shù)據(jù)庫廠商均做此方面的努力。但從目前來看,尚達(dá)不到成熟使用狀態(tài),例如資源隔離等技術(shù)難點(diǎn)還需攻克。 關(guān)鍵詞:融合 數(shù)據(jù),作為企業(yè)的核心資產(chǎn),在未來將愈發(fā)重要。如何將企業(yè)內(nèi)數(shù)據(jù)融合、集中、發(fā)揮出數(shù)據(jù)更大的價(jià)值,成為企業(yè)面臨的共性問題。隨著前些年阿里的“中臺(tái)”戰(zhàn)略的提出,為解決這一問題提出一種新的解決模式,各大公司紛紛仿效。從本次大會(huì)上看,從前端的數(shù)據(jù)匯聚、到中端的數(shù)據(jù)處理、再到后端分析乃至整體的數(shù)據(jù)治理,多個(gè)方向均有相關(guān)主題。特別是數(shù)據(jù)治理專場(chǎng),人員爆滿,可見對(duì)此話題的關(guān)注。 關(guān)鍵詞:云化 從今年主題來看,純自動(dòng)化平臺(tái)類分享已經(jīng)較少,云化主題較多。一方面,隨著前些年的建設(shè),很多公司運(yùn)維平臺(tái)已初具規(guī)模,分享意義不大;另一方面,不少公司已考慮建設(shè)私有云或上公有云,建設(shè)重點(diǎn)發(fā)生變化。云化的主題,相較過去有所增加。特別是AI與平臺(tái)建設(shè)結(jié)合方向,受人矚目。 關(guān)鍵詞:藍(lán)海 有人說,2019年是'ToB'發(fā)展的元年。相較于ToC市場(chǎng),ToB還可算是一片藍(lán)海,但此領(lǐng)域競(jìng)爭(zhēng)已然加劇。在此市場(chǎng)中的兩類玩家(云廠商、傳統(tǒng)服務(wù)商)又有所不同。一方面,云廠商加大投入,搶占先機(jī)。它們擁有技術(shù)優(yōu)勢(shì),但缺乏企業(yè)服務(wù)經(jīng)驗(yàn);其通過人員招募或收購線下企業(yè),快速布局。另一方面,傳統(tǒng)服務(wù)類企業(yè)紛紛轉(zhuǎn)型,擴(kuò)大服務(wù)領(lǐng)域范圍。它們擁有成熟的服務(wù)經(jīng)驗(yàn),但缺乏足夠的技術(shù)底蘊(yùn)。它們的策略是通過合縱連橫,與新興企業(yè)合作,補(bǔ)齊短板。于是我們可以看到,某大廠收購數(shù)據(jù)服務(wù)公司;某服務(wù)商與初創(chuàng)公司合作等新聞,正是基于上述考慮。國內(nèi)的ToB市場(chǎng)發(fā)展,還處于初始階段,類似國外千億級(jí)別的巨頭公司尚未出現(xiàn)。未來數(shù)年,非??春谜麄€(gè)市場(chǎng)的發(fā)育,機(jī)會(huì)多多。 關(guān)鍵詞:多元化 從本次大會(huì)來看,傳統(tǒng)DBA的市場(chǎng)未來將受到較大沖擊。一方面,云化、平臺(tái)化建設(shè),將運(yùn)維工作大大減少;另一方面,企業(yè)對(duì)于數(shù)據(jù)應(yīng)用的需求,也從基礎(chǔ)的'可用'逐步過渡到'用好'、'提效'、'增值'階段。傳統(tǒng)運(yùn)維類DBA,需要擴(kuò)寬自己未來發(fā)展方向,如何適合快速變化的外部環(huán)境。這一話題,可參考我之前的文章'DBA發(fā)展的十三大方向'。 |
|