大數(shù)據(jù)“復(fù)活”記
2445
2025-03-31
自2019年5月15日正式發(fā)布以來,華為GaussDB數(shù)據(jù)庫受到了業(yè)界的廣泛關(guān)注,成為了具有硬核技術(shù)色彩的「網(wǎng)紅」之一。
今天,就為大家?guī)矸劢z互動專場,近距離一覽GaussDB數(shù)據(jù)庫的「廬山真面目」。先拋十個熱點問題解渴,更多想了解的,歡迎在評論區(qū)留言哦,小板凳已備好。「有疑就問」,是個好習(xí)慣。
GaussDB的命名有什么含義?
GaussDB是華為數(shù)據(jù)庫產(chǎn)品品牌名,意在致敬數(shù)學(xué)家高斯(Gauss)。GaussDB系列數(shù)據(jù)庫產(chǎn)品包括GaussDB OLTP(交易型)數(shù)據(jù)庫和GaussDB OLAP(分析型)數(shù)據(jù)庫,廣泛應(yīng)用于金融、政府、電信等行業(yè),并已經(jīng)進(jìn)入核心系統(tǒng),滿足客戶對智能時代高并發(fā)事務(wù)實時處理、海量數(shù)據(jù)高效分析的需求。
GaussDB有好多名字,傻傻分不清楚,可否介紹一下?
華為國產(chǎn)數(shù)據(jù)倉庫一直在演進(jìn),產(chǎn)品名稱從15年的FI MPPDB,經(jīng)歷FI Libra->GaussDB? 200->GaussDB A,再到如今線上部署形態(tài)的GaussDB(DWS)(數(shù)據(jù)倉庫服務(wù)的簡寫),服務(wù)形態(tài)從線下純軟到線上服務(wù),不管怎么變,都是為了打造尖刀產(chǎn)品,創(chuàng)造智能未來。
GaussDB系列數(shù)據(jù)庫是自主研發(fā)的嗎?
GaussDB OLTP數(shù)據(jù)庫是華為公司自主研發(fā)的分布式數(shù)據(jù)庫,基于華為公司在2007年開始研發(fā)并在電信計費領(lǐng)域規(guī)模商用的自研內(nèi)存數(shù)據(jù)庫全面改造,支持x86和華為Kunpeng硬件架構(gòu),基于創(chuàng)新性數(shù)據(jù)庫內(nèi)核,提供高并發(fā)事務(wù)實時處理能力、兩地三中心金融級高可用能力和分布式高擴展能力,用于支撐金融、政府、電信等行業(yè)核心關(guān)鍵系統(tǒng)。當(dāng)前支持單機、主備、分布式等主流部署方式。
GaussDB OLAP數(shù)據(jù)庫(現(xiàn)如今的GaussDB for DWS)是一款具備分析及混合負(fù)載能力的分布式數(shù)據(jù)庫,從2011年開始,基于PostgreSQL 9.2.4的基礎(chǔ)上自主研發(fā),支持x86和華為Kunpeng硬件架構(gòu),支持行存儲與列存儲,提供PB(Petabyte)級數(shù)據(jù)分析能力、多模分析能力和實時處理能力,用于數(shù)據(jù)倉庫、數(shù)據(jù)集市、實時分析、實時決策和混合負(fù)載等場景,廣泛應(yīng)用于金融、政府、電信等行業(yè)核心系統(tǒng)。
GaussDB OLAP數(shù)據(jù)庫的發(fā)展歷程是怎樣的?
GaussDB OLAP數(shù)據(jù)庫于2011年開始預(yù)研,之后基于PostgreSQL 9.2.4進(jìn)行全面改造,歷經(jīng)8年持續(xù)不斷研發(fā)投入,已經(jīng)形成了自身的完整內(nèi)核。GaussDB OLAP已經(jīng)演進(jìn)成大規(guī)模并行處理的分布式數(shù)據(jù)庫,支持行列混合存儲以及線程化,能夠支持高達(dá)2048節(jié)點的集群規(guī)模(已經(jīng)通過信通院的512節(jié)點認(rèn)證)。數(shù)據(jù)庫內(nèi)核三大引擎中,優(yōu)化器(含SQL解析和SQL優(yōu)化)、執(zhí)行引擎、存儲引擎,除了SQL解析部分,其他都已重構(gòu)。
GaussDB OLAP通過全新構(gòu)筑分布式執(zhí)行,MPP通信框架,向量化引擎,編譯執(zhí)行引擎從多維度重構(gòu)了執(zhí)行引擎,通過列存及自適應(yīng)壓縮、分布式事務(wù)等,全新重構(gòu)了存儲引擎。由于SQL解析器、JDBC、ODBC等是數(shù)據(jù)庫生態(tài)的重要組成部分,也是GaussDB OLAP構(gòu)筑生態(tài)策略的一部分,因此在這方面做了大量增強。
除了數(shù)據(jù)庫內(nèi)核有了翻天覆地的變化之外,在集群管理、高可用和數(shù)據(jù)庫安全方面,GaussDB OLAP數(shù)據(jù)庫也做了極大的增強,同時申請了多項專利。作為企業(yè)級分布式數(shù)據(jù)庫產(chǎn)品,GaussDB OLAP數(shù)據(jù)庫還提供了包括運維管理、開發(fā)工具、遷移工具、數(shù)據(jù)復(fù)制工具等五大完整工具集。
2014年,華為孵化出Gauss OLAP數(shù)據(jù)庫第一個產(chǎn)品版本(早期也叫做FusionInsight?MPPDB或FusionInsight LibrA)。2015年,華為與工商銀行一起聯(lián)合創(chuàng)新,孵化出了包括TPC多流,邏輯集群等多項創(chuàng)新技術(shù)。雙方從聯(lián)合創(chuàng)新進(jìn)入實踐和應(yīng)用,最終在2019年,順利完成了核心數(shù)倉系統(tǒng)GaussDB OLAP數(shù)據(jù)庫對國際頂尖數(shù)據(jù)庫產(chǎn)品的替換和演進(jìn)。
GaussDB OLAP數(shù)據(jù)庫有哪些特點?
GaussDB OLAP數(shù)據(jù)庫主要面向OLAP場景,支持MPP(大規(guī)模并行處理)分布式部署方式。產(chǎn)品特點包括:
●?高可用:故障時查詢自動重試,同城/異地雙集群容災(zāi)
●?高性能:核心企業(yè)數(shù)據(jù)倉庫場景下,分析性能持平其他業(yè)界主流分析型數(shù)據(jù)庫,基于Kunpeng 920處理器芯片,相對通用同期芯片,TPC-H/TPC-DS性能提升30%,支持GPU異構(gòu)多維硬件加速(10萬路攝像頭千億圖像比對秒級響應(yīng))
●?高擴展:單集群最大支持2048節(jié)點,在線擴容,重分布對業(yè)務(wù)透明
●?數(shù)據(jù)融合:SQL on Anywhere,支持與異構(gòu)/同構(gòu)數(shù)據(jù)源、MRS大數(shù)據(jù)庫互聯(lián)互通
●?計算融合:支持x86/華為Kunpeng CPU、GPU等異構(gòu)計算芯片的智能調(diào)度,實現(xiàn)算力最優(yōu)
●?數(shù)據(jù)安全:數(shù)據(jù)透明加密,支持國密算法SM4,行級細(xì)粒度權(quán)限控制
GaussDB OLAP數(shù)據(jù)庫目前市場使用情況如何?
截止2019年5月,華為GaussDB數(shù)據(jù)庫已經(jīng)應(yīng)用于全球60個國家及地區(qū),服務(wù)于1500多個客戶,擁有500多家商業(yè)合作伙伴,并廣泛應(yīng)用于金融、運營商、政府、能源、醫(yī)療、制造、交通等多個行業(yè)。
近日,在中國信息通信研究院和數(shù)據(jù)中心聯(lián)盟發(fā)起的分布式分析型數(shù)據(jù)庫測試中,華為GaussDB OLAP數(shù)據(jù)庫率先通過512節(jié)點集群規(guī)模能力評測。與此同時,中國工商銀行也完成了采用華為GaussDB OLAP數(shù)據(jù)庫對國外頂級數(shù)據(jù)倉庫產(chǎn)品的完全替代。
目前,華為GaussDB系列數(shù)據(jù)庫產(chǎn)品全球累計發(fā)貨超過30000套。
GaussDB為何要轉(zhuǎn)云上模式?
1)從面臨的現(xiàn)實問題來看:混合云是為了解決原銷售模式交付的一系列問題。參差不齊不齊的硬件(多個品牌不同系列不同規(guī)格)、高達(dá)20+操作系統(tǒng)(含補丁版本)、異構(gòu)組網(wǎng)、多種歷史軟件版本。由于運行時環(huán)境比較復(fù)雜,兼容性驗證不充分,導(dǎo)致系統(tǒng)故障率高,定位周期較長;同時針對差異化運行時環(huán)境,導(dǎo)致安裝部署、升級補丁、擴容等交付和運維效率較低,企業(yè)用戶體驗不佳。
2)從IT產(chǎn)業(yè)趨勢來看,從PC時代->互聯(lián)網(wǎng)時代->移動互聯(lián)網(wǎng)->智能數(shù)據(jù)時代,技術(shù)架構(gòu)不斷變遷,也在從單機->集群->分布式->云化方向演進(jìn),因此公司也在緊跟時代特征進(jìn)行戰(zhàn)略調(diào)整,提出一云兩翼雙引擎戰(zhàn)略,當(dāng)前混合云、大數(shù)據(jù)、數(shù)倉倉庫、數(shù)據(jù)庫的策略調(diào)整是總體戰(zhàn)略調(diào)整的一部分;
3)華為公有云經(jīng)過多年的摸索,其標(biāo)準(zhǔn)化交付和運維已經(jīng)非常成熟,交付、運維、故障處理經(jīng)驗可復(fù)制到客戶機房。
4)基于云架構(gòu),華為提供高達(dá)60+的數(shù)據(jù)庫、大數(shù)據(jù)、AI的云服務(wù),企業(yè)可基于華為云服務(wù)快速構(gòu)建數(shù)據(jù)平臺,簡化運維,實現(xiàn)業(yè)務(wù)快速上線,當(dāng)然客戶也可以選擇不用。
GaussDB上云之后能給客戶帶來哪些好處?
即開即用? ——??省錢、快速
您需要支付的費率很低,而且只需為實際消耗的資源付費。此外,您無需前期投入較多固定成本,可以從低規(guī)格的數(shù)據(jù)倉庫實例起步,以后隨時根據(jù)業(yè)務(wù)情況彈性伸縮所需資源,按需開支。DWS讓您能夠輕松完成從項目概念到生產(chǎn)部署的整個過程。通過使用?DWS?Console,您不需要安裝數(shù)據(jù)倉庫軟件,也不需要部署數(shù)據(jù)倉庫服務(wù)器,就可以在幾分鐘之內(nèi)獲得高性能、高可能的企業(yè)級數(shù)據(jù)倉庫集群。
穩(wěn)定可靠? ——??省事又省心
DWS在高可靠的基礎(chǔ)設(shè)施上運行。DWS是分布式MPP數(shù)據(jù)倉庫,是由多個節(jié)點組成的集群數(shù)據(jù)倉庫,所有的軟件進(jìn)程均有主備保證,數(shù)據(jù)存儲節(jié)點的數(shù)據(jù)均有主備保證,能夠保證在任意單點物理故障的情況下系統(tǒng)依然能夠保證數(shù)據(jù)可靠、一致,同時還能對外提供服務(wù)。DWS還具有可以增強數(shù)據(jù)倉庫可靠性的眾多其他功能,包括備份以及恢復(fù)等。
便捷管理? ——??可視又可控
通過使用?DWS Console,您只需點擊幾下鼠標(biāo),可以輕松完成應(yīng)用程序與數(shù)據(jù)倉庫的連接、數(shù)據(jù)備份、數(shù)據(jù)恢復(fù)、數(shù)據(jù)倉庫資源和性能監(jiān)控等運維管理工作。您可以使用?CES Console?來查看數(shù)據(jù)倉庫實例的關(guān)鍵性能指標(biāo),包括磁盤使用率、CPU使用率、內(nèi)存使用率、IOPS、網(wǎng)絡(luò)輸入吞吐量、網(wǎng)絡(luò)輸出吞吐量、活躍SQL數(shù)、會話數(shù)等。
GaussDB上云之后純軟版本如何支持?
純軟版本可持續(xù)支持至2023年12月31日(需要升級到8.0);在2022年6月30日之前,現(xiàn)網(wǎng)已有的GaussDB A 可以繼續(xù)按原模式進(jìn)行擴容(需要升級到8.0); 2022年6月30日前的商務(wù)和2023年12月31日前的服務(wù)可按意向書保障(需要升級到8.0)。
如果想學(xué)習(xí)GaussDB OLAP數(shù)據(jù)庫產(chǎn)品,有什么渠道?
有多種渠道可以學(xué)習(xí)華為GaussDBOLAP的數(shù)據(jù)庫產(chǎn)品:
●?關(guān)注“華為云AI”公眾號,及時了解GaussDB for DWS產(chǎn)品及技術(shù)動態(tài)
●?訪問華為云官網(wǎng)獲取在線產(chǎn)品資料:https://support.huaweicloud.com/dws/index.html
●?GaussDB開發(fā)者社區(qū)提供開發(fā)工具、互動社區(qū)、開發(fā)指南、安全中心等服務(wù):https://bbs.huaweicloud.com/forum/forum-598-1.html
●?GaussDB培訓(xùn)認(rèn)證:關(guān)注“華為認(rèn)證”公眾號,獲取HCIA & HCIP以及HCIE等GaussDB數(shù)據(jù)庫認(rèn)證培訓(xùn)最新信息
●?GaussDB金種子計劃:目前,華為已與清華大學(xué)大數(shù)據(jù)系統(tǒng)軟件國家工程實驗室、華東師范大學(xué)、武漢大學(xué)、重慶郵電大學(xué)成立GaussDB數(shù)據(jù)庫創(chuàng)新實驗室,共同開展數(shù)據(jù)庫學(xué)術(shù)研究。此外,面向高校學(xué)生,華為發(fā)布的金種子計劃也會陸續(xù)在全國多個高校構(gòu)建基于GaussDB的數(shù)據(jù)庫原理課和實訓(xùn)課。
數(shù)據(jù)倉庫服務(wù) GaussDB(DWS) 數(shù)據(jù)庫
版權(quán)聲明:本文內(nèi)容由網(wǎng)絡(luò)用戶投稿,版權(quán)歸原作者所有,本站不擁有其著作權(quán),亦不承擔(dān)相應(yīng)法律責(zé)任。如果您發(fā)現(xiàn)本站中有涉嫌抄襲或描述失實的內(nèi)容,請聯(lián)系我們jiasou666@gmail.com 處理,核實后本網(wǎng)站將在24小時內(nèi)刪除侵權(quán)內(nèi)容。
版權(quán)聲明:本文內(nèi)容由網(wǎng)絡(luò)用戶投稿,版權(quán)歸原作者所有,本站不擁有其著作權(quán),亦不承擔(dān)相應(yīng)法律責(zé)任。如果您發(fā)現(xiàn)本站中有涉嫌抄襲或描述失實的內(nèi)容,請聯(lián)系我們jiasou666@gmail.com 處理,核實后本網(wǎng)站將在24小時內(nèi)刪除侵權(quán)內(nèi)容。