數據倉庫服務 GaussDB(DWS)——快速創建DWS集群并導入數據(一)——創建集群

      網友投稿 997 2025-04-03

      華為云數據倉庫服務(Data Warehouse Service,簡稱DWS)是一種即開即用、安全可靠的在線數據倉庫服務,為用戶提供海量數據的存儲、挖掘和分析能力。


      數據倉庫服務提供專業高效的服務管理控制平臺,讓用戶自助完成數據倉庫的管理與維護,系統可用性高。用戶可以快速創建數據倉庫服務集群并開展業務。

      本指南提供創建集群、連接集群并從OBS導入樣例數據的操作指導,指導您快速上手數據倉庫服務。

      創建集群

      步驟

      ① 登錄DWS控制臺。

      如果您還沒有公有云帳戶,請單擊“免費注冊”先注冊一個賬戶,并完成實名認證,然后再登錄。

      ②?單擊“購買數據倉庫集群”。

      如果用戶需要在華為云環境中使用GaussDB(DWS) ,首先要創建一個數據倉庫集群。創建數據倉庫集群時默認采用按需付費方式,即節點按實際使用時長計費,計費周期為一小時。這種購買方式比較靈活,可以即開即停,按實際使用時長計費。您可根據業務需要,定制相應計算能力和存儲空間的GaussDB(DWS) 集群。您也可以購買折扣套餐,這種購買方式是按月/按年預付費,相比按需付費方式更優惠,具體操作請參見購買折扣套餐。

      本章節為您介紹如何在GaussDB(DWS) 管理控制臺創建一個數據倉庫集群。

      評估集群節點規格

      您可以根據數據量、業務負載以及性能需求,選擇能夠支撐業務應用的節點數量,數量越多,存儲與計算能力越強。GaussDB(DWS) 集群中,每個節點上的DataNode實例數根據集群規格不同而不同,一般為1~4個。DataNode實例負責存儲業務數據(支持行存、列存、混合存儲)、執行數據查詢任務以及返回執行結果的模塊。

      剛開始使用GaussDB(DWS) 服務時,您也可以先創建一個規格較小的集群,今后隨著數據量和業務負載的變化,再自由調整集群規模和節點規格,自由擴展而不中斷業務。

      設計網絡訪問拓撲

      根據業務應用需要,規劃合適的可用區并準備網絡配置,使數據倉庫集群與用戶的其他公有云業務隔離。

      請確定用戶可使用的節點數滿足如下條件,否則系統會提示無法創建集群。

      用戶可使用的節點數大于或者等于3,因為創建集群至少需要3個節點。用戶可使用的節點數可在“集群管理”頁面查看。

      計劃創建的集群的節點數小于或等于用戶可使用的節點數。

      1.登錄GaussDB(DWS) 管理控制臺。

      2.單擊左側導航欄的“集群管理”。

      3.在“集群管理”頁面,單擊“創建數據倉庫集群”。

      4.選擇“區域”。

      表1?區域參數說明

      參數名

      參數解釋

      樣例值

      區域

      選擇集群節點實際工作區域。

      有關區域的詳細信息,請參見地區和終端節點。

      華北-北京四

      可用區

      選擇集群工作區域下關聯的可用區。

      關于區域和可用區的描述,請參見區域和可用區。

      通用可用區

      5.選擇“產品類型”、“CPU架構”和“節點規格”。

      參數名

      參數解釋

      樣例值

      產品類型

      產品類型有:

      ·?云數倉:針對使用EVS盤的規格,支持用戶在可選范圍內自定義集群使用的存儲類型與存儲容量;話單計費上,第二代EVS盤規格采用存儲資源獨立計費的方式。

      ·?標準數倉:OLAP,支持10PB級超大規模數據在線查詢、離線分析能力,可擴展至1024節點。不支持用戶自定義存儲類型與存儲容量。

      ·?實時數倉:提供時序計算和時序壓縮服務。

      說明:

      ·

      ·?對于BMS、本地盤非EVS存儲的規格,創建集群時不支持用戶自定義存儲類型和存儲容量,與當前版本能力一致,只支持用戶選擇規格類型。

      ·?實時數倉當前處于公測階段,歡迎試用。

      云數倉

      CPU架構

      CPU架構有:

      ·?X86

      ·?鯤鵬

      說明:

      X86和鯤鵬只是底層架構不一致,應用層不感知,sql語法一致,如果創建集群時提示X86售罄,可以選擇鯤鵬架構。

      X86

      節點規格

      請根據業務需求合理選擇節點規格。在節點規格列表中展示了每一種節點規格單個節點的vCPU、內存和建議使用場景。

      GaussDB(DWS) 支持的節點規格及其價格詳情,請參見GaussDB(DWS)價格詳情。

      dws2.m6.4xlarge.8

      存儲類型 (云數倉參數)

      存儲類型有:

      ·?超高I/O

      超高I/O

      每節點可用存儲(云數倉參數)

      每節點可用存儲容量。

      說明:

      您申請的存儲空間會有必要的文件系統開銷,這些開銷包括索引節點,以及數據庫運行必須的空間。存儲空間的數值必須為100的整倍數。

      -

      節點數量

      選擇集群中的節點個數。

      支持的節點數范圍為3~32。

      3

      總容量(GB)

      顯示集群的總容量。

      各個規格對應的存儲容量均為數據庫存儲數據的實際空間,所展示存儲容量已扣除副本、RAID所消耗的磁盤空間。

      -

      折扣套餐節點數量

      顯示當前區域內所選節點規格的折扣套餐節點數量。

      ·?如果當前未購買過折扣套餐,也可以單擊“購買折扣套餐”進行購買,請參考購買折扣套餐。

      ·?如果已購買折扣套餐,折扣套餐的節點數量范圍內的節點在訂單有效期內將不再另外收費(因為您前期購買折扣套餐時已經支付過費用),若所選的集群節點數量超過折扣套餐的節點數量,超過的部分按需計費。

      例如:當前選擇“節點數量”為3,若“折扣套餐節點數量”為2,那么2個節點在套餐訂單有效期內不再另外收費,1個節點按需計費。

      ·

      -

      表3?規格說明

      節點規格

      vCPU核數

      內存大小(GB)

      架構

      規格類型

      dws2.olap.4xlarge.m6

      16

      128

      X86

      ECS/存算分離EVS

      dws2.olap.8xlarge.m6

      32

      256

      X86

      ECS/存算分離EVS

      dws2.olap.16xlarge.m6

      64

      512

      X86

      ECS/存算分離EVS

      dws2.olap.4xlarge.kc1

      16

      64

      ARM

      ECS/存算分離EVS

      dws2.olap.4xlarge.km1

      16

      128

      ARM

      ECS/存算分離EVS

      dws2.olap.6xlarge.km1

      24

      192

      ARM

      ECS/存算分離EVS

      dws2.olap.8xlarge.km1

      32

      256

      ARM

      ECS/存算分離EVS

      dws2.olap.12xlarge.km1

      48

      384

      ARM

      ECS/存算分離EVS

      dws2.m6.4xlarge.8

      16

      128

      X86

      ECS/EVS

      dws2.m6.8xlarge.8

      32

      256

      X86

      ECS/EVS

      dws2.m6.16xlarge.8

      64

      512

      X86

      ECS/EVS

      dws2.km1.4xlarge.8

      16

      128

      ARM

      ECS/EVS

      dws2.km1.6xlarge.8

      24

      192

      ARM

      ECS/EVS

      dws2.km1.8xlarge.8

      32

      256

      ARM

      ECS/EVS

      dws2.km1.12xlarge.8

      48

      384

      ARM

      ECS/EVS

      dws2.km1.xlarge

      4

      32

      ARM

      ECS/EVS

      dws2.kc1.4xlarge

      16

      64

      ARM

      ECS/EVS

      dws2.olap.4xlarge.i3

      16

      128

      X86

      ECS/本地直通

      dws2.olap.8xlarge.i3

      32

      256

      X86

      ECS/本地直通

      dws2.olap.16xlarge.i3

      64

      512

      X86

      ECS/本地直通

      dws2.olap.4xlarge.ki1

      16

      64

      ARM

      ECS/本地直通

      dws2.olap.8xlarge.ki1

      32

      128

      ARM

      ECS/本地直通

      dws2.olap.16xlarge.ki1

      64

      228

      ARM

      ECS/本地直通

      dws2.physical.ki1ne.4xlarge

      128

      512

      ARM

      BMS

      dws2.physical.ki1ne.4xlarge.a

      128

      512

      ARM

      BMS

      dws2.physical.c6sd.6xlarge

      104

      768

      X86

      BMS

      dws2.physical.c6sd.6xlarge.7

      104

      768

      X86

      BMS

      dws2.physical.c6sd.6xlarge.7.cbg

      104

      768

      X86

      BMS

      dws2.physical.c6sd.6xlarge.a.7

      104

      768

      X86

      BMS

      dws2.physical.io6.3xlarge.4a

      104

      384

      X86

      BMS

      dws2.physical.c6d.6xlarge.3a.cbg

      88

      768

      X86

      BMS

      dws2.physical.c6sd.6xlarge.a.7.cbg

      104

      768

      X86

      BMS

      dws2.physical.c6sd.6xlarge.1.cbg

      104

      768

      X86

      BMS

      表4?規格說明(僅在專屬云DEC場景下支持)

      節點規格

      vCPU核數

      內存大小(GB)

      架構

      規格類型

      dwsx2.2xlarge.dec

      8

      64

      X86

      ECS/存算分離EVS

      dwsx2.8xlarge.dec

      32

      256

      X86

      ECS/存算分離EVS

      dwsx2.16xlarge.dec

      64

      512

      X86

      ECS/存算分離EVS

      dwsk2.2xlarge.dec

      8

      64

      ARM

      ECS/存算分離EVS

      dwsk2.8xlarge.dec

      32

      256

      ARM

      ECS/存算分離EVS

      dwsk2.12xlarge.dec

      48

      384

      ARM

      ECS/存算分離EVS

      dws2.olap.4xlarge.i3.dec

      16

      128

      X86

      ECS/本地直通

      dws2.olap.8xlarge.i3.dec

      32

      256

      X86

      ECS/本地直通

      dws2.olap.16xlarge.i3.dec

      64

      512

      X86

      ECS/本地直通

      dws2.olap.4xlarge.ki1.dec

      16

      64

      ARM

      ECS/本地直通

      dws2.olap.8xlarge.ki1.dec

      32

      128

      ARM

      ECS/本地直通

      dws2.olap.16xlarge.ki1.dec

      64

      228

      ARM

      ECS/本地直通

      6.填寫“集群配置”參數。

      表5?集群配置參數說明

      參數名

      參數解釋

      樣例值

      集群名稱

      設置數據倉庫集群的名稱。

      集群名稱長度為4到64個字符,必須以字母開頭,可以包含字母、數字、中劃線或者下劃線,不能包含其他的特殊字符。字母不區分大小寫。

      dws-demo

      集群版本

      顯示集群中安裝的數據庫實例版本。圖片僅供參考,請以實際顯示版本號為準。

      8.1.1.200

      默認數據庫

      顯示集群的默認數據庫名稱“gaussdb”。

      說明:

      “gaussdb”為默認數據庫名稱,暫不支持修改。

      gaussdb

      管理員用戶

      設置數據庫的管理員用戶名稱。

      用戶命名要求如下:

      ·?只能由小寫字母、數字或下劃線組成。

      ·?必須以小寫字母或下劃線開頭。

      ·?長度為6~64個字符。

      ·?用戶名不能為GaussDB(DWS) 數據庫的關鍵字。GaussDB(DWS) 數據庫的關鍵字,具體請參見《SQL語法參考》中關鍵字章節。

      dbadmin

      管理員密碼

      設置數據庫管理員用戶的密碼。

      密碼復雜度要求如下:

      ·?密碼長度為8~32個字符。

      ·?不能與用戶名或倒序的用戶名相同。

      ·?密碼至少包含大寫字母、小寫字母、數字和特殊字符四類中的三類,其中可輸入的特殊字符為:(~!`?,.:;-_'"(){}[]/<>@#%^&*+|\=)。

      ·?弱口令檢查。

      說明:

      請妥善保管并定期更新密碼,避免安全風險。

      -

      確認密碼

      重復輸入一次數據庫管理員用戶的密碼。

      -

      數據庫端口

      設置客戶端或應用程序連接集群數據庫時使用的端口。

      支持的端口范圍為8000~30000。

      8000

      圖2?集群參數

      7.配置“網絡”。

      圖3?網絡參數

      表6?網絡參數說明

      參數名

      參數解釋

      樣例值

      虛擬私有云

      指定集群節點使用的虛擬專用網絡,實現不同業務的網絡隔離。

      首次創建數據倉庫集群時,如果未配置過虛擬私有云,可以單擊“查看虛擬私有云”進入虛擬私有云管理控制臺,新創建一個滿足需求的虛擬私有云。

      如何創建虛擬私有云,具體請參見《虛擬私有云用戶指南》中的創建虛擬私有云和子網章節。

      在下拉框中選擇一個虛擬私有云后,單擊“查看虛擬私有云”可以進入虛擬私有云管理控制臺查看虛擬私有云的詳細信息。

      單擊可以刷新“虛擬私有云”下拉框中選項值。

      vpc-dws

      子網

      指定虛擬私有云的一個子網。

      集群使用子網實現與其他網絡的隔離,并獨享所有網絡資源,以提高網絡安全。

      subnet-dws

      安全組

      指定虛擬私有云的安全組。

      安全組限制安全訪問規則,加強集群與其它服務間的安全訪問。

      ·?自動創建安全組

      系統默認選中“自動創建安全組”,設置為該選項時,系統將會自動創建一個默認安全組。

      ·

      默認安全組的規則如下:出方向允許所有訪問,入方向只開放用戶設置的GaussDB(DWS) 集群的數據庫端口。

      ·

      默認安全組的名稱,其格式如下:dws-<集群名稱>-,例如,dws-dws-demo-8000。

      ·

      說明:

      ·

      如果安全組和安全組規則的配額不足,提交創建集群申請后系統會報錯,用戶可以選擇已有的安全組后重試。

      ·

      ·?手動創建并配置安全組

      用戶也可以登錄VPC管理控制臺手動創建一個安全組,然后回到GaussDB(DWS) 創建集群頁面,單擊“安全組”下拉列表旁邊的按鈕,刷新后在“安全組”下拉列表中選擇新建的安全組。

      ·

      為了使GaussDB(DWS) 客戶端可以連接集群,用戶需要在新建的安全組中添加一條入規則,開放GaussDB(DWS) 集群的數據庫端口的訪問權限。入規則示例如下,詳情請參見添加入方向規則:

      ·

      ·?協議:TCP。

      ·?端口范圍:8000。指定為創建GaussDB(DWS) 集群時設置的數據庫端口,這個端口是GaussDB(DWS) 用于接收客戶端連接的端口。

      數據倉庫服務 GaussDB(DWS)——快速創建DWS集群并導入數據(一)——創建集群

      ·?源地址:選中“IP地址”,然后指定為客戶端主機的IP地址,例如“192.168.0.10/32”。

      自動創建安全組

      公網訪問

      指定用戶是否可以在互聯網上使用客戶端連接集群數據庫。支持如下方式:

      ·?“暫不使用”:暫不使用彈性IP。如DWS使用于生產環境,則需綁定ELB,則不選擇使用彈性IP,通過綁定ELB后,再從ELB頁面進行彈性IP綁定。

      ·?“現在購買”:用戶指定彈性IP的帶寬,系統將自動為集群分配獨享帶寬的彈性IP,通過彈性IP可以從互聯網對集群進行訪問。自動分配的彈性IP的帶寬名稱都是以集群名稱開頭的。

      ·?“使用已有”:為集群綁定指定的彈性IP。如果下拉框中沒有可用的彈性IP,可以單擊“創建彈性IP”進入彈性公網IP頁面創建一個滿足需要的彈性IP。帶寬可根據用戶需要設置。

      說明:

      ·?使用BMS發放的集群暫不支持使用指定彈性IP,僅ECS發放的集群支持。

      ·?使用BMS發放的集群,不支持創建成功后再綁定彈性IP,也不支持進行解綁定彈性IP操作,建議有公網訪問需求的用戶在創建集群時選擇“現在購買”。ECS發放的集群不受此影響。

      ·?每個區域的每個項目首次使用彈性IP綁定功能時,系統將提示創建名稱為“DWSAccessVPC”委托以授權GaussDB(DWS) 訪問VPC。授權成功后,GaussDB(DWS) 可以在綁定彈性IP的虛擬機故障時切換至健康虛擬機。

      ·?默認情況下,只有華為云帳號或擁有Security Administrator權限的用戶才具備創建委托的權限。帳號中的IAM用戶,默認沒有創建委托的權限,需聯系有權限的用戶在當前頁面完成對GaussDB(DWS) 的委托授權。

      ·?公網訪問選擇“暫不使用”,即不啟用公網訪問集群。在集群創建成功后,如果用戶想通過公網訪問集群,可以先為集群綁定彈性IP再創建公網域名,詳情請參見創建公網域名。

      ·?如果是生產環境,集群創建完后需要綁定彈性負載均衡(ELB),再通過ELB綁定彈性公網IP,此處選擇“暫不使用”。

      現在購買

      帶寬

      當“公網訪問”選擇“現在購買”時,需指定彈性IP的帶寬,設置范圍:1~100Mbit/s。

      50Mbit/s

      配置集群所屬的企業項目。已開通企業項目管理服務的用戶才可以配置該參數。默認值為default。企業項目是一種云資源管理方式,企業項目管理服務提供統一的云資源按項目管理,以及項目內的資源管理、成員管理。

      您可以選擇默認的企業項目“default”或其他已有的企業項目。如果要創建新的企業項目,請登錄企業管理控制臺進行創建,詳細操作請參考《企業管理用戶指南》。

      設置高級配置。選擇“自定義”時,您可以設置以下高級配置參數,若選擇“默認配置”,以下參數將使用它們的默認值。

      圖4?自定義高級配置

      自動快照

      表示開啟自動快照策略,默認為開啟。開啟后,系統會按照設定的時間和周期自動創建快照。開啟時請設置以下快照策略參數。如圖4所示的值即為快照參數的默認值。

      表7?快照策略參數說明

      參數名

      參數解釋

      保留天數

      設置自動創建的快照的保留天數,可設置范圍為1~31天。

      說明:

      用戶不能手動刪除自動創建的快照,自動快照保留天數超期后,系統會自動刪除。

      快照執行周期

      設置創建自動快照的周期。可以設置每周哪幾天創建自動快照,以及創建自動快照的頻率,支持每天創建一次或者每天間隔幾個小時創建一次自動快照。

      CN部署量

      CN即協調節點(Coordinator),負責接收來自應用的訪問請求,并向客戶端返回執行結果,此外,協調節點還負責分解任務,并調度任務分片在各DN上并行執行。

      取值范圍為2~集群節點數,最大值為20,默認值為3。在大規模集群下,建議部署多個CN。

      參數模板

      參數模板是一組適用于數據倉庫的參數集合。在“參數模板”下拉列表中選擇一個參數模板與集群相關聯。可以選擇默認的參數模板或者自定義創建的參數模板。默認情況下,集群關聯系統默認的數據庫參數模板。

      有關參數模板的更多信息,請參見管理參數模板。

      標簽

      標簽(Tag)用于標識集群的鍵值對。“鍵”和“值”請參見表8。默認未給集群添加標簽。

      有關標簽的更多信息,請參見標簽簡介。

      表8?標簽配置參數

      參數

      參數說明

      樣例值

      您可以選擇:

      ·?在輸入框的下拉列表中選擇預定義標簽鍵或集群已有的資源標簽鍵。

      說明:

      ·

      如果添加預定義標簽,用戶需要預先在標簽管理服務中創建好預定義標簽,然后在“鍵”的下拉框中進行選擇。用戶可以通過單擊“查看預定義標簽”進入標簽管理服務的“預定義標簽”頁面,然后單擊“創建標簽”來創建新的預定義標簽。更多信息請參見《標簽管理服務用戶指南》中的創建預定義標簽。

      ·

      ·?在輸入框中輸入標簽鍵名稱。輸入標簽鍵的最大長度為36個字符,不能為空字符串。

      只能包含數字、英文字母、下劃線、中劃線和中文。

      ·

      說明:

      ·

      同一集群中的鍵名不能重復。

      ·

      key01

      您可以選擇:

      ·?在輸入框的下拉列表中選擇預定義標簽值或集群的資源標簽值。

      ·?在輸入框中輸入標簽值。輸入標簽值的最大長度為43個字符,不能為空字符串。

      只能包含數字、英文字母、下劃線、點、中劃線和中文。

      ·

      ·

      value01

      加密數據庫

      表示不啟用數據庫加密功能,默認為不啟用。

      表示開啟數據庫加密功能。開啟后,GaussDB(DWS) 將使用KMS(密鑰管理服務)為集群及其快照的數據啟用加密功能。

      每個區域的每個項目首次啟用數據庫加密時,系統會彈出一個“創建委托”的對話框,單擊“是”創建名為“DWSAccessKMS”的委托以授權GaussDB(DWS) 訪問KMS,若單擊“否”將不會啟用加密功能。然后在“密鑰名稱”的下拉列表中選擇已創建的KMS密鑰。如果沒有KMS密鑰,可以登錄KMS服務進行創建,詳細操作請參見《數據加密服務用戶指南》。

      默認情況下,只有華為云帳號或擁有Security Administrator權限的用戶才具備創建委托的權限。帳號中的IAM用戶,默認沒有創建委托的權限,需聯系有權限的用戶在當前頁面完成對GaussDB(DWS) 的委托授權。

      圖5?加密數據庫

      須知:

      數據庫加密功能一旦開啟就無法關閉。

      開啟數據庫加密功能后,用于加密GaussDB(DWS) 數據庫的KMS密鑰在使用過程中不能被禁用、刪除或凍結,否則會導致GaussDB(DWS) 集群異常或數據庫不可用。

      數據倉庫服務 GaussDB(DWS) 虛擬私有云 VPC

      版權聲明:本文內容由網絡用戶投稿,版權歸原作者所有,本站不擁有其著作權,亦不承擔相應法律責任。如果您發現本站中有涉嫌抄襲或描述失實的內容,請聯系我們jiasou666@gmail.com 處理,核實后本網站將在24小時內刪除侵權內容。

      版權聲明:本文內容由網絡用戶投稿,版權歸原作者所有,本站不擁有其著作權,亦不承擔相應法律責任。如果您發現本站中有涉嫌抄襲或描述失實的內容,請聯系我們jiasou666@gmail.com 處理,核實后本網站將在24小時內刪除侵權內容。

      上一篇:如何水印呢(水印該怎么弄)
      下一篇:如何新建wps表格
      相關文章
      在线观看亚洲一区二区| 亚洲AV无码乱码国产麻豆| 亚洲色av性色在线观无码| 亚洲人JIZZ日本人| 亚洲成片观看四虎永久| 亚洲精品视频在线看| 亚洲视频人成在线播放| 国产亚洲情侣一区二区无码AV| 中文字幕亚洲第一| 亚洲日韩欧洲无码av夜夜摸| 国产亚洲精品资源在线26u| 国产亚洲美女精品久久久2020| 国产亚洲精品成人AA片新蒲金| 久久久久亚洲av成人无码电影 | 亚洲国产精品一区二区九九| 亚洲av高清在线观看一区二区| 一区国严二区亚洲三区| 亚洲欧洲精品成人久久曰影片 | 日韩精品一区二区亚洲AV观看| 亚洲国产一区二区a毛片| 97久久精品亚洲中文字幕无码| 亚洲精品视频观看| 亚洲1234区乱码| 亚洲va中文字幕| 亚洲精品国产福利一二区| 91麻豆国产自产在线观看亚洲| 亚洲人成色7777在线观看| 久久精品国产精品亚洲艾| 久久av无码专区亚洲av桃花岛| 亚洲六月丁香六月婷婷色伊人| 亚洲熟妇无码AV不卡在线播放 | 亚洲VA成无码人在线观看天堂| 亚洲成人精品久久| 亚洲国产精品久久久久秋霞影院| 亚洲人色大成年网站在线观看| 亚洲一卡2卡3卡4卡乱码 在线 | 亚洲电影一区二区| 亚洲成a人片毛片在线| 亚洲熟妇无码AV不卡在线播放| 大胆亚洲人体视频| 亚洲色图综合在线|