亞寵展、全球寵物產業風向標——亞洲寵物展覽會深度解析
933
2025-04-02
傳統的Hadoop和Spark大數據生態,是以本地硬盤或云硬盤承載HDFS文件系統,存放計算源數據、中間計算結果或最終計算結果。但是本地硬盤的成本高,擴容困難,而云硬盤的成本較高,擴容較方便。
華為云對象存儲服務可以提供穩定、安全、高效、易用的云存儲服務,具有高性能、低成本的優勢,無擴容問題。同時可以與Hadoop和Spark大數據生態進行對接,為用戶提供計算存儲分離的大數據解決方案。
Cloudera是Hadoop生態系統中,規模最大、知名度最高的公司。為支持大數據平臺CDH使用華為云對象存儲OBS進行數據存儲和讀寫,華為云OBS推出大數據組件OBSFileSystem與CDH進行對接。
本操作指導書旨在幫助華為云用戶在CDH平臺上快速對接OBSFileSystem組件,更好的使用華為云對象存儲OBS。
硬件:1master+3core(配置:8U32G,操作系統:Centos7.5)
軟件:CDH 6.0.1
CDH平臺已安裝完成,本文主要介紹CDH平臺通過OBSFileSystem組件與OBS進行對接的操作步驟。對接OBS后,用戶的數據即可存儲在OBS平臺,通過CDH進行大數據計算,實現計算存儲分離。
詳見附件
附件: 大數據平臺Cloudera CDH對接OBS操作指南.rar 2.79M 下載次數:56次
OBS 大數據
版權聲明:本文內容由網絡用戶投稿,版權歸原作者所有,本站不擁有其著作權,亦不承擔相應法律責任。如果您發現本站中有涉嫌抄襲或描述失實的內容,請聯系我們jiasou666@gmail.com 處理,核實后本網站將在24小時內刪除侵權內容。
版權聲明:本文內容由網絡用戶投稿,版權歸原作者所有,本站不擁有其著作權,亦不承擔相應法律責任。如果您發現本站中有涉嫌抄襲或描述失實的內容,請聯系我們jiasou666@gmail.com 處理,核實后本網站將在24小時內刪除侵權內容。