大數據“復活”記
1058
2025-04-02
目錄
1、?? 什么是SAP HANA. 2
2、?? 什么是彈性文件服務SFS. 4
3、?? 什么是對象存儲服務OBS. 6
4、?? 實驗架構概述... 7
5、?? 創建ECS服務器... 7
6、?? 創建SFS文件系統... 7
7、?? 掛載共享文件存儲SFS. 8
8、?? 創建OBS對象存儲服務... 8
9、?? 配置obsutil和AK/SK. 9
10、? 手動測試上傳文件到OBS. 9
11、? 利用crontab配置定時任務... 9
1、????? 什么是SAP HANA
HANA(High-Performance Analytic Appliance)高性能分析設備
定義1:HANA是一個軟硬件結合體,提供高性能的數據查詢功能,用戶可以直接對大量實時業務數據進行查詢和分析。用戶拿到的是一個裝有預配置軟件的設備。至于HANA的云服務,只是對用戶而言可以在不購買相關硬件的情況下享受HANA的高性能,而HANA云服務的背后還是需要更高性能的硬件支撐的。
定義2: 基于內存計算技術的高性能實時數據計算平臺,是全球一個發布商用的基于內存計算的產品,通過 SAP 內存計算技術優化應用,轉變人們的思考、規劃和工作方式。
SAP 提供一系列前所未有的新型企業應用,其中結合了大量交易與實時分析能力,能夠顯著優化現有的計劃流程、預測流程、定價優化流程等數據密集型流程。借助 SAP 內存數據庫,充分發揮實時數據的潛力。 SAP 內存數據庫采用改進的數據壓縮、多欄式數據存儲和內存計算技術,支持新一代企業數據管理?;?SAP 內存工具的創新型業務分析功能可使您獲得洞察力。 作為一款靈活、多用途且與數據源無關的內存工具,SAP 內存工具(SAP HANA)整合了通過硬件(由 SAP 領先的硬件合作伙伴提供)進行優化的 SAP 軟件組件。 借助 SAP HANA,企業能夠根據大量實時的詳細信息分析業務運營狀況。
SAP HANA可以應用于多個場景,如作為其他數據庫的加速器、直接作為報表分析的數據源或直接用作OLAP分析型數據倉庫。
2、????? 什么是彈性文件服務SFS
彈性文件服務(Scalable File Service,SFS)提供按需擴展的高性能文件存儲,可供云上多個彈性云服務器(Elastic Cloud Server,ECS)共享訪問。
如下圖所示。
與傳統的文件共享存儲相比,彈性文件服務具有以下優勢:
·?????? 文件共享
同一區域跨多個可用區的云服務器可以訪問同一文件系統,實現多臺云服務器共同訪問和分享文件。
·?????? 彈性擴展
彈性文件服務可以根據您的使用需求,在不中斷應用的情況下,增加或者縮減文件系統的容量。一鍵式操作,輕松完成您的容量定制。
·?????? 高性能、高可靠性
性能隨容量增加而提升,同時保障數據的高持久度,滿足業務增長需求。
·?????? 無縫集成
彈性文件服務同時支持NFS和CIFS協議。通過標準協議訪問數據,無縫適配主流應用程序進行數據讀寫。同時兼容SMB2.0/2.1/3.0版本,Windows客戶端可輕松訪問共享空間。
·?????? 操作簡單、低成本
操作界面簡單易用,您可輕松快捷地創建和管理文件系統。
3、????? 什么是對象存儲服務OBS
對象存儲服務(Object Storage Service,OBS)是一個基于對象的海量存儲服務,為客戶提供海量、安全、高可靠、低成本的數據存儲能力,包括:創建、修改、刪除桶,上傳、下載、刪除對象等。
OBS系統和單個桶都沒有總數據容量和對象/文件數量的限制,為用戶提供了超大存儲容量的能力,適合存放任意類型的文件,適合普通用戶、網站、企業和開發者使用。由于OBS是一項面向Internet訪問的服務,提供了基于HTTP/HTTPS協議的Web服務接口,用戶可以隨時隨地連接到Internet的電腦上,通過OBS管理控制臺或客戶端訪問和管理存儲在OBS中的數據。此外,OBS支持SDK和OBS API接口,可使用戶方便管理自己存儲在OBS上的數據,以及開發多種類型的上層業務應用。
OBS還提供圖片處理特性(Image Processing),為用戶提供穩定、安全、高效、易用、低成本的圖片處理服務,包括:圖片剪切、圖片縮放、圖片水印、格式轉換等。圖片處理特性相關內容請參見圖片處理特性指南。
云服務實現了在多區域部署基礎設施,具備高度的可擴展性和可靠性,用戶可根據自身需要指定區域使用OBS,由此獲得更快的訪問速度和實惠的服務。
4、????? 實驗架構概述
本次實驗采用華為云的SFS服務,OBS服務,ECS服務部署整個測試架構,通過掛載NFS文件系統到云服務器(Linux),將SAP HANA的SFS共享文件存儲文件以及目錄定時Crontab備份到OBS上。
5、????? 創建ECS服務器
略:
請參考:https://support.huaweicloud.com/qs-ecs/zh-cn_topic_0132727313.html
6、????? 創建SFS文件系統
7、????? 掛載共享文件存儲SFS
rpm -qa|grep nfs
sudo yum -y install nfs-utils
yum install bind-utils
nslookup sfs-nas3.cn-east-2.myhuaweicloud.com
mkdir sfs-mount
mount -t nfs -o vers=3,timeo=600,nolock sfs-nas3.cn-east-2.myhuaweicloud.com:/share-ae2d1dac /sfs-mount/
chmod 777 /sfs-mount/
mount -t nfs -o vers=3,timeo=600,nolock sfs-nas3.cn-east-2.myhuaweicloud.com:/share-ae2d1dac /sfs-mount/
cd /sfs-mount/
dd if=/dev/zero of=test bs=1M count=100
dd if=/dev/zero of=test1 bs=1M count=100
dd if=/dev/zero of=test2 bs=1M count=100
wget? https://obs-community.obs.cn-north-1.myhuaweicloud.com/obsutil/current/obsutil_linux_amd64.tar.gz
cp obsutil_linux_amd64.tar.gz? /root/
tar -zxvf obsutil_linux_amd64.tar.gz
./obsutil config -i=AK-k=SK-e=obs.cn-east-2.myhuaweicloud.com
請參考:https://support.huaweicloud.com/qs-sfs/zh-cn_topic_0034428728.html
8、????? 創建OBS對象存儲服務
9、????? 配置obsutil和AK/SK
./obsutil config -i=AK-k=SK-e=obs.cn-east-2.myhuaweicloud.com
配置OBS的API訪問權限AK/SK,請參考:
https://support.huaweicloud.com/utiltg-obs/obs_11_0001.html
10、 手動測試上傳文件到OBS
obsutil cp /src1 obs://bucket-test/src -r -f -flat
上傳示例參考:
https://support.huaweicloud.com/utiltg-obs/obs_11_0028.html
11、 利用crontab配置定時任務
[root@sfs-sync-obs-test ~]# crontab -l
00 00 * * * cd /root && nohup ./obsutil_linux_amd64/obsutil cp /sfs-mount/ obs://obs-defae/ -r -f -u &>obsutil_crond.log &
參考:https://support.huaweicloud.com/utiltg-obs/obs_11_0034.html
OBS sfs
版權聲明:本文內容由網絡用戶投稿,版權歸原作者所有,本站不擁有其著作權,亦不承擔相應法律責任。如果您發現本站中有涉嫌抄襲或描述失實的內容,請聯系我們jiasou666@gmail.com 處理,核實后本網站將在24小時內刪除侵權內容。
版權聲明:本文內容由網絡用戶投稿,版權歸原作者所有,本站不擁有其著作權,亦不承擔相應法律責任。如果您發現本站中有涉嫌抄襲或描述失實的內容,請聯系我們jiasou666@gmail.com 處理,核實后本網站將在24小時內刪除侵權內容。