如何用一臺10年前的4GB內(nèi)存集成顯卡的筆記本完成模型訓(xùn)練

如何用一臺10年前的4GB內(nèi)存集成顯卡的筆記本完成模型訓(xùn)練

步驟：

1. 擦擦鍵盤上的灰

2. 按下電源鍵

3. 等待10分鐘進(jìn)入桌面

4. 等待5分鐘打開瀏覽器

5. 打開京東買一臺新筆記本，然后盤它！！！

思考5秒鐘~打開瀏覽器都困難，跑個(gè)模型根本不可能的好吧！

又思考5秒鐘~，現(xiàn)在大家都在搞Saas化，云服務(wù)商應(yīng)該有一些產(chǎn)品能搞搞模型訓(xùn)練

打開百度，搜到了百度的Easy DL和華為的ModelArts，擼擼袖子，盤它！！！

使用ModelArts完成模型訓(xùn)練

一系列注冊華為云的騷操作后，進(jìn)入到ModelArts界面。功能還真是多，自動(dòng)學(xué)習(xí)、訓(xùn)練管理、AI市場等等。

點(diǎn)進(jìn)ModelArts的論壇，發(fā)現(xiàn)還挺活躍的，很多人在這里提問。也有論壇管理員做一些活動(dòng)，還能拿一些獎(jiǎng)品。

挑了一個(gè)口罩識別的案例作為ModelArts入門指導(dǎo)。

鏈接：https://nbviewer.jupyter.org/github/huaweicloud/ModelArts-Lab/blob/master/contrib/1.%E5%8F%A3%E7%BD%A9%E6%A3%80%E6%B5%8B%E6%A8%A1%E5%9E%8B%E7%9B%B4%E6%92%AD%E5%BC%80%E5%8F%91%E6%8C%87%E5%AF%BC%E6%96%87%E6%A1%A3/mask_detect.ipynb

基本上參考案例操作就可以了。

不過要專門下載一個(gè)叫OBS Browser的工具去上傳數(shù)據(jù)也有點(diǎn)小麻煩，我的筆記本吃不消啊。

后面發(fā)現(xiàn)ModelArts的數(shù)據(jù)管理界面上就可以直接上傳數(shù)據(jù)，比通過OBS Browser上傳的方式方便很多。

而且通過OBS Browser上傳還有一個(gè)小問題，需要點(diǎn)擊【同步數(shù)據(jù)源】才能把數(shù)據(jù)同步到ModelArts上，不然ModelArts界面上不會顯示新增的圖片。而且【同步數(shù)據(jù)源】在標(biāo)注界面才有，不太容易找到這個(gè)。

ModelArts的【一鍵模型上線】功能太贊了。在數(shù)據(jù)上傳和標(biāo)注完后，通過這個(gè)功能。在界面上一直點(diǎn)擊Next就可以開始訓(xùn)練模型，部署模型了。

而且在各個(gè)階段都有具體的運(yùn)行詳情，比如可以看到訓(xùn)練的日志。

訓(xùn)練和部署的時(shí)候也還挺快的，大概13分鐘就完成了。

從數(shù)據(jù)集中挑了幾張圖片去預(yù)測，結(jié)果非常準(zhǔn)確，準(zhǔn)確率能到90%多。

但是預(yù)測的速度非常慢，大概要7~8秒鐘，猜測原因有幾種：1. 我的筆記本太差了T_T 2. 網(wǎng)絡(luò)太慢了 3. 沒有用GPU

經(jīng)過一系列操作把規(guī)格換成P4 GPU后，果然預(yù)測的速度變得非常快，馬上就出結(jié)果了（1秒不到的樣子）。

跟著案例只用3步就可以體驗(yàn)一次完整的模型訓(xùn)練過程。感覺還是很好的。

但是我想讓我的App去調(diào)用我在華為ModelArts的創(chuàng)建的服務(wù)。看了下ModelArts的文檔似乎還是有一些小麻煩，還是更加喜歡之前的傻瓜式操作，哈哈！

華為ModelArts還有很多功能沒有用過，比如難例、自動(dòng)化搜索、ModelArts Pro（會不會還有ModelArts Plus？）。有時(shí)間再看看。

【一鍵模型上線】這個(gè)功能還是很棒的，模型的精度也很高。華為技術(shù)值得。

利用云上的資源進(jìn)行訓(xùn)練，比自己搭建訓(xùn)練環(huán)境的成本要低太多了。也許算力上云就是未來的趨勢吧。

需要專門下載OBS Browser工具來上傳數(shù)據(jù)就比較麻煩。另外【添加圖片】這個(gè)功能感覺移動(dòng)到數(shù)據(jù)集界面上會更好，現(xiàn)在放在【標(biāo)注】界面上比較難找。

【同步數(shù)據(jù)源】這個(gè)也放到數(shù)據(jù)集界面上更好。如果能自動(dòng)同步就更好了，或者能否探測我的數(shù)據(jù)有變化，提示我去同步。

一開始標(biāo)注的時(shí)候，我只是框選了口罩。其實(shí)應(yīng)該框選人頭會更好。界面上有一些關(guān)于標(biāo)注的指導(dǎo)會更好。PS：后面發(fā)現(xiàn)界面右上角有一個(gè)【標(biāo)注樣例說明】小提示，這個(gè)提示里面有提到如何標(biāo)注。希望能夠有更多的標(biāo)注指導(dǎo)，幫助到我們這些新手。

一開始預(yù)測的性能很差，換成P4 GPU才提升。切換資源界面上是否可以提供一個(gè)【一鍵模型提升】功能或者提示，能夠引導(dǎo)我們?nèi)ヌ嵘A(yù)測性能。

關(guān)于集成ModelArts的預(yù)測功能，是否可以提供一個(gè)SDK可以直接對接ModelArts的預(yù)測服務(wù)。我大致看了下文檔，需要按照ModelArts 幫助文檔對接你們的2個(gè)接口才行，怎么說也要100多行的代碼量。PS：后面發(fā)現(xiàn)有ModelArts SDK，通過這個(gè)SDK可以調(diào)用預(yù)測服務(wù)的預(yù)測接口。我覺得預(yù)測界面上的調(diào)用指南可以指引到ModelArts SDK上。

ModelArts SDK是否能支持離線版的模型預(yù)測，這樣并不需要過于依賴華為云。

使用Easy DL完成模型訓(xùn)練

先玩10分鐘的猛男撿樹枝先~

ModelArts AI

版權(quán)聲明：本文內(nèi)容由網(wǎng)絡(luò)用戶投稿，版權(quán)歸原作者所有，本站不擁有其著作權(quán)，亦不承擔(dān)相應(yīng)法律責(zé)任。如果您發(fā)現(xiàn)本站中有涉嫌抄襲或描述失實(shí)的內(nèi)容，請聯(lián)系我們jiasou666@gmail.com 處理，核實(shí)后本網(wǎng)站將在24小時(shí)內(nèi)刪除侵權(quán)內(nèi)容。

版權(quán)聲明：本文內(nèi)容由網(wǎng)絡(luò)用戶投稿，版權(quán)歸原作者所有，本站不擁有其著作權(quán)，亦不承擔(dān)相應(yīng)法律責(zé)任。如果您發(fā)現(xiàn)本站中有涉嫌抄襲或描述失實(shí)的內(nèi)容，請聯(lián)系我們jiasou666@gmail.com 處理，核實(shí)后本網(wǎng)站將在24小時(shí)內(nèi)刪除侵權(quán)內(nèi)容。