發(fā)布會傳送門
創(chuàng)新互聯(lián)長期為千余家客戶提供的網(wǎng)站建設服務,團隊從業(yè)經(jīng)驗10年,關注不同地域、不同群體,并針對不同對象提供差異化的產(chǎn)品和服務;打造開放共贏平臺,與合作伙伴共同營造健康的互聯(lián)網(wǎng)生態(tài)環(huán)境。為屯溪企業(yè)提供專業(yè)的成都網(wǎng)站建設、成都網(wǎng)站制作,屯溪網(wǎng)站改版等技術服務。擁有10年豐富建站經(jīng)驗和眾多成功案例,為您定制開發(fā)。
產(chǎn)品詳情
環(huán)境搭建是算法研發(fā)過程中的重要一環(huán),這里除了硬件選型外,軟件環(huán)境的安裝配置,后續(xù)升級往往會耗費不少時間。DSW借助阿里云ECS,Docker和Kubernetes等云原生技術,能夠在2,3分鐘內幫用戶完成環(huán)境搭建。用戶可以根據(jù)算法需要和成本考慮, 選擇阿里云ECS提供的包括CPU和異構計算GPU在內的所有資源規(guī)格。不僅支持預付費,還支持后付費。 DSW還配置了10多種適用于不同AI場景的典型軟件環(huán)境配置, 包括Tensorflow和PyTorch等主流訓練框架的不同版本組合,供用戶選擇。作為高度開放的開發(fā)環(huán)境,DSW開放sudo權限給用戶、支持任意第三方庫安裝。
為了滿足不同水平層次和開發(fā)習慣的算法用戶,結合可視化,交互式編程和命令行輸入,DSW提供了3種編程入口:WebIde適用于工程化要求比較高的項目;JupyterLab適用于快速POC試驗;Terminal入口可用于快速執(zhí)行Shell命令,運行程序和簡單的編輯等。
DSW還開發(fā)和預裝了各種JupyterLab和WebIDE插件, 比如廣受深度學習開發(fā)者喜愛的可視化工具Tensorboard,用戶在DSW內通過Launcher,Commands打開,甚至還可以使用%tensorboard魔法命令直接在Notebook中開啟等多種方式使用Tensorboard。不僅支持本地文件,還可以打開存放在OSS,ODPS里的訓練日志。針對算法同學使用Python比較多的特點, DSW的WebIDE內安裝了Python插件, 可以直接在瀏覽器內在線調試,單步跟蹤程序運行。用戶還可以根據(jù)需要,自主安裝需要的任意插件。
DSW支持多種數(shù)據(jù)源讀寫,包括NAS, OSS,云盤和MaxCompute,尤其是內置了dswmagic魔法命令可以讓用戶在ipynb文件中使用SQL語句讀寫MaxCompute表中數(shù)據(jù),預置的SQL編輯器支持語法高亮、智能提示、自動補全等功能,還支持運行帶變量替換功能的Sql腳本。查詢結果自動以最友好的圖形化展示。
為了節(jié)省資源成本,用戶可以利用停機不收費功能,在實例閑置不用時關機保存環(huán)境, 需要時再一鍵快速恢復。此外, DSW支持用戶自定義鏡像安裝,可以基于之前保存或定制的環(huán)境創(chuàng)建實例。
DSW在公有云上支持了多次百隊以上規(guī)模的天池大賽,在阿里集團內同樣也承接著比賽,經(jīng)過千錘百煉,證明不僅適合個人和團隊研發(fā),也支持大規(guī)模算法競賽和教育培訓。
安全性和穩(wěn)定性是用戶比較關心的問題,DSW使用的計算,存儲和網(wǎng)絡資源,完全是使用用戶自己的賬號購買,并部署到用戶自己的vpc內部, 可以方便與用戶其他數(shù)據(jù)打通。用戶間完全隔離,還具備非常好的安全性。基于阿里云ECS和容器服務, 穩(wěn)定性有保障。
身為PAI這個大家庭的一員, DSW除了完成單機開發(fā)訓練功能之外, 還內置部分PAI的基礎能力。比如用戶可以直接在實例內利用PAI視覺類算法包EasyVision進行圖像分類訓練評估、預測; 通過自動調參AutoML進行算法超參數(shù)自動調優(yōu);用戶甚至能夠無感知的享受PAI編譯優(yōu)化算法組件TAO提供的訓練過程中的算子優(yōu)化。最后, DSW還提供了供算法直接讀取MaxCompute表數(shù)據(jù)的CommonIO組件,支持TableRecordDataSet, TableReader,TableWriter等標準接口,方便訓練程序直接提交到PAI的分布式訓練集群。
可以預見,在不久的將來, 會有更多的PAI算法包內置進DSW基礎鏡像內。 DSW也會依賴PAI SDK,圍繞數(shù)據(jù)讀取,加工,模型訓練, 模型管理以及在線服務等AI研發(fā)生產(chǎn)流程的關鍵環(huán)節(jié),為用戶提供像Pipeline搭建,調度和管理之類的一條龍服務。