深度學(xué)習(xí)在互聯(lián)網(wǎng)的驅(qū)動(dòng)下正在日益發(fā)展,而深度學(xué)習(xí)對(duì)于計(jì)算的需求是巨大的,所以深度學(xué)習(xí)與高性能計(jì)算具有天然的聯(lián)系。在近日的中科曙光技術(shù)創(chuàng)新大會(huì)上,中科曙光聯(lián)合中國科學(xué)院計(jì)算技術(shù)研究所以及NVIDIA公司共同簽署了深度學(xué)習(xí)聯(lián)合實(shí)驗(yàn)室成立備忘錄。同時(shí),曙光也發(fā)布了X System平臺(tái)——包括深度學(xué)習(xí)軟件XSharp和XMachine系列深度學(xué)習(xí)一體機(jī)。
曙光和NVIDIA的合作其實(shí)并不出人意外,因?yàn)樵贜VIDIA專業(yè)解決方案2015戰(zhàn)略發(fā)布會(huì)上,筆者已經(jīng)看到了曙光和NVIDIA在深度學(xué)習(xí)領(lǐng)域的合作。在當(dāng)時(shí)的發(fā)布會(huì)上,NVIDIA全球副總裁、PSG兼云計(jì)算業(yè)務(wù)中國區(qū)總經(jīng)理潘迪就表示,NVIDIA是一個(gè)技術(shù)型的公司,NVIDIA與生態(tài)鏈伙伴一直在積極互動(dòng),客戶最終關(guān)心的是一個(gè)整體的解決方案,所以在中國,NVIDIA與曙光、浪潮、聯(lián)想等合作伙伴拓展GPU的應(yīng)用場景。
NVIDIA全球副總裁、PSG兼云計(jì)算業(yè)務(wù)中國區(qū)總經(jīng)理潘迪
曙光信息產(chǎn)業(yè)股份有限公司副總裁沙超群
在發(fā)布會(huì)上,曙光信息產(chǎn)業(yè)股份有限公司副總裁沙超群也被邀請(qǐng)進(jìn)行了主題演講,沙超群當(dāng)時(shí)就透露了曙光將與NVIDIA進(jìn)一步合作,針對(duì)不同企業(yè)在深度學(xué)習(xí)訓(xùn)練方面的需求,定制專門優(yōu)化的訓(xùn)練硬件設(shè)備。所以這也就為曙光和NVIDIA在中科曙光技術(shù)創(chuàng)新大會(huì)上的合作埋下了伏筆。
其實(shí)曙光和NVIDIA的合作由來已久,曙光在HPC產(chǎn)品上應(yīng)用GPU加速計(jì)算的研究非常廣泛。在高性能計(jì)算層面,雙方實(shí)現(xiàn)了優(yōu)勢互補(bǔ)。中科曙光擁有豐富的產(chǎn)品線,而NVIDIA在GPU技術(shù)、CUDA算法、GPU數(shù)學(xué)庫等方面的優(yōu)勢也非常明顯。所以雙方在深度計(jì)算方面的合作空間是巨大的。
目前國內(nèi)企業(yè)對(duì)機(jī)器學(xué)習(xí)的研究與應(yīng)用,更多局限于互聯(lián)網(wǎng)用戶,很多中小企業(yè)多是望其項(xiàng)背。聯(lián)合實(shí)驗(yàn)室三方希望降低企業(yè)的入門難度,將深度學(xué)習(xí)技術(shù)進(jìn)行全面推廣,更加切實(shí)有效的推動(dòng)深度學(xué)習(xí)技術(shù)在國內(nèi)的發(fā)展。
在具體的戰(zhàn)略模式上,三方表示,將根據(jù)市場需求做出多種選擇。針對(duì)正在使用深度學(xué)習(xí)的互聯(lián)網(wǎng)公司,合作開發(fā)是主旋律。大公司科研能力強(qiáng),聯(lián)合實(shí)驗(yàn)室在異構(gòu)計(jì)算、并行計(jì)算等算法領(lǐng)域可以提供更多幫助。而面向中小企業(yè),深度學(xué)習(xí)云服務(wù)產(chǎn)品則更易實(shí)現(xiàn)。曙光公司總裁助理、高性能計(jì)算產(chǎn)品事業(yè)部經(jīng)理曹振南說,我們計(jì)劃依托曙光國家級(jí)云中心在全國范圍內(nèi)的部署,為一些中小型企業(yè)提供面向深度學(xué)習(xí)和人工智能的云服務(wù)。因?yàn)槲覀兒芮逦目吹剑疃葘W(xué)習(xí)的客戶絕不僅僅只有以BAT為代表的企業(yè)。
針對(duì)一些行業(yè)對(duì)云安全問題心存顧慮,并不愿意把數(shù)據(jù)通過云的模式進(jìn)行智能分析。三方實(shí)驗(yàn)室提供定制化的軟硬件產(chǎn)品,也就是X System平臺(tái)——包括深度學(xué)習(xí)軟件XSharp和XMachine系列深度學(xué)習(xí)一體機(jī)。
聯(lián)合實(shí)驗(yàn)室成立備忘錄簽署的同時(shí),曙光深度學(xué)習(xí)XSystem系統(tǒng)也同時(shí)發(fā)布。該系統(tǒng)包含深度學(xué)習(xí)XSharp軟件棧和XMachine硬件平臺(tái),是專為用戶提供的一體化的深度學(xué)習(xí)軟硬件整體解決方案。借助一體化平臺(tái),用戶可以快速進(jìn)入深度學(xué)習(xí)領(lǐng)域。這套系統(tǒng)目前已經(jīng)實(shí)現(xiàn)產(chǎn)品化,現(xiàn)在已經(jīng)有終端的用戶在這個(gè)框架上做出了一些研究。
XSharp產(chǎn)品理念以用戶應(yīng)用為主,科研為輔,更多面向企業(yè)用戶的實(shí)際應(yīng)用。同時(shí),XSharp軟件棧各模塊可以隨意組合,按照用戶應(yīng)用進(jìn)行裁剪,滿足不同需求。而作為整個(gè)系統(tǒng)的硬件平臺(tái),XMachine深度學(xué)習(xí)一體機(jī)特別為深度學(xué)習(xí)定制開發(fā),提供多種類型GPU服務(wù)器供選擇,原生態(tài)支持NVIDIA DIGITS開發(fā)環(huán)境,可大大降低用戶進(jìn)入深度學(xué)習(xí)領(lǐng)域的軟件投入成本。
XMachine深度學(xué)習(xí)一體機(jī)其實(shí)就是曙光和NVIDIA合作的具體落地。DIGITS是一個(gè)NVIDIA開源的深度學(xué)習(xí)平臺(tái),DIGITS可在安裝、配置和訓(xùn)練深度神經(jīng)網(wǎng)絡(luò)過程中為用戶提供指導(dǎo),處理復(fù)雜的工作好讓科學(xué)家能專心在研究活動(dòng)和結(jié)果上。得益于其直觀的用戶界面和強(qiáng)大的工作流程管理能力,不論是在本地系統(tǒng)還是在網(wǎng)絡(luò)上使用DIGITS,準(zhǔn)備和加載訓(xùn)練數(shù)據(jù)集都相當(dāng)簡單。這是同類系統(tǒng)中首個(gè)提供實(shí)時(shí)監(jiān)控和可視化功能的系統(tǒng),用戶可以對(duì)工作進(jìn)行微調(diào)。
而且NVIDIA深度學(xué)習(xí)工程團(tuán)隊(duì)為了自己的研發(fā)工作而開發(fā)的DIGITS DevBox,是一套集多項(xiàng)功能于一身的平臺(tái),能夠加快深度學(xué)習(xí)的研究活動(dòng)。其實(shí)DIGITS DevBox已經(jīng)預(yù)先安裝了數(shù)據(jù)科學(xué)家和研究人員在開發(fā)自己的深度神經(jīng)網(wǎng)絡(luò)時(shí),所需要使用到的各種軟件。所以可以看出來XMachine深度學(xué)習(xí)一體機(jī)和DIGITS DevBox類似,就是為用戶提供預(yù)配置的深度學(xué)習(xí)一體化開發(fā)平臺(tái),幫助用戶實(shí)現(xiàn)深度學(xué)習(xí)的敏捷開發(fā)。
總之,曙光和NVIDIA的合作加速了深度學(xué)習(xí)市場的發(fā)展,憑借NVIDIA在GPU方面的技術(shù)優(yōu)勢以及中科曙光在高性能計(jì)算市場的多年耕耘,中國的深度學(xué)習(xí)市場將迎來快速發(fā)展的階段。