omniture

才云科技發(fā)布國內(nèi)首個谷歌級深度學習在容器集群上的實踐案例

2016-06-06 10:44 9006
6月4日,于上海光大會展中心舉行的@Container容器大會上海站,才云科技正式發(fā)布了國內(nèi)首個基于容器集群的分布式深度學習TensorFlow系統(tǒng)Clever。

上海2016年6月6日電 /美通社/ -- 6月4日,于上海光大會展中心舉行的@Container容器大會上海站,才云科技正式發(fā)布了國內(nèi)首個基于容器集群的分布式深度學習TensorFlow系統(tǒng)Clever。美國谷歌于今年4月底最新發(fā)布的TensorFlow 0.8,成功實現(xiàn)了與Kubernetes云平臺的結合。在谷歌內(nèi)部,TensorFlow已經(jīng)成功地應用到了谷歌搜索、廣告、地圖、翻譯等眾多產(chǎn)品之中,并突破了語音識別,圖像識別,自然語言處理等多個領域的機器學習瓶頸。TensorFlow代表了美國大規(guī)模深度學習的最新進展。才云科技作為國內(nèi)首家支持分布式TensorFlow的云平臺,引領了國內(nèi)大數(shù)據(jù)市場的新發(fā)展。

才云科技首席科學家、前美國谷歌高級工程師鄭澤宇,在@Container容器大會上做了《谷歌級深度學習在Kubernetes上的實踐》分享。演講中,鄭澤宇為大家詳細解讀了深度學習在谷歌的最新實踐以及TensorFlow與才云科技容器云平臺的融合,并現(xiàn)場為大家演示了如何使用才云科技公有云平臺(caicloud.io)的分布式深度學習系統(tǒng)(見下圖)。

才云科技Caicloud.io 機器學習界面
才云科技Caicloud.io 機器學習界面

近兩年,Docker、“容器”作為新型軟件交付工具在國內(nèi)迅速普及,企業(yè)都逐漸把容器技術應用在開發(fā)環(huán)境中,大型容器集群管理方案和實踐也越來越多的被應用于國內(nèi)企業(yè)生產(chǎn)實踐。才云科技主推的谷歌級容器集群管理平臺caicloud.io與基于此平臺向上的各類容器SaaS云服務,已經(jīng)形成一股高能新引力。這使得才云科技首席科學家鄭澤宇的演講現(xiàn)場全場爆滿,一“站”難求。

深度學習在谷歌中的應用

谷歌內(nèi)部早在2011年就開始了對大規(guī)模并行化深度學習DistBelief系統(tǒng)的搭建。通過該系統(tǒng),谷歌實現(xiàn)了在語音識別,圖像識別,自然語言處理等多個領域的突破。在語音識別方面,此系統(tǒng)將谷歌語音搜索應用的錯誤率降低了25%;在圖像識別方面,此系統(tǒng)為谷歌贏得了ImageNet 的圖像識別競賽并成功的超越了人類表現(xiàn);在自然語言處理方面,谷歌翻譯通過此系統(tǒng)進一步提升了翻譯結果。基于DistBelief系統(tǒng),谷歌于2015年底開源了一套更加靈活,效率更高的深度學習系統(tǒng) -- TensorFlow。AlphaGo的開發(fā)團隊DeepMind也于上個月宣布完全轉移到了TensorFlow這套系統(tǒng)。

TensorFlow  Hadoop、Spark

因底層計算模型迥異,Hadoop、Spark和TensorFlow有完全不同的擅長和特點。Hadoop和Spark的底層計算框架均基于Map-Reduce,TensorFlow底層則基于矩陣運算。Hadoop和Spark適用于數(shù)據(jù)的清理、轉化和統(tǒng)計,TensorFlow則更專注于數(shù)值計算。比如TensorFlow不容易實現(xiàn)統(tǒng)計單詞出現(xiàn)個數(shù)的功能,但可以在短短幾行代碼中實現(xiàn)深度學習算法。

才云科技在國內(nèi)首推支持分布式TensorFlow系統(tǒng)

為了適應海量數(shù)據(jù)的需求,才云在6月4日推出Clever 機器學習系統(tǒng)成為國內(nèi)首家支持分布式TensorFlow系統(tǒng)?;诖讼到y(tǒng),才云一方面將進一步提供更加方便的機器學習算法實驗框架,為科研人員提供更好的支持;另一方面也將著力打造深度學習應用SaaS平臺,使得更多的人能夠享受到機器學習帶來的技術革新。

消息來源:才云Caicloud
China-PRNewsire-300-300.png
全球TMT
微信公眾號“全球TMT”發(fā)布全球互聯(lián)網(wǎng)、科技、媒體、通訊企業(yè)的經(jīng)營動態(tài)、財報信息、企業(yè)并購消息。掃描二維碼,立即訂閱!
collection