reVISION堆棧宣告Xilinx進入視覺導向機器學習終端市場
云應用用術(shù)語解釋終端與服務(云)端互動應用終端操作同步云端而占用本地空間也通過云端備份保留終端數(shù)據(jù)云應用用途還有多廣開發(fā)空間同云應用能有同用途。
“云應用”的工作原理是把傳統(tǒng)軟件“本地安裝、本地運算”的使用方式變?yōu)?rdquo;即取即用”的服務,通過互聯(lián)網(wǎng)或局域網(wǎng)連接并操控遠程服務器集群,完成業(yè)務邏輯或運算任務的一種新型應用。“云應用”的主要載體為互聯(lián)網(wǎng)技術(shù),以瘦客戶端(Thin Client)或智能客戶端(Smart Client)的展現(xiàn)形式,其界面實質(zhì)上是HTML5,Javascript,或Flash等技術(shù)的集成。云應用不但可以幫助用戶降低IT成本,更能大大提高工作效率,因此傳統(tǒng)軟件向云應用轉(zhuǎn)型的發(fā)展革新浪潮已經(jīng)不可阻擋。
機器學習的應用正快速擴展到越來越多的終端市場。面向云應用,Xilinx推出了可重配置加速堆棧,今天Xilinx又面向端應用,推出了全新的reVISION堆棧,這不僅讓Xilinx完成了在視覺導向機器學習領(lǐng)域從云到端的部署,更重要的是,它可使得即使沒有或者很少硬件設計專業(yè)知識的嵌入式軟件和系統(tǒng)工程師,也可以更輕松、更快速地開發(fā)視覺導向的智能系統(tǒng)。一旦將機器學習、計算機視覺、傳感器融合和連接的優(yōu)勢融為一體,這些工程師將從中大受裨益。
放眼全球,Xilinx已經(jīng)成為眾多企業(yè)開發(fā)先進嵌入式視覺系統(tǒng)的首要選擇。至今全球已有23家汽車制造商在85款不同車型的ADAS系統(tǒng)中部署了高級嵌入式視覺系統(tǒng),另外還有其它數(shù)百家嵌入式視覺客戶在數(shù)千種應用中也部署了基于Xilinx技術(shù)開發(fā)的先進嵌入式視覺系統(tǒng),其中至少有40家已經(jīng)在開發(fā)或部署機器學習技術(shù)以大幅提升系統(tǒng)智能。
眾多的傳統(tǒng)嵌入式視覺應用通過采用機器視覺和傳感器融合技術(shù)后都在發(fā)生巨變,reVISION堆棧幫助制造商在各種市場中實現(xiàn)了一系列快速增長的應用,包括傳統(tǒng)的高端消費市場、汽車、工業(yè)、醫(yī)療和航空航天與國防等,以及新一代應用如協(xié)作機器人、具有“感應和躲避”功能的無人機、增強現(xiàn)實、自動駕駛汽車、自動化監(jiān)控和醫(yī)療診斷等。在這些應用市場中,差異化至關(guān)重要,系統(tǒng)必須響應迅速,最新算法和傳感器必須能夠被快速部署。
這些系統(tǒng)通常具有以下三大特色:1)智能性及高效的立即響應性;2)升級到最新算法和傳感器的靈活性;3)隨時與其它機器和云保持連接。
也就是說,第一,系統(tǒng)不僅要會思考,而且還能對情境立即做出響應。這就要求一個從感應到處理、分析、決策、通信和控制整個流程中更一致的視圖,同時還要高效實施、部署最新機器學習技術(shù),滿足8位及更深層面的精確性要求。
第二,鑒于神經(jīng)網(wǎng)絡和相關(guān)算法的快速變化以及傳感器的快速發(fā)展,必須實現(xiàn)靈活性,能通過軟硬件的可重配置性升級系統(tǒng)。
第三,由于許多新系統(tǒng)都連接在了一起(物聯(lián)網(wǎng)),因此需要與傳統(tǒng)的已有設備通信,要與未來推出的新設備通信,還要能夠進行云端通信。
很顯然,只有Xilinx的Zynq可重編程SoC和MPSoC最適合用來滿足這些系統(tǒng)要求。reVISION堆棧讓Xilinx如虎添翼,它支持以最快速度開發(fā)出最具響應性的視覺系統(tǒng),相比最具競爭力的計算嵌入式GPU和典型SoC而言,將機器學習推斷的單位功耗圖像捕獲速度提升了6倍,將計算機視覺處理的單位功耗幀速度提升了40倍,時延降低為1/5。即便是沒有硬件專業(yè)知識的開發(fā)人員也能通過結(jié)合使用C/C++/OpenCL開發(fā)流程、業(yè)界標準的框架,以及Caffe和OpenCV等庫,在單個Zynq SoC或MPSoC上開發(fā)出嵌入式視覺應用。
借助reVISION堆棧所獨有的可重配置性和任意連接優(yōu)勢,開發(fā)人員能夠快速開發(fā)和部署升級。隨著神經(jīng)網(wǎng)絡、算法和傳感器技術(shù)和接口標準不斷加速發(fā)展,可重配置性對“適應未來的”智能視覺化系統(tǒng)至關(guān)重要。
Xilinx公司戰(zhàn)略與市場營銷部高級副總裁Steve Glaser指出:“現(xiàn)在已經(jīng)有很多客戶是通過使用賽靈思的產(chǎn)品獲得了很多的優(yōu)勢,而且在市場上與同類產(chǎn)品相比,這個優(yōu)勢是非常顯著的。但是客戶也需要付出額外的投入或者是工作,而且還需要具備相應的硬件方面的專有知識,才能夠真正利用這方面的優(yōu)勢。所以要真正實現(xiàn)非常廣泛的采用,我們就必須要支持新的編程模式,也就是軟件定義的編程,同時還要滿足相應行業(yè)標準庫和新型的框架來支持機器學習的應用。所以,通過軟件定義的編程以及符合行業(yè)標準的庫和框架,就能夠擴展視覺導向的機器學習應用范圍。”
圖2:Xilinx公司戰(zhàn)略與市場營銷部高級副總裁Steve Glaser
賽靈思reVISION 堆棧包括平臺、算法和應用開發(fā)所需的豐富的開發(fā)資源,可支持最流行的神經(jīng)網(wǎng)絡,包括 AlexNet、GoogLeNet、SqueezeNet、SSD 和 FCN。此外,該堆棧還提供了庫元素, 包括 CNN 網(wǎng)絡層的預定義的優(yōu)化型實現(xiàn)方案,這也是構(gòu)建定制神經(jīng)網(wǎng)(DNN/CNN)所必需的。機器學習元素配合豐富的滿足加速要求的 OpenCV 系列功能用于計算機視覺處理。對應用層開發(fā)來說,賽靈思支持業(yè)界標準的框架,包括用于機器學習的 Caffe 和用于計算機視覺的 OpenVX。reVISION 堆棧還包括賽靈思及第三方提供的開發(fā)平臺,諸如各種類型的傳感器。
Eyetech Digital Systems 公司 CEO 兼創(chuàng)始人 Robert Chappell 指出:“我們的眼部跟蹤科技采用 Zynq SoC 支持高清視覺分析功能,讓 ALS 等各種癱瘓病人受益匪淺。新型reVISION 堆棧借助機器學習的力量為算法開發(fā)提供了各種新的機會。這必將支持我們進一步擴展我們的人機交互硬件產(chǎn)品,并提升我們核心眼部跟蹤產(chǎn)品的價值。”
ARM細分市場營銷高級總監(jiān)Lakshmi Mandyam表示:“嵌入式市場是一個不斷發(fā)展的應用領(lǐng)域,其中算法,神經(jīng)網(wǎng)絡和傳感器的變化需要目標平臺的可重構(gòu)性。 來自賽靈思的基于ARM®的Zynq技術(shù)將能夠有效地部署這些應用,同時加速創(chuàng)新型機器學習應用從端到云的廣泛采用。”
深鑒科技(DeePhi)創(chuàng)始人兼CEO姚頌表示:“深鑒科技致力于為機器人/無人機和安防監(jiān)控等行業(yè)應用提供先進的嵌入式視覺解決方案。我們已經(jīng)開發(fā)了一個完整的工作流程,用于在FPGA上部署深度學習算法,實現(xiàn)算法、軟件和硬件的協(xié)同優(yōu)化。在未來,我們希望真正賦予萬物智能,而賽靈思的全可編程(All Programmable)技術(shù),將支持我們不斷地適應和重新配置系統(tǒng)以實現(xiàn)這個目標。reVISION堆棧中所包含的完整的工具包,可以讓我們的客戶更加輕松容易地利用全可編程FPGA和SoC—即使是沒有任何FPGA開發(fā)背景的算法工程師也能有效地部署經(jīng)過訓練的模型。這對于利用FPGA搭建智能解決方案有莫大的好處。”
“我們的Dobby口袋無人機-AI版集成了復雜的計算機視覺和機器學習技術(shù),通過手勢控制和對象及主題跟蹤為消費者提供獨特的體驗,”零度智控CEO楊建軍說,“這些功能,直到最近還只屬于更昂貴的系統(tǒng),而我們借助Zynq All Programmable器件將這些復雜的算法實現(xiàn)到了Dobby AI中。我們非常高興看到賽靈思推出reVISION堆棧平臺,它將支持我們的團隊更容易地提升這些關(guān)鍵計算機視覺和機器學習算法,從而助力我們?yōu)镈obby AI賦予更加獨特的個性。擁有像Xilinx這樣不斷深耕技術(shù)的合作伙伴,將確保我們可以在這個領(lǐng)域持續(xù)開發(fā)突破性的解決方案。”
威視銳科技總經(jīng)理姚遠表示:“近年來,我們看到越來越多的用戶正在多種不同應用領(lǐng)域開發(fā)嵌入式視覺系統(tǒng),包括智能監(jiān)控、機器視覺和高級駕駛員輔助系統(tǒng)等。威視銳科技基于賽靈思FPGA和SoC的嵌入式視覺解決方案為這些用戶提供了All Programmable 全可編程的靈活、高性能且簡單易用的開發(fā)流程,致力于幫助他們快速啟動嵌入式視覺設計。近期我們在威視銳EagleGo平臺上實現(xiàn)了基于CNN的深度學習算法,進一步證實了Zynq‐7000 SoC的出色性能以及SDSoC設計工具的高效性。我們已經(jīng)推出了Zynq UltraScale+ MPSoC系統(tǒng)級模塊(ZURA),并將在隨后的ZU+ MPSoC視覺解決方案套件中采用最新的reVISION開發(fā)堆棧。威視銳科技是賽靈思聯(lián)盟計劃認證設計服務成員和授權(quán)培訓合作伙伴,提供基于賽靈思FPGA、SoC和MPSoC的嵌入式視覺和視頻解決方案及服務。我們的解決方案包括Zynq‐7000 SoC/Zynq UltraScale+ MPSoC開發(fā)板以及帶內(nèi)置OpenCV庫的系統(tǒng)級模塊(SOM),同時可以提供基于Zynq‐7000 SoC的交鑰匙智能攝像頭解決方案,希望以我們基于賽靈思產(chǎn)品專業(yè)的設計服務能力和對本地用戶的了解,讓更多的嵌入式視覺開發(fā)者獲益于先進的全可編程解決方案。”
賽靈思公司戰(zhàn)略與市場營銷高級副總裁 Steve Glaser表示:“我們從端到云看到來自機器學習應用領(lǐng)域的巨大興趣,而且我們也相信賽靈思對堆棧開發(fā)持續(xù)的投入能加速主流應用。今天,成百上千的嵌入式視覺客戶都借助賽靈思技術(shù)實現(xiàn)了性能和時延 10 倍以上的提升。新增 reVISION 之后,成千上萬的客戶也將受益于上述種種優(yōu)勢。”
reVISION 堆棧將于2017年第二季度開始供貨。