Aupera是一家專注于視頻數(shù)據(jù)應用的新一代系統(tǒng)解決方案的創(chuàng)業(yè)公司,Aupera資深AI工程師Narges Afsham博士接受LiveVideoStack采訪時表示,在FPGA中集成視頻編碼與AI是水到渠成的。
LiveVideoStack:針對視頻云服務市場,您認為國內外有哪些不同?
Narges Afsham:我們可以發(fā)現(xiàn)過去這幾年直播流及短視頻剪輯市場的發(fā)展,中國擁有無與倫比的用戶數(shù)量,面臨視頻云服務市場,相應提出更多挑戰(zhàn)及復雜性,包括更高的并發(fā)率、更多樣的終端設備及更復雜的網(wǎng)絡條件等。另外,視頻內容理解是中國必須具備運行視頻云服務的能力,無論是使用人力資源還是技術資源。雖然我們發(fā)現(xiàn)大玩家如Facebook、Instagram等,正一窩蜂地提供越來越多的相關視頻服務,包括Facebook直播、Facebook點播、以及他們最新推出的多人AR視頻游戲,這都要求視頻云服務提供商在處理海量視頻流及數(shù)據(jù)時,持續(xù)不斷突破技術壁壘和瓶頸。我個人認為中國有更多的用戶群推動視頻云服務提供商不斷改進服務,視頻云服務提供商集中在滿足大規(guī)模用戶的需求,提供更優(yōu)化的服務,而美國視頻云服務提供商在提供視頻相關的新應用和技術方面更有創(chuàng)新性一些。
LiveVideoStack:能否介紹下Aupera與Xilinx合作開發(fā)的視頻處理系統(tǒng)平臺Aup2600系列的應用情況。
Narges Afsham:Aup2600系列是Aupera基于Xilinx最新MPSoC FPGA設備開發(fā)的新一代視頻處理系統(tǒng)平臺,該系統(tǒng)架構基于分布式計算架構對視頻處理進行設計及優(yōu)化,在處理大規(guī)模視頻流方面突破了CPU的瓶頸。對于直播流轉碼及音視頻混合流任務,相對傳統(tǒng)X86服務器,該系統(tǒng)在并發(fā)流量處理方面實現(xiàn)20-30倍的效率。更重要的是,系統(tǒng)可升級實現(xiàn)視頻AI相關應用,無需改變硬件及附加,這正是它令人激動的地方。系統(tǒng)FPGA資源已被保留用于AI實踐,只需要一小部分實現(xiàn)視頻編解碼任務,你能想象其中蘊含的潛力。通過我們的系統(tǒng),我們能實現(xiàn)對現(xiàn)實的實時視頻內容理解,及視頻編解碼及AI應用在同一芯片組內完成。
LiveVideoStack:為什么視頻編碼/轉碼與AI應用可以在FPGA上結合在一起?具體的應用場景是什么?
Narges Afsham:視頻工程師將受益于硬件加速編解碼及它動態(tài)高效的QP分配,機器學習工程師受益于在硬件實現(xiàn)算法的推理速度,將它們集合統(tǒng)一在FPGA是非常自然的,這也極大地減少了開發(fā)周期。
LiveVideoStack:Aupera基于FPGA的視頻編解碼融合AI的解決方案有哪些獨特的優(yōu)勢嗎?
Narges Afsham:大大提升大規(guī)模海量視頻并行處理的效率,對視頻質量及視覺效果都有所改善,更重要的是系統(tǒng)升級實現(xiàn)AI相關應用,不需要添加或修改硬件,并能做到視頻流的實時分析。
LiveVideoStack:業(yè)界公眾的AI主流芯片,除了CPU以外,還有GPU、FPGA和ASIC。我們都知道FPGA比ASIC有更高的靈活性,比通用CPU和GPU有更高的效率。越來越多的企業(yè)選擇FPGA作為AI計算平臺,如微軟,亞馬遜,百度等,谷歌最近曝光的專用于人工智能深度學習計算的TPU,其實是一款ASIC。對此,您怎么看FPGA+AI,還有ASIC或通用CPU+AI?
Narges Afsham:這一切都是基于應用程序的具體要求。GPU、CPU及FPGA在延遲、能效比 、開發(fā)時間,甚至是芯片大小都不同。GPU浮點運算強,設計靈活性強。
Xilinx MPSoC集成CPU與FPGA于一體,與普通FPGA相比有更高的靈活性,功能更加強大,特別適用于數(shù)據(jù)中心的大規(guī)模應用,以及邊緣節(jié)點的低功耗應用。
同時,我們都將目睹機器學習算法和網(wǎng)絡的快速發(fā)展,幾乎每天都有改變或更新,從靈活性及可配置性方面,F(xiàn)PGA比ASIC性能好得多。
-
FPGA
+關注
關注
1660文章
22415瀏覽量
636496 -
AI
+關注
關注
91文章
39812瀏覽量
301481 -
視頻編碼
+關注
關注
2文章
114瀏覽量
21600
原文標題:Aupera:FPGA讓視頻編碼與AI結合水到渠成
文章出處:【微信號:livevideostack,微信公眾號:LiveVideoStack】歡迎添加關注!文章轉載請注明出處。
發(fā)布評論請先 登錄
如何使用FPGA實現(xiàn)高清低碼流視頻編碼?
FPGA+AI王炸組合如何重塑未來世界:看看DeepSeek東方神秘力量如何預測......
《AI Agent 應用與項目實戰(zhàn)》----- 學習如何開發(fā)視頻應用
求推薦視頻編碼芯片
阿里云智能視頻 AI 重裝來襲
深圳云棲大會人工智能專場:探索視頻+AI,玩轉智能視頻應用
自適應算術編碼的FPGA實現(xiàn)
CAST公司:基于FPGA和ASIC的H.264 High Profile視頻編碼器IP核
以DSP和FPGA協(xié)同技術設計實現(xiàn)的高性能視頻編碼器視頻采集設計
AI視頻編碼技術創(chuàng)新 探索極致視覺體驗
使用FPGA實現(xiàn)H.265視頻壓縮編碼格式的源代碼免費下載
高清視頻編碼器與流媒體平臺的完美結合
FPGA如何讓視頻編碼與AI非常簡單的結合
評論