VPU中的“六邊形戰(zhàn)士”如何為AI時代視頻應(yīng)用提供核心技術(shù)支撐

國內(nèi)領(lǐng)先的芯片IP設(shè)計與服務(wù)提供商安謀科技（中國）有限公司（以下簡稱“安謀科技Arm China”）近日在上海舉辦開年技術(shù)大秀《玲瓏·視界》，現(xiàn)場發(fā)布了面向AI應(yīng)用的新一代VPU IP——“玲瓏”V560/V760，代號“峨眉”！更值得關(guān)注的是，該產(chǎn)品已在服務(wù)器、視頻轉(zhuǎn)碼等領(lǐng)域完成首批客戶授權(quán)，備受市場認(rèn)可。

安謀科技Arm China此次推出的新一代VPU IP實(shí)力硬核，面面俱到，堪稱VPU中的“六邊形戰(zhàn)士”。產(chǎn)品采用多核多格式編解碼融合的可編程處理架構(gòu)，單核可支持4K60FPS編碼或8K30FPS解碼，集成CAE（Content Aware Encoder，內(nèi)容感知編碼）先進(jìn)編碼技術(shù)，全面支持H.266等主流編解碼視頻標(biāo)準(zhǔn)，可帶來高性能、高效率與低延時的體驗(yàn)。

“玲瓏”V560/V760 VPU IP性能與優(yōu)勢介紹

該產(chǎn)品能廣泛應(yīng)用于Edge AI、Physical AI及Cloud AI領(lǐng)域，幫助客戶顯著降低存儲及傳輸帶寬成本，并基于積木式堆疊技術(shù)支持客戶根據(jù)應(yīng)用場景靈活配置，從而在系統(tǒng)層面實(shí)現(xiàn)PPA的最優(yōu)平衡。

AI時代，VPU為什么如此重要？

隨著視頻分辨率和數(shù)據(jù)量不斷攀升，專用于視頻編解碼處理的VPU應(yīng)運(yùn)而生，成為各類視頻應(yīng)用的“超級工匠”。安謀科技Arm China深耕VPU IP賽道，將自研VPU產(chǎn)品線命名為“玲瓏”，寓意八面玲瓏，萬千場景全覆蓋。

目前，“玲瓏”系列已有多款面向不同視頻應(yīng)用的自研VPU IP產(chǎn)品，全新推出的“峨眉”作為第五款產(chǎn)品，是安謀科技Arm China “All in AI”產(chǎn)品戰(zhàn)略指引下的最新自研成果，能夠出色應(yīng)對AI技術(shù)爆發(fā)所帶來的海量視頻數(shù)據(jù)編解碼加速需求，為AI時代的視頻應(yīng)用提供核心技術(shù)支撐。

活動現(xiàn)場，一場別開生面的“山水實(shí)景大秀”生動演繹著“玲瓏”產(chǎn)品家族及其創(chuàng)新技術(shù)。安謀科技Arm China多媒體處理器研發(fā)負(fù)責(zé)人周華分享了產(chǎn)品命名的由來，他談到：“‘玲瓏’VPU IP產(chǎn)品代號以中國山峰命名，緣起于一次登山團(tuán)建，我們深刻體會到：一個人也許可以走得很快，但一群人可以走得更遠(yuǎn)。追求前沿技術(shù)創(chuàng)新，猶如翻越一座又一座險峰，登頂路上離不開伙伴同行。邁入AI時代，‘玲瓏’也將繼續(xù)攜手產(chǎn)業(yè)伙伴，為用戶提供更好的視頻體驗(yàn)，共赴AI萬象視界。”

“玲瓏”V560/V760應(yīng)運(yùn)而生——全能“六邊形戰(zhàn)士”，為AI時代各類視頻應(yīng)用提供強(qiáng)大核芯

超視頻時代，數(shù)據(jù)洪流奔涌而至，云、邊、端各側(cè)視頻海量生成。面對千差萬別的應(yīng)用場景，視頻處理需求也各不相同。例如，云端AI場景日趨復(fù)雜，多模型并行、高負(fù)載任務(wù)密集，對視頻質(zhì)量和視頻處理可靠性提出極高要求；云端與端側(cè)的視頻交互日益頻繁，從視頻直播到視頻會議，低延時編解碼技術(shù)也已成為保障實(shí)時體驗(yàn)的關(guān)鍵支撐。

安謀科技Arm China VPU產(chǎn)品總監(jiān)汪奕磊表示：“在如今AI與視頻相互賦能的時代，視頻處理正面臨前所未有的機(jī)遇和挑戰(zhàn)。我們推出的‘玲瓏’V560/V760是面向AI應(yīng)用的新一代VPU IP，將以卓越性能為AI時代的各類視頻應(yīng)用提供強(qiáng)大核芯，可以覆蓋云、邊、端全場景。”

作為VPU中的六邊形戰(zhàn)士，“玲瓏”V560/V760集六大特性于一身：

• 高性能：相比上一代產(chǎn)品，單核解碼性能提升100%，多核運(yùn)行并行度高。

• 高魯棒性：具有強(qiáng)大的錯誤處理能力，丟包率高至20%情境下仍可糾錯解碼。

• 高質(zhì)量低碼率：同等視頻碼率下，編碼質(zhì)量平均提升20%；同等編碼質(zhì)量下，視頻碼率平均降低20%；特定典型場景下碼率最大降低80%。

• 低延時：通過條帶級編解碼控制技術(shù)顯著降低編解碼延時，且編解碼控制更靈活。

• 多OS支持：驅(qū)動支持Linux/Android/Windows/RTOS等多OS，硬件支持多OS/虛擬化應(yīng)用。

• 信息安全：支持TrustZone內(nèi)容保護(hù)，高級Mosaic功能還提供完善的隱私保護(hù)。

“玲瓏”V560/V760現(xiàn)已獲得市場認(rèn)可，不僅源于其領(lǐng)先的技術(shù)產(chǎn)品，更離不開配套的支持和服務(wù)。汪奕磊談到，安謀科技Arm China提供高質(zhì)量交付和全生命周期支持，全面助力客戶產(chǎn)品研發(fā)與商業(yè)化落地，攜手產(chǎn)業(yè)邁向更清晰、更智能、更精彩的“玲瓏視界”。

研發(fā)特色賦能——積木式堆疊技術(shù)，推進(jìn)客戶敏捷開發(fā)與產(chǎn)品上市

面對云、邊、端視頻場景的多樣化與需求的多元化，視頻處理IP的靈活性正面臨前所未有的挑戰(zhàn)。安謀科技Arm China VPU研發(fā)總監(jiān)黃鑫博士表示：“‘玲瓏’V560/V760的核心優(yōu)勢在于采用了靈活可配置架構(gòu)，并融合積木式堆疊研發(fā)特色，這一設(shè)計對于高度碎片化的多媒體技術(shù)市場而言尤為重要，能夠支持客戶按需配置、敏捷創(chuàng)新。”

“玲瓏”V560/V760 VPU IP積木式堆疊技術(shù)

依托積木式堆疊技術(shù)，客戶無需重復(fù)開發(fā)底層，即可根據(jù)具體場景按需配置模塊，充分滿足多領(lǐng)域、多場景的應(yīng)用需求，從而大幅縮短新品研發(fā)周期，加速產(chǎn)品上市進(jìn)程。

整體來看，“玲瓏”V560/V760 VPU IP有五大技術(shù)優(yōu)勢：

• 采用靈活可配置的架構(gòu)：創(chuàng)新的多核處理架構(gòu)，支持多核同任務(wù)和多核異任務(wù)，滿足多樣化場景需求。

• 集成CAE先進(jìn)編碼技術(shù)：創(chuàng)新性實(shí)現(xiàn)CAE編碼技術(shù)，集成輕量化AI，能夠?qū)崿F(xiàn)“圖像語義分析-像素級預(yù)處理-碼率動態(tài)分配”的全鏈路智能優(yōu)化，編碼質(zhì)量大幅提升，視頻碼率顯著降低。

• 覆蓋H.266等主流編解碼標(biāo)準(zhǔn)：集成多格式視頻編解碼器，同時支持H.266標(biāo)準(zhǔn)的編解碼，以及各種主流視頻標(biāo)準(zhǔn)。

• 多配置全隔離的硬件運(yùn)行機(jī)制：硬件支持多OS虛擬化應(yīng)用場景，硬件支持視頻內(nèi)容安全訪問，滿足復(fù)雜應(yīng)用環(huán)境需求。

• 采用條帶級編解碼控制：通過靈活的條帶級編解碼控制技術(shù)，顯著降低編解碼延時。

“為應(yīng)對不斷推陳出新的AI技術(shù)與新興場景，未來‘玲瓏’VPU架構(gòu)將朝著AI端到端視頻編碼技術(shù)路徑加速演進(jìn)，逐步構(gòu)建起‘深度感知、全局最優(yōu)’的AI VPU訓(xùn)練框架，服務(wù)于更廣泛的‘AI+視頻’應(yīng)用場景。‘玲瓏’將持續(xù)賦能AI萬象，為各類AI應(yīng)用提供視頻技術(shù)支撐，助力客戶在群雄逐鹿的AI時代中贏得先機(jī)。”黃鑫博士補(bǔ)充道。

全場景賦能——覆蓋Edge AI、Physical AI與Cloud AI

“玲瓏”V560/V760 VPU IP可以滿足云、邊、端全場景領(lǐng)域?qū)σ曨l處理“高效率、高質(zhì)量、低能耗”的核心訴求，為各類視頻應(yīng)用提供技術(shù)支撐。

1

Edge AI領(lǐng)域

如手持?jǐn)z像設(shè)備、智能手機(jī)、Pad、AI PC、TV、邊緣服務(wù)器、線上會議等應(yīng)用場景，“玲瓏”V560/V760 VPU IP在確保系統(tǒng)高效運(yùn)行的同時，顯著降低功耗和芯片面積，并且大幅降低視頻碼率和處理延時，實(shí)現(xiàn)用戶體驗(yàn)、電池續(xù)航和芯片成本的最佳平衡。

2

Physical AI領(lǐng)域

如智能駕駛、智能座艙、機(jī)器人等應(yīng)用場景，“玲瓏”V560/V760 VPU IP支持多OS/虛擬化應(yīng)用，增強(qiáng)系統(tǒng)集成靈活性與安全性，降低跨平臺、多應(yīng)用的開發(fā)集成成本與風(fēng)險。

3

Cloud AI領(lǐng)域

如數(shù)據(jù)中心、視頻轉(zhuǎn)碼、AI服務(wù)器、云游戲等應(yīng)用中，“玲瓏”V560/V760 VPU IP可在保證數(shù)據(jù)準(zhǔn)確性的同時，實(shí)現(xiàn)高性能、高編碼質(zhì)量、高吞吐量、低延時的視頻處理。

現(xiàn)場特別設(shè)置了五大Demo主題專區(qū)，全面展示了“玲瓏”VPU IP的最新編解碼技術(shù)效果，新品特性與廣泛應(yīng)用的場景。

例如，現(xiàn)場演示了“玲瓏”V560/V760 CAE編碼的效果：在CAE的加持下，前處理過程中，可以智能識別到需要重點(diǎn)處理的敏感對象；同時同等視頻碼率下，編碼質(zhì)量平均提升20%；此外，同等編碼質(zhì)量下，視頻碼率平均降低20%，特定場景下碼率最大可降低80%。

現(xiàn)場還展示了8K解碼效果，在高性能開發(fā)板上，基于“玲瓏”V560/V760實(shí)時硬件解碼，完美實(shí)現(xiàn)8K30FPS超高清視頻流暢播放，以及搭載“玲瓏”V560/V760的運(yùn)動相機(jī)實(shí)時拍攝和成片效果，可以實(shí)現(xiàn)每一幀穩(wěn)定、不丟幀、不延遲。

更為重磅的是，“玲瓏”V560/V760 VPU IP現(xiàn)已完成首批客戶授權(quán)，客戶產(chǎn)品預(yù)計今年陸續(xù)量產(chǎn)，這進(jìn)一步完善了安謀科技Arm China VPU IP產(chǎn)品家族在Edge AI、Physical AI及Cloud AI領(lǐng)域的全場景布局。從視覺方案到賦能AI萬象，安謀科技Arm China正以持續(xù)的技術(shù)創(chuàng)新，為AI時代的視頻處理打造核芯。