近日,聯(lián)發(fā)科攜手騰訊會(huì)議,共同宣布了一項(xiàng)創(chuàng)新合作的成果——專為視頻會(huì)議優(yōu)化的端側(cè)NPU虛擬背景功能,現(xiàn)已在搭載聯(lián)發(fā)科天璣系列旗艦芯片的終端設(shè)備上正式亮相。此次合作是雙方首次在芯片端側(cè)AI算力最大化方面展開(kāi)的軟硬件生態(tài)聯(lián)合探索,旨在為騰訊會(huì)議用戶帶來(lái)前所未有的智能會(huì)議體驗(yàn),同時(shí)也為行業(yè)樹(shù)立了軟硬件生態(tài)深度融合的新典范。
騰訊會(huì)議的虛擬背景功能,憑借其先進(jìn)的人像分割技術(shù),能夠在視頻會(huì)議中自動(dòng)辨識(shí)參會(huì)者,并將背景智能替換為用戶指定的圖像或視頻。該技術(shù)基于自建的多樣性數(shù)據(jù)集,能夠在各種應(yīng)用場(chǎng)景下實(shí)現(xiàn)精準(zhǔn)穩(wěn)定的人像分割,同時(shí)模型設(shè)計(jì)兼顧輕量化與高計(jì)算效率。無(wú)論用戶使用何種類型的終端設(shè)備,都能享受到流暢且精準(zhǔn)的背景替換效果。
為了充分發(fā)揮天璣旗艦芯片的AI算力優(yōu)勢(shì),聯(lián)發(fā)科與騰訊會(huì)議共同對(duì)端側(cè)AI人像分割模型進(jìn)行了深度優(yōu)化,不僅在GPU和NPU架構(gòu)上實(shí)現(xiàn)了協(xié)同提升,還顯著提高了處理速度和能效比。聯(lián)發(fā)科通過(guò)其天璣AI開(kāi)發(fā)套件NeuroPilot,為騰訊會(huì)議提供了從模型量化、轉(zhuǎn)換、編譯到集成的全方位工具鏈支持(SDK/API/document),極大地簡(jiǎn)化了基于AI的應(yīng)用程序開(kāi)發(fā)流程。
經(jīng)過(guò)雙方的緊密合作與優(yōu)化,騰訊會(huì)議在天璣9400旗艦芯片NPU上的運(yùn)行表現(xiàn)相較于傳統(tǒng)的CPU FP模式,性能提升了3.5至4倍,執(zhí)行時(shí)間縮短了6毫秒,同時(shí)降低了運(yùn)行功耗,延長(zhǎng)了設(shè)備續(xù)航時(shí)間,為用戶提供了更加流暢且精準(zhǔn)的虛擬背景體驗(yàn)。
聯(lián)發(fā)科最新一代旗艦芯片天璣9400集成了第八代AI處理器NPU 890,憑借強(qiáng)大的AI算力,能夠高效處理語(yǔ)音、圖像和視頻等復(fù)雜任務(wù)。天璣9400還配備了天璣AI智能體化引擎,支持端側(cè)AI應(yīng)用的廣泛部署。結(jié)合時(shí)域張量硬件加速、端側(cè)高畫(huà)質(zhì)視頻生成等前沿技術(shù),天璣9400在Stable Diffusion端側(cè)運(yùn)行的性能上實(shí)現(xiàn)了2倍的提升,讓用戶能夠輕松享受高分辨率生圖生成、端側(cè)動(dòng)圖和視頻創(chuàng)作等趣味功能。
聯(lián)發(fā)科表示,未來(lái),騰訊會(huì)議與聯(lián)發(fā)科將繼續(xù)深化軟硬件生態(tài)合作,共同探索更多創(chuàng)新功能,為用戶帶來(lái)更加便捷、智能的線上會(huì)議體驗(yàn)。目前,騰訊會(huì)議已經(jīng)在天璣9000、天璣9200、天璣9300以及天璣9400系列芯片賦能的多個(gè)終端設(shè)備上上線了端側(cè)NPU版本的虛擬背景功能。聯(lián)發(fā)科誠(chéng)邀廣大天璣用戶下載騰訊會(huì)議App,親身體驗(yàn)AI技術(shù)加持下的高效會(huì)議模式。
此次聯(lián)發(fā)科與騰訊會(huì)議的合作,不僅是一次基于實(shí)際業(yè)務(wù)場(chǎng)景、以用戶體驗(yàn)為核心的重要移動(dòng)端AI算力合作,更是雙方攜手推動(dòng)行業(yè)向更高效、更智能方向發(fā)展的有力證明。通過(guò)此次合作,雙方不僅為未來(lái)功能的拓展與創(chuàng)新奠定了堅(jiān)實(shí)基礎(chǔ),也展現(xiàn)了共同推動(dòng)行業(yè)進(jìn)步的責(zé)任與擔(dān)當(dāng)。