9月13日,以“OpenVINO™ 加速 PC 及小型設(shè)備 LLM 性能”為主題的Intel OpenVINO™ DevCon中國系列工作坊2024活動(dòng)在北京舉行,相芯科技作為Intel合作伙伴受邀出席并在會(huì)上分享“通過使用OpenVINO™ 工具套件,讓數(shù)字人基于Intel iGPU和獨(dú)立GPU 進(jìn)行性能優(yōu)化和推理加速的實(shí)踐應(yīng)用”。
相芯科技市場總監(jiān)Lisa表示:“目前依賴高算力AI能力的數(shù)字人應(yīng)用大都基于云服務(wù),成本較高,相芯一直在探索更低成本的部署方案,以降低用戶使用門檻,OpenVINO™ 工具套件在數(shù)字人低成本部署探索方面有著出色的表現(xiàn),相芯與Intel的合作可謂一拍即合�！�
OpenVINO™是英特爾基于自身現(xiàn)有的硬件平臺(tái)開發(fā)的一種可以加快高性能計(jì)算機(jī)視覺和深度學(xué)習(xí)視覺應(yīng)用開發(fā)速度的工具套件。旨在通過模型、優(yōu)化、部署三個(gè)簡單的開發(fā)步驟,實(shí)現(xiàn)深度學(xué)習(xí)模型的優(yōu)化和“一次編寫,任意部署”,無論是在CPU(中央處理器)、GPU(圖形處理器單元)、NPU(神經(jīng)網(wǎng)絡(luò)處理器)還是FPGA(可編程邏輯器件)上,都能實(shí)現(xiàn)模型的快速落地部署,從而加速深度學(xué)習(xí)模型推理工作流程。
在會(huì)上,Lisa介紹了相芯基于OpenVINO™ 2024.0版本打造數(shù)字人和AR視頻特效的整體開發(fā)框架。Lisa表示,OpenVINO™支持多種格式模型,通過OpenVINO™的優(yōu)化工具可以對這些模型進(jìn)行轉(zhuǎn)換和壓縮,在不降低效果的情況下,減少模型尺寸。同時(shí),在加載和編譯模型的時(shí)候,借助OpenVINO™自帶的編譯選項(xiàng)還可以快速進(jìn)行編譯優(yōu)化。
“為了更好地平衡性能和功耗,我們還可以將多個(gè)模型分別放在CPU、GPU、NPU上進(jìn)行推理,如GPU適合做渲染流水線AI,所以我們的數(shù)字人渲染在GPU上進(jìn)行推理,NPU專用低功耗AI引擎可以用于持續(xù)性AI處理任務(wù),我們的AR視頻特效就跑在NPU上,可以在直播和視頻會(huì)議中實(shí)現(xiàn)更好的實(shí)時(shí)美顏效果�！�
OpenVINO™為開發(fā)者提供了更為強(qiáng)大的性能支持和擴(kuò)展能力,助力開發(fā)者高效利用AI加速技術(shù)。相芯基于OpenVINO™ 2024.0版本打造的數(shù)字人和AR視頻特效也在會(huì)上亮相,吸引了眾多與會(huì)者關(guān)注討論。
Lisa表示,以前大部分?jǐn)?shù)字人AI應(yīng)用只能在云GPU上跑,需要依賴高算力顯卡如4090、A100等,成本較高。但基于OpenVINO™,相芯不僅能讓AI數(shù)字人應(yīng)用在PC端流暢運(yùn)行,更能在配置集成顯卡的普通輕薄筆記本上運(yùn)行,極大降低了數(shù)字人應(yīng)用的資源損耗和成本,為中小型企業(yè)和個(gè)人用戶提供了更多的可行性。
同時(shí),基于 OpenVINO™打造AR視頻特效在各項(xiàng)美顏指標(biāo)上也都有著出色的表現(xiàn),不僅可以精準(zhǔn)檢測出雀斑、痘痘等瑕疵并有效去除,在保障膚色均勻同時(shí),還可以對特征痣和皮膚的肌理感進(jìn)行保留,讓美顏效果真實(shí)自然,避免“假面感”。
最后,Lisa透露,相芯科技正在與Intel展開深度合作,探索將AI數(shù)字人和AR視頻特效技術(shù)嵌入到設(shè)備底層,這不僅能讓更多合作伙伴受益,還能讓普通用戶通過設(shè)備原生的技術(shù)能力,在直播、社交等應(yīng)用場景中獲得更好的體驗(yàn)。她最后補(bǔ)充道:“我們期待與Intel及更多行業(yè)伙伴攜手合作,探索數(shù)字人應(yīng)用的更多可能性,為各行業(yè)打造新質(zhì)生產(chǎn)力創(chuàng)造更多可能性!”
【免責(zé)聲明】【廣告】本文僅代表作者本人觀點(diǎn)，與和訊網(wǎng)無關(guān)。和訊網(wǎng)站對文中陳述、觀點(diǎn)判斷保持中立，不對所包含內(nèi)容的準(zhǔn)確性、可靠性或完整性提供任何明示或暗示的保證。請讀者僅作參考，并請自行承擔(dān)全部責(zé)任。郵箱：news_center@staff.hexun.com
最新評論