9月13日,以“OpenVINO? 加速 PC 及小型設備 LLM 性能”為主題的Intel OpenVINO? DevCon中國系列工作坊2024活動在北京舉行,相芯科技作為Intel合作伙伴受邀出席并在會上分享“通過使用OpenVINO? 工具套件,讓數字人基于Intel iGPU和獨立GPU 進行性能優化和推理加速的實踐應用”。

相芯科技市場總監Lisa表示:“目前依賴高算力AI能力的數字人應用大都基于云服務,成本較高,相芯一直在探索更低成本的部署方案,以降低用戶使用門檻,OpenVINO?工具套件在數字人低成本部署探索方面有著出色的表現,相芯與Intel的合作可謂一拍即合。”

OpenVINO?是英特爾基于自身現有的硬件平臺開發的一種可以加快高性能計算機視覺和深度學習視覺應用開發速度的工具套件。旨在通過模型、優化、部署三個簡單的開發步驟,實現深度學習模型的優化和“一次編寫,任意部署”,無論是在CPU(中央處理器)、GPU(圖形處理器單元)、NPU(神經網絡處理器)還是FPGA(可編程邏輯器件)上,都能實現模型的快速落地部署,從而加速深度學習模型推理工作流程。

在會上,Lisa介紹了相芯基于OpenVINO? 2024.0版本打造數字人和AR視頻特效的整體開發框架。Lisa表示,OpenVINO?支持多種格式模型,通過OpenVINO?的優化工具可以對這些模型進行轉換和壓縮,在不降低效果的情況下,減少模型尺寸。同時,在加載和編譯模型的時候,借助OpenVINO?自帶的編譯選項還可以快速進行編譯優化。

“為了更好地平衡性能和功耗,我們還可以將多個模型分別放在CPU、GPU、NPU上進行推理,如GPU適合做渲染流水線AI,所以我們的數字人渲染在GPU上進行推理,NPU專用低功耗AI引擎可以用于持續性AI處理任務,我們的AR視頻特效就跑在NPU上,可以在直播和視頻會議中實現更好的實時美顏效果。”

OpenVINO?為開發者提供了更為強大的性能支持和擴展能力,助力開發者高效利用AI加速技術。相芯基于OpenVINO? 2024.0版本打造的數字人和AR視頻特效也在會上亮相,吸引了眾多與會者關注討論。

Lisa表示,以前大部分數字人AI應用只能在云GPU上跑,需要依賴高算力顯卡如4090、A100等,成本較高。但基于OpenVINO?,相芯不僅能讓AI數字人應用在PC端流暢運行,更能在配置集成顯卡的普通輕薄筆記本上運行,極大降低了數字人應用的資源損耗和成本,為中小型企業和個人用戶提供了更多的可行性。

同時,基于 OpenVINO?打造AR視頻特效在各項美顏指標上也都有著出色的表現,不僅可以精準檢測出雀斑、痘痘等瑕疵并有效去除,在保障膚色均勻同時,還可以對特征痣和皮膚的肌理感進行保留,讓美顏效果真實自然,避免“假面感”。

最后,Lisa透露,相芯科技正在與Intel展開深度合作,探索將AI數字人和AR視頻特效技術嵌入到設備底層,這不僅能讓更多合作伙伴受益,還能讓普通用戶通過設備原生的技術能力,在直播、社交等應用場景中獲得更好的體驗。她最后補充道:“我們期待與Intel及更多行業伙伴攜手合作,探索數字人應用的更多可能性,為各行業打造新質生產力創造更多可能性!”