當前位置:聚美館>智慧生活>心理>

ai虛擬人的原理

心理 閱讀(6.5K)
ai虛擬人的原理

最近元宇宙的概念越來越火。虛擬人技術是其中重要的組成部分。 其原理是透過視頻來捕捉人臉,並且將人的面部動作同步到人物身上。人們只需要一個攝像頭就可以製造出一個生動活潑的虛擬形象了。

虛擬數字人

虛擬數字人系統一般情況下由人物形象、語音生成、動畫生成、音視頻合成顯示、交互等5個模組構成:

人物形象根據人物圖形資源的維度,可分爲 2D 和 3D 兩大類,從外形上又可分爲卡通、 擬人、寫實、超寫實等風格

語音生成模組和動畫生成模組可分別基於文字生成對應的人物語音以及與之相匹配的人 物動畫

音視頻合成顯示模組將語音和動畫合成視頻,再顯示給用戶

交互模組使數字人具備交互功能,即透過語音語義識別等智能技術識別用戶的意圖,並根據用戶當前意圖決定數字人後續的語音和動作,驅動人物開啓下一輪交互。

ai虛擬人的原理

AI本質上是使用人工神經網絡對人腦進行的模擬,旨在替代人們大腦中的生物神經網絡。由於每個任務對芯片的要求不同,所以可以使用不同的AI芯片進行訓練和推理。

從技術架構來看,AI芯片可以分爲四大類:通用性芯片(GPU,特點是具備通用性、性能高、功耗高)、半定製化芯片(FPGA,特點是可編程、功耗和通用性一般)、全定製化芯片(ASIC,特點是不能擴展、性能穩定、功耗可控)和類腦芯片(特點是功耗低、響應速度快)