項(xiàng)目簡(jiǎn)介AniTalker是一個(gè)開源項(xiàng)目,它利用靜態(tài)照片和音頻文件來創(chuàng)造動(dòng)態(tài)的面部說話視頻。AniTalker采用了一種通用的運(yùn)動(dòng)表示方法。這種創(chuàng)新的表示方法有效地捕捉了廣泛的面部動(dòng)態(tài),包括微妙的表情和頭部動(dòng)作。AniTalker通過兩種自監(jiān)督學(xué)習(xí)策略增強(qiáng)了運(yùn)動(dòng)描述:第一種策略是通過同一身份內(nèi)的源幀重建目標(biāo)視頻幀來學(xué)習(xí)微妙的運(yùn)動(dòng)表示;第二種策略是使用度量學(xué)習(xí)開發(fā)身份編碼器,同時(shí)積極減少身份和運(yùn)動(dòng)編...