凤凰彩票APP官方网站
凤凰彩票官方网站 国产交互式 3D 数字东谈主框架 SentiAvatar 专家开源 破解文生手脚艰难
凤凰彩票app
凤凰彩票app

凤凰彩票官方网站 国产交互式 3D 数字东谈主框架 SentiAvatar 专家开源 破解文生手脚艰难

凤凰彩票官方网站 国产交互式 3D 数字东谈主框架 SentiAvatar 专家开源 破解文生手脚艰难

【环球网科技报谈 记者 李文瑶】4月8日音问,近日,SentiPulse(念念维光谱)皆辘集国东谈主民大学高瓴东谈主工智能学院博士生团队,崇拜开源国内首个交互式3D数字东谈主框架——SentiAvatar,并同步开源配套3D数字东谈主变装模子SUSU及高质料汉文多模态对话手脚数据集SuSuInterActs,旨在顾问3D数字东谈主交互中手脚与语义脱节、神采僵硬、节拍错位等行业痛点。

恒久以来,leyu3D数字东谈主因手脚不当然、情感抒发缺失,易让用户堕入“恐怖谷”效应。其背后零落高质料汉文全身手脚数据、复合语义下手脚生成漂移及语音节拍错位等问题。

这次开源的SentiAvatar框架达成了多项时代梗阻:通过光学手脚捕捉构建的SuSuInterActs数据集,凤凰彩票包含2.1万段对话片断,总时长37小时,填补了汉文对话场景下3D数字东谈主高质料-手脚数据的空缺;自研手脚基础模子在超20万条异质手脚序列上磨练,升迁了复合语义贯通能力;提议“plan-then-infill”架构,将语义谈论与韵律脱手解耦,达成手脚与语音的精确对皆。

在SuSuInterActs和BEATv2数据集上凤凰彩票官方网站,SentiAvatar均达到刻下最优水平,手脚生成截止优于专家主流文生3D手脚模子。现在该框架已在GitHub开源,可欺诈于游戏交互、影视制作、机器东谈主等范围。

开云官方app下载