欢迎光临散文网 会员登陆 & 注册

AI智能体小镇 - 梦中的西部世界开发记录.4

2023-08-18 21:55 作者:小智同学来了  | 我要投稿

小镇的前端部分,我们计划用Unity + ReadyPlayerMe + Motionverse来完成,因为我们一直在自己做Motionverse的落地Demo,前期已经有了基础框架,在这个基础上,几天时间,前端框架已经基本做完了。

做为一个开发团队,我们也有着多年的游戏、元宇宙世界开发经验。在经历了众多数字人研发和项目后,我们发现在Unity引擎下做开发,配合ReadyPlayerMe或者Vroid平台的角色, 和Motionverse真的是绝配,驱动数字人搞交互,开发的效率绝对拉满。Motionverse全面支持RPM和VRoid平台的角色,快速拥有的角色,可以无缝接入到驱动中,并且迅速封装成一个还不错的智能体。前后不会超过半个小时,绝对高效。做数字人、元宇宙的开发者,可以专注测试这套无敌组合。

我们今天先把这套可独立运行的前端开源在了github上,这套虽然还没有和斯坦福智能小镇完全连通,但已经俨然是一个很有意思的智能体了。用户可以自由移动在村庄中,和每一个NPC角色,进行交谈对话。NPC角色,会根据相应的人设,进行设置的回答。

我们接入了微软的语音识别,这块在中英文方面,都有很好的识别效果。大语音模型,直接使用了GPT3.5 的接口。有了回复回来的文本,那剩下的事情,就交给强大的Motionverse了,设置好动作风格,声音音色,NPC就就可以轻松完成开口说话了。

需要开源代码地址的同学,可以加我威信联系哦 xiaozhi6020

大家把小星星点亮了~ 这套Motionverse的应用Demo,其实覆盖了数字人应用的大部分流程和场景,也聚集了我们团队很多研发经验,欢迎大家测试和二次开发使用。



AI智能体小镇 - 梦中的西部世界开发记录.4的评论 (共 条)

分享到微博请遵守国家法律