欢迎光临散文网 会员登陆 & 注册

小K直播姬:虚拟形象实时捕捉工具

2021-11-27 11:05 作者:果核剥壳  | 我要投稿

近来虚拟主播越来越流行,像在手机上的哔哩哔哩剪辑工具必剪,抖音剪映里的魔法变身等都推出了自家的虚拟人物的功能。

对于不想出境的视频制作者来说不露脸就可以丰富人设形象。从大环境来看,什么英雄联盟的虚拟歌姬,抖音的柳夜熙,还有苹果上的“拟我”,都在构建一个虚拟,可以自由修改的形象。

在某些平台上,还专门有虚拟主播的分区,这可不算是小众人群的圈地自萌,就连电视台也在尝试用虚拟主播来代替真人播报新闻,上面动图是新华社的。

下面是撒贝宁的。

还有下面这种让人有点“恐怖谷”效应的版本。

就在最近的24号,中央电视台也推出了手语AI。

这样的技术也挺火,像是Github上一个非常赞的项目-KalidoKit,就是可以做到动作识别并控制虚拟人物。

但是这样的技术通常需要用到人脸识别,动作识别甚至是机器学习,普通人想要体验一下还真的不容易,之前有款只是把真人转成动漫的软件,也由于太受欢迎官方服务器都瘫痪了。

在哔哩哔哩上,有的UP主开始玩起了一款小众的虚拟形象工具-小K直播姬。号称只需要一个摄像头就能完成动作跟踪,还能对动漫角色捏脸和分享,官方的例子里,做到像下面这样的双手交叉也能识别,还支持60帧。

最夸张的是这款软件在介绍里写着,免费试用,免费商用!免费导入,免费建模,后期还会开放模型交易,甚至移动端都在路上了,好家伙!虽然现在只支持Windows系统,步子已经起飞了,想看看这葫芦里卖的是什么药,于是下载一个体验一番,看看现在的技术是否真的这么厉害。

看介绍说只用摄像头就可以完成工作,也尝试了使用软件连接手机,看看能不能把摄像头都省了,直接用手机的摄像头,结果发现手机的摄像头机OBS能在其他软件里使用,这个小K直播姬里识别不出来。

后来在官方的评论也看到这款软件不支持手机作为虚拟摄像头。

但是!

在22号测试的,结果就在24号的晚上,这款软件的微信消息推送说支持虚拟摄像头头!那不得给大家分享软件都整上。


文末提供其他两款安卓的虚拟摄像头软件的下载,用上之后,手机就可以当电脑摄像头使用了。需要注意先在手机打开“开发者模式”哦。一般的安卓手机在系统设置里,找到手机的系统版本信息,多次点击系统号就能打开,然后在设置中搜索开发者模式的关键字就行。

无他伴侣对有线连接场景比较好

DroidCamX对无线连接比较好

选择一款下载,电脑端和手机端都要安装软件。

按照提示正常安装即可,没有需要特别说明的点。

之后就能使用了

连接成功后记得在手机软件里切换成后置摄像头,前置摄像头会提示像素不足。

对了,打开软件后进行初始化,如果初始化失败就需要去更新一下显卡驱动,由于使用到了CUDA技术,A系列的显卡暂时还不支持,在进入软件后会播放使用介绍。

可以切换场景,换装和捏脸。男性角色会在月底上线。

在设置里面打开高帧,实际使用当中感觉还是可以的,手指动作也能跟上,玩剪刀石头步是没有问题了,距离自带的摄像头太近的话,手部交叉会出现穿模和抖动。

然后就能实现下面这种效果,比起一些只能动头部的软件要好得多。

这个小K直播姬采用的是视频动捕实时渲染,不用穿戴设备即可实现日常3D动捕直播。在官网还有另一套捕捉系统,把视频直接生成可用的捕捉文件。

也无需任何专业设备和场地,上传视频即可下载bip和fbx文件,支持任意视频(自拍视频,第三方视频)好家伙,自己拍的视频都可以,这就不得不好奇一下这家公司以前是做啥的了。

根据天眼查的资料显示,可以查到其创始人梅嵩(原蓝港互动SVP,「王者之剑」系列手游制作人),核心团队拥有超过16年研发经验,在几年前就已经在着手这套系统,还用于《一起来捉妖》《完美世界》相关的内容制作,原来是老手艺人了。


去看了一下评论,大家也玩得很奔放。


现在的年轻人玩得真花!

小K直播姬和虚拟摄像头软件:

https://www.123pan.com/s/HQeA-ON1Sh

小K直播姬:虚拟形象实时捕捉工具的评论 (共 条)

分享到微博请遵守国家法律