其实,做3D虚拟主播 无外乎以下几点:
一个3D模型,一个中之人,一套支持3D虚拟偶像做直播动画的技术。
那么它们是如何结合的呢?
每一个虚拟偶像的背后都有一位表演者负责做动作,一位CV负责配音。当然他们可以是同一个人。
1:动作表演+表情匹配
需要表演者穿上动作捕捉设备,然后,每做一个动作,动捕后台都会记录下表演者的动作数据,表演完成,动作数据将会保存在一个文件里,我们将这些动作数据,同手动K好的表情数据,通过unity合成输出序列,此时的动作就携带有表情了。最后,导出绿幕版的动作视频文件。这些动作,就是我们在观看虚拟偶像节目中,虚拟主播表演的那些动作。
2:配音
配音文件的获取,可以单独在录音棚看着动作素材配音,也可以在表演过程中,带上耳麦边做动作边将声音传输到录音设备中保存。这个音频文件就是虚拟主播的配音。
好啦~现在我们有绿幕的动作视频文件我,也有配音文件。通过AE或者Pr,将以上素材剪辑加工,就是我们看到的虚拟偶像日常视频啦~
————————–
同理,虚拟偶像做直播,只用上半身,主体为面部表情,按传统的 *** ,表情需要手动K帧。
不过以上,提及到技术层面,并非所有人都能一时学会这些专业的美术工具。为了方便小白用户更好的解决这些技术问题,我们团队和其他做虚拟主播的小伙伴沟通后,研发一款方便小白用户轻松做3D虚拟主播的工具—-Live3D 通过傻瓜式操作,简单解决上述说的各种复杂技术问题。
1:首先提到模型
(1)Live3D有自己的云端3D模型库,里面的模型均可 ***
(2)支持自定义捏人,你可以通过捏人功能(捏脸,换装,捏身体)获得一个新的模型。
(2)Live3D支持导入外部3D模型,目前支持FBX,PMX,VRM格式。你可以将你的模型导入,开启虚拟主播之路。
2:其次,提到面部表情,以往的 *** ,上述提到用“手动K帧”的方式,难度大,耗时长,同时和个人能力有很强的挂钩。同样面部表情需要和动作结合,也需要通过unity 导出合成序列
针对面部表情:Live3D的解决方案–“面部捕捉”
面部捕捉实现的方式
(1)通过电脑摄像头捕捉。
(2)通过iphoneX 及以上版本的手机摄像头捕捉。
具体过程:打开Live3D的面部捕捉按钮—->将摄像头对准自己的面部—–>你做什么表情,对应Live3D画面中人物做什么表情(包括眨眼,对口型,摇头)
PS:对口型的准确度可以达到你说的每个字都能准确对上口型。
3:动作捕捉数据 需要过unity 需要对unity 有一定的熟悉度 才可以最终将动作数据,表情数据 转化为可视化视频。
针对动作数据 Live3D的解决方案是:预制动作库+动作捕捉接口+导入外部动作
(1)预制动作库 有海量云端动作数据,通过按下动作对于电脑键盘上的某个键(设置动作对于键盘某个键,通过在Live3D上拖动动作到Live3D上的小键盘),人物就会做出相应的动作。
(2)动捕接口 目前支持诺亦腾一套动捕设备及诺亦腾Hi5手套,捕捉手部细节动作。使用过程:链接动捕后,在Live3D上开启Noitom动捕 Noitom Hi5手套 按钮 。可以在Live3D上看见你用动捕做出的动作,在做动作前 点击录屏,选择绿幕背景,即可录制刚才你做的动作视频,直接出来就是绿幕视频文件,不再像过去需要过unity处理。
(3)导入外部动作,除了支持导入外部模型,我们还支持导入外部动作,你可以把你喜欢的舞蹈动作,日常生活动作,动捕动作导入到Live3D里,运用在直播和动画功能上。
北京商报讯(记者 王维祎)11月4日,京东发布数据,“双11”启动后,“京东服务+”线上销售额同比增长133%。其中,衣物洗护订单较今年“6·18”增长近6倍,家电清洗订单同比增长224%,手机维修订...
找网络黑客被骗7000相关问题 黑客军团第二季解读相关问题 黑客是学什么的 怎么把电话号挂网上骚扰他(电话骚扰入驻天猫)...
序 这儿有必要得说一下==和===这俩货的重要性。==是比较运算,它不会去查看条件式的表达式的类型===是恒等,它会查看查表达式的值与类型是否持平NULL,0,”0″,array()运用==和fals...
高档小学妹北京市商务接待守候小学妹吧【金景玉】 今日给大伙儿共享的內容是“高档小学妹北京市商务接待守候小学妹吧【金景玉】”,我是金景玉,来源于益阳市,2020年30岁,做为岗位:中山大学学员,我喜爱我...
本文目录一览: 1、看门狗和刺客信条是同一个世界观吗 2、如何评价育碧游戏《看门狗2》? 3、游戏看门狗的剧情好吗? 4、看门狗和刺客信条真的是同一个公司出的么 5、介绍一个自由度高的...
2020年黑客送QQ号(黑客免费送qq号密码)(tiechemo.com)一直致力于黑客(HACK)技术、黑客QQ群、信息安全、web安全、渗透运维、黑客工具、找黑客、黑客联系方式、24小时在线网络黑...