如何成为虚拟主播?Live3D教你玩虚拟偶像

提到了虚拟锚。去年,我们创造了一个3D虚拟偶像——虚拟歌姬,它于3月31日在B站首次发布。事实上,要成为一名3D虚拟主持人,除了以下几点别无他物:3D模型、中年人和一套支持3D虚拟偶像的实时动画的技术。那么它们是如何结合的呢?

yousa

每个虚拟主持人背后都有一个负责动作的表演者和一个负责配音的履历他们当然可以是同一个人

yousa

1:动作表演+表情匹配

要求表演者佩戴动作捕捉设备。然后,对于每个动作,动作捕捉后台将记录表演者的动作数据。表演完成后,运动数据将保存在文件中。我们将这些运动数据与手动k-good表达式数据结合起来,通过unity输出序列,此时的运动将携带表达式。最后,导出绿色屏幕版本的动画视频文件这是我们观看的虚拟偶像动画的雏形。如果

是直播,一般来说,只要解决了面部动画,虚拟主持人只需要用上半身做直播按照传统的方法,表情动画是通过手动K表情来解决的。然而,手动K-expression是一个后期操作,并且实时直播。这种方法是不现实的,除非它被记录和广播。在后期阶段,有表情的动画被编辑成录制和播放的视频。因此,实时表达,这个问题需要解决


2:配音

配音文件可以通过在录音室单独观看动作素材的配音来获得,或者在表演过程中,可以在戴上耳机进行动作时将声音传输到录音设备进行存储。这个音频文件是虚拟主持人的声音

ok ~现在我们有了绿屏动作视频文件和配音文件以上资料通过AE或Pr进行编辑加工,即虚拟偶像~

的每日视频。然而,谈到技术,并不是所有的人都能同时学习这些专业的艺术工具。为了便于小白更好地解决这些技术问题,我们团队在与其他虚拟主持人沟通后,为小白开发了一个方便的工具来轻松地做3D虚拟主持人- Live3D。通过愚蠢的操作,我们可以简单地解决上述各种复杂的技术问题。

1:首先,模型

(1)Live3D有自己的云3D模型库。其中的型号可以免费使用

(2)来支持定制揉捏。你可以通过揉捏功能(揉捏脸、换衣服、揉捏身体)获得一个新的模型

(3)Live3D支持导入外部3D模型,目前支持FBX、PMX、VRM格式您可以导入您的模型并开始虚拟锚之路。

yousa

显示自定义揉捏功能

2:第二,在面部表情方面,前面提到的方法使用“手动K框”方法,既困难又费时,同时与个人能力有很强的联系。类似地,面部表情需要与动作结合,并且还需要通过统一得到的合成序列

。对于面部表情:Live3D的解决方案——“面部捕捉”

面部捕捉实现模式

(1)是通过计算机摄像头捕捉的

(2)由iPhone和以上手机摄像头拍摄

具体过程:打开Live3D人脸捕捉按钮->将相机对准你的脸->你会做什么表情,Live3D图片中的人物会做什么表情(包括眨眼、假唱、摇头)

PS:假唱的准确度可以达到你说的每个单词假唱的准确度

yousa

人脸捕捉演示

3:动作捕捉数据要求unity在最终将动作数据和表情数据转换为视觉视频之前对unity有一定的熟悉动作数据Live3D的

解决方案是:预制动作库+动作捕捉界面+外部动作导入

(1)预制动作库有大量的云动作数据。通过按下计算机键盘上某个键的动作(设置键盘上某个键的动作,将Live3D上的动作拖到Live3D上的键盘上),角色将做出相应的动作。

(2)运动捕捉界面目前支持一套运动捕捉设备和noelton Hi5手套来捕捉手部细节。使用过程:在链接动态捕捉后,在Live3D上打开黑色动态捕捉黑色Hi5手套按钮您可以在Live3D上看到您使用动作捕捉所做的动作。在进行动作之前,点击录制屏幕并选择绿色屏幕背景,然后您可以录制刚刚制作的动作视频。直接结果是绿屏视频文件,不再像过去那样需要unity处理。

(3)导入外部操作。除了支持外部模型的导入,我们还支持外部动作的导入。您可以将自己最喜欢的舞蹈动作、日常生活动作和动作捕捉动作导入到Live3D中,并将其应用到直播和动画功能中< br>

yousa

试点演示

最后,介绍一下Live3D live+小动画的两个核心功能

(1)Live3D live

yousa

live Ji live方法

(2) Live3D live动画


ok ~今天的介绍到此结束

对Live3D感兴趣的学生请注意我的号码(Live3D)

|目前,学生团圆游每周直播已经开始使用Live3D ~

。欢迎体验* _ *

大家都在看

相关专题