想要一个虚拟角色
准备自己从基础开始设计制作一个虚拟角色共视频聊天或以后玩 VRChat 使用。之后如果有进度且有相关的博文,也会在此更新。
企划开始时间:2018 年 11 月 28 日
⚠️ 该项目正在进行
咕咕咕咕咕
第一步:变声器的编写
要尝试写一个声音模仿的程序,因为普通的变声器无法变出有真实感的人声。 相关概念:voice cloning、voice impersonation。
2018.11.28 更新
相关论文:
- Voice Impersonation using Generative Adversarial Networks (opens new window)
- Neural Voice Cloning with a Few Samples (opens new window)
- Can we steal your vocal identity from the Internet?: Initial investigation of cloning Obama's voice using GAN, WaveNet and low-quality found data (opens new window)
第二步:角色的绘制
画画什么的,描描线还行,自己画感觉比较难,所以也是一项比较艰巨的任务。
第三步:Live 2D 的制作
把人设图转化成 Live 2D 模型,据说 Live 2D 的配置比较反人类。
第四步:虚拟摄像头、声卡的编写
在 Mac/Linux 下实现虚拟摄像头和虚拟声卡。
第五步:表情、肢体识别
这个应该有很多现有的库或者软件,找找看吧。
第*步:3D 模型的制作
这个比较难,也不是很想学,咕咕咕
@Aeonni 写于2018.11.28
转载请注明出处