想要一个虚拟角色

准备自己从基础开始设计制作一个虚拟角色共视频聊天或以后玩 VRChat 使用。之后如果有进度且有相关的博文,也会在此更新。

企划开始时间:2018 年 11 月 28 日

⚠️ 该项目正在进行

咕咕咕咕咕

第一步:变声器的编写

要尝试写一个声音模仿的程序,因为普通的变声器无法变出有真实感的人声。 相关概念:voice cloning、voice impersonation。

2018.11.28 更新

相关论文:

  1. Voice Impersonation using Generative Adversarial Networks (opens new window)
  2. Neural Voice Cloning with a Few Samples (opens new window)
  3. Can we steal your vocal identity from the Internet?: Initial investigation of cloning Obama's voice using GAN, WaveNet and low-quality found data (opens new window)

第二步:角色的绘制

画画什么的,描描线还行,自己画感觉比较难,所以也是一项比较艰巨的任务。

第三步:Live 2D 的制作

把人设图转化成 Live 2D 模型,据说 Live 2D 的配置比较反人类。

第四步:虚拟摄像头、声卡的编写

在 Mac/Linux 下实现虚拟摄像头和虚拟声卡。

第五步:表情、肢体识别

这个应该有很多现有的库或者软件,找找看吧。

第*步:3D 模型的制作

这个比较难,也不是很想学,咕咕咕

@Aeonni 写于2018.11.28

转载请注明出处