FaceNinja

指南 · VTuber · 免费创作者套件

如何用自己的脸成为 VTuber。

大多数 VTuber 使用动漫风格或手绘角色。你也可以用一个写实的 3D 版本的自己来直播:你动它就动,你打字它就说话。本指南介绍如何选择、需要什么设备,以及用免费的 FaceNinja 创作者套件从一张照片走到开播的步骤。

先选择一种风格

三种 VTuber 形象
风格怎么做出来在什么里运行
2D(Live2D)分层绘制的画稿,由画师绑定能读取 Live2D 模型的 VTuber 应用
3D 动漫(VRM)在免费的角色编辑器里设计,或委托画师制作能读取 VRM 的 VTuber 应用
写实 3D(MetaHuman)用照片生成你的头部,再做成 MetaHumanUnreal Engine,用 OBS 采集

本指南讲的是第三种。用你的脸做的写实形象不是匿名的:如果你不想被认出来,请选择手绘角色或原创角色。

你需要什么

  • 一台能运行 Unreal Engine 5.8 的电脑。 Windows 11 配 NVIDIA RTX 3070 或更好的显卡,或者 M2 Max 或更新芯片、32 GB 内存的 Mac,运行起来比较从容;配置低一些也能用,只是帧率更低。
  • 一种追踪面部的方式。 iPhone 12 或更新机型配免费的 Live Link Face 应用,或者一个摄像头。
  • 一个能使用 MCP 的编程智能体。 它会用七个提示词为你设置好 Unreal,你不用写代码。
  • OBS 和一条虚拟音频线。 两者都免费;第一个提示词会和你一起检查并安装它们。

从一张照片到开播

  • 一位合成女性的肖像照一张 AI 生成的合成人物照片。
  • 用这张照片生成的 3D 头部FaceNinja 用它生成的头部。
  • 这个头部作为 MetaHuman 形象,置于一个小直播间中这个头部在 Unreal 5.8 创作者套件的房间里,成为一个会说话的 MetaHuman。
  1. 生成你的头部

    拍一张清晰的正面自拍,在 FaceNinja 里生成你的头部。下载它的 MetaHuman ZIP。只用你自己的脸,或已书面同意的成年人的脸。

  2. 下载创作者套件

    套件按 MIT 许可免费提供。解压后,在该文件夹里打开你的编程智能体。

  3. 粘贴七个提示词

    一次一个,等每个运行完再贴下一个。它们会安装所需软件、把智能体连接到 Unreal、搭建一个小直播间、把你的头部作为 MetaHuman 导入、连接 iPhone 或摄像头、设置打字说话,并让 OBS 对准窗口。每一步结束时都有可以检查的结果。

  4. 追踪你的脸

    用 iPhone 上的 Live Link Face 或一个摄像头,你的形象会实时模仿你的表情。

  5. 说话

    输入一行字,形象就会说出来,并带口型同步:免费的 Kokoro 语音在你的电脑上运行,Chatterbox 可以凭一段简短录音使用你自己的声音,ElevenLabs 则使用你自己的账号。你也可以照常对着麦克风说话。

  6. 在 OBS 里开播

    在 OBS 里采集 1920×1080 的窗口,想用自己的背景时加上绿幕,然后像平常一样推流到 YouTube 或 Twitch。

要花多少钱

套件、Unreal Engine、MetaHuman Creator、Live Link Face、OBS 和本地语音都是免费的。你用积分支付 FaceNinja 头部的费用;只有在你选择使用时,才需要为云端语音或付费口型同步插件付费。

关于用自己的脸当 VTuber 的问题

01成为 VTuber 要花多少钱?
走这条路线,软件都是免费的;付费方案开放后,你的头部需要 1,500 积分,另外你需要一台性能足够的电脑。在那之前,可以先用一个免费的示例头部试一遍这些步骤。
02我需要 iPhone 吗?
不需要。摄像头也可以;配 Live Link Face 的 iPhone 能追踪到更多面部细节。
03可以用别人的脸吗?
不可以。请用你自己的脸和声音、原创角色,或已书面同意的人。冒充他人可能违法,也可能违反 YouTube、Twitch 和 Epic 的规定。
04能在 Mac 上用吗?
能,需要 M1 或更新芯片的 Mac 和 Unreal Engine 5.8。

你的脸,变成写实的 VTuber 形象。

不用写代码。每个提示词的结尾,都有一个你可以检查的结果。