VRChatにフェイストラッキングを送信する

1-1. OSCを有効化する

VRChatはデフォルトでOSC受信が無効になっています。ゲーム内メニューから有効化してください。

1. VRChatを起動してワールドに入る
2. Quickメニューを開き Options → OSC を開く
3. 「Enabled」 をONにする

1-2. VRCFaceTracking対応アバターを使う

VRChatのアバターには VRCFaceTracking 対応の表情パラメータが組み込まれている必要があります。対応していないアバターでは、キャプチャーアプリからデータを送っても何も起きません。

2-1. カメラを開始する

1. キャプチャーアプリを起動する
2. 「カメラ」「解像度」「FPS」を選択して「カメラを開始」を押す
3. プレビューに自分が映ったら、カメラの正面に立って 1〜2秒静止 する（初回キャリブレーション）

2-2. VRChat OSC送信をONにする

1. キャプチャーアプリの「VRC OSC Port」が 9000 になっていることを確認
2. 「VRChat OSC」ボタンを押してONにする

ボタンをONにすると、キャプチャーアプリが 127.0.0.1:9000 に対して /avatar/parameters/v2/<パラメータ名> 形式でフェイストラッキングの値を送信し始めます。

VRChat内のアバターの表情がWebカメラの映像に連動して動けば成功です。試してみるといいポイントをいくつか挙げます。

• まばたき 両目を閉じたり開いたりして、アバターのまばたきが反応するか確認
• 口の動き 「あ・い・う・え・お」と口を動かしてリップシンクが動くか確認
• 眉 眉を上げ下げして、アバター側に反映されるか確認
• 視線 左右・上下に視線を動かしてアバターの瞳が追従するか確認