Shinano Face Tracking for VRChat & VTubing [ARKIT] |信濃フェイストラッキング

✨❗Shinano Face Tracking ❗✨

✨ Face Tracking for VRChat & VTubing ✨

Expressive Shinano Face Tracking for VRChat & VTubing!

Want face tracking for VRChat or for VTubing? With this kit you can get both! By getting the full package you get a FT package including an ARKit made for VRChat and an ARKit made for VTubing. If you only need one of them you're also able to purchase it for cheaper by only buying the version you need :)

⭐ FT Features ⭐

(These features are in the VRC Version!)

Wherever your eyes look, your ears will move accordingly! If you get surprised or blink the ears will also move up and down.

Whenever you smile a subtle blush will get activated. 😊

The FT also includes multiple menu toggles and a toggle for local smoothing for if you're streaming your VRChat and want your tracking to look smoother on stream.

Information

This face tracking works on all tracking devices supported by VRCFT. This product was tested with a Meta Quest Pro in VRChat and an iPhone for the VTubing version.

The ARKit adds 52 new expressive blendshapes to your Shinano and adds a total of 140 parameters.

In order to use this tracking you need to own the original model of Shinano that you can find at https://booth.pm/en/items/6106863

It's very important you use Shinano_ver_1.02 otherwise the patcher will not work!

The VTubing version does not include a VTubing format such as .VRM or other similar files, only the FBX patcher needed to add the VTuber blendshapes onto your model.

You can find the English Tutorial here: https://docs.google.com/document/d/1a_NWbyrgONW4vqe9zByFz0uwwysfVqkbgkIKQ5uZX4U/edit?tab=t.0

Why two different versions for VRC and VTubing?

Due to the tracking differences between say a Quest Pro and an iPhone, I've made two different versions of this ARKit to uphold the quality of the face tracking both in VRChat and for VTubing.

For example if you were to use the VRC version with iPhone tracking, it wouldn't look as good as it did in VRChat since the blendshapes were made to work with VR face trackers. Since there will be people using this tracking for both use cases I wanted to make sure you get the best tracking possible for both! 😊

✨ VRChat と VTubing のフェイストラッキング ✨

VRChatとVTubingで使える、表情豊かなShinanoフェイストラッキング！

VRChatとVTubingの両方でフェイストラッキングを使いたいですか？このキットなら両方使えます！フルパッケージを購入すると、VRChat用ARKitとVTubing用ARKitが含まれたFTパッケージが手に入ります。どちらか一方だけ必要な場合は、必要なバージョンだけをお得に購入することも可能です :)

⭐ FT 機能 ⭐

(これらの機能はVRC版に搭載されています！)

視線を向けると、耳もそれに合わせて動きます！驚いたり瞬きしたりすると、耳も上下に動きます。

笑うと、ほのかに赤面します。😊

FTには複数のメニュートグルと、VRChat配信中にトラッキングをよりスムーズに見せたい場合に便利なローカルスムージングのトグルも搭載されています。

情報

このフェイストラッキングは、VRCFTがサポートするすべてのトラッキングデバイスで動作します。本製品は、VRChatではMeta Quest Pro、VTubing版ではiPhoneでテストされています。

ARKitは、Shinanoに52種類の新しい表現力豊かなブレンドシェイプと、合計140種類のパラメータを追加します。

このトラッキングを使用するには、https://booth.pm/en/items/6106863 で入手できるShinanoのオリジナルモデルが必要です。

Shinano_ver_1.02を使用することが非常に重要です。そうでない場合、パッチャーは動作しません。

日本語のチュートリアルはここから見つかります:

https://docs.google.com/document/d/1TbvKnVjwjM1mEKiqFDYFl7ZrehNEyGg7syu6Q3y0wt8/edit?usp=sharing

VRC と VTubing に 2 つの異なるバージョンがあるのはなぜですか?

例えばQuest ProとiPhoneのトラッキングの違いを考慮し、VRChatとVTubingの両方でフェイストラッキングの品質を維持するために、このARKitを2つのバージョンに分けました。

例えば、iPhoneトラッキング付きのVRCバージョンを使用した場合、ブレンドシェイプはVRフェイストラッカーで動作するように作られているため、VRChatで使用した時ほど見栄えがよくありません。このトラッキングは両方の用途で使う人がいるため、両方で可能な限り最高のトラッキングを実現できるようにしたいと考えました！😊

Terms Of Service

By purchasing this product you agree to the terms of service listed at https://drive.google.com/file/d/196uGJHzCQP6V3ynMqcqFYfudsOzXfrjy/view?usp=sharing

Terms based on: https://www.vn3.org/

Credits:

- https://github.com/Tr1turbo/BlendShare

- https://booth.pm/en/items/6106863

- https://github.com/Adjerry91/VRCFaceTracking-Templates

- https://github.com/VRCFury/VRCFury

- https://github.com/HashEdits/Face-Tracking-Patcher