VTuberの表情の重要性～トラッキング方法の種類とおすすめアプリ

VTuberの表情の重要性

VTuberはアバターの姿そのものとして視聴者から認識されるため、アバターの表情とトークが一致しているほど没入感が高まり、より感情移入をしながらコンテンツを楽しめるようになります。

たとえば、怪談話をしている時、真顔や笑顔のままで話し続けていたら（そういった芸風ならともかく）共感を得るのは難しいでしょう。感情の変化が重要なコンテンツを作る人ほど、表情のトラッキングの重要性が増すといえます。

トラッキングとは

トラッキングとは、指定した顔や体のパーツを追尾（トラック）する機能全般を指す言葉です。

目や口元の動きを判別する機能を指す「表情のトラッキング」以外にも、腕や指のトラッキングが可能な機器も存在します。これらの機能は、WEBカメラやVR機器のサブ機能として備え付けられていることが多く、より高品質な機器ほどトラッキング精度が高くなります。

いまではトラッキングスーツと呼ばれる全身の動きを高精度にトラッキングできる専用機器まで存在するので、必要に応じて使い分けましょう。

表情のトラッキング方法

以下のアイテムを使って、表情をトラッキングできます。

• スマホカメラ
• WEBカメラ
• VRヘッドセット

スマホカメラ

スマートフォンのカメラで表情をトラッキングし、その情報をPCに送ることでアバターを制御できます。PC用のWEBカメラなどを所有していない場合に利用できるだけでなく、PC上でソフトウェアを動作させる負荷が生じないことも利点です。

画角や精度はスマートフォンに搭載されているカメラに依存するため、まずは自身の所持しているスマートフォンで動作させて、満足のいく精度に達しているかをチェックしてみましょう。

WEBカメラ

表情のトラッキングを行うだけであれば特別な機能は必要なく、十分な画質と画角を備えているWEBカメラであれば安価なものでも問題ありません。ただし、安価なものは耐用年数が低いため、5千円から1万円ほどの製品を購入すれば、長く安心して運用できるでしょう。

WEBカメラで撮影を行う場合、顔をしっかりと撮影できる環境を作ることが大切です。WEBカメラ用の卓上アームが2,000円前後で売られているので、合わせて導入することをおすすめします。

VRヘッドセット

VRヘッドセットには「アイトラッキング」と呼ばれる、目の動きを認識する機能を備えている製品があります。最も有名なのが「VIVE Pro Eye」で、きわめて高精度なアイトラッキングを実現してくれます。しかし、16万2,880円と高額です。VRの世界にどっぷり浸かっていて、高価なVR機器を買うのも苦ではないという人は試してみてもよいかもしれません。

VTuber向け表情トラッキングアプリ

表情のトラッキングアプリは多数存在します。無料のものもありますが、最終的にはPC向けの別アプリケーションとの連携が必要になるため、5,000円前後の出費があるものと考えるのが無難でしょう。

また、表情以外のトラッキングも行える複合型のアプリも存在するので、今後の活動範囲や内容を考慮して採用するアプリを決定しましょう。

waidayo

画像引用元：BOOTH

無料で利用できるスマートフォン向けのフェイストラッキングアプリです。表情をトラッキングする機能に特化したアプリケーションで、アバターを動かす際にはVMC Protocolに対応したPC向けアプリケーションが必要になります。

逆に言えば、VMC Protocolに対応しているアプリさえ使用していればスマートフォンを使うだけで表情を取得できるため、取り回しが非常によいのが特徴です。

• iOS版をダウンロード

恋顔

画像引用元：恋顔

PCとの連携を前提としている、スマートフォン向けのアプリです。大きな特徴は、恋顔による公式のPC向けアプリケーションが別途用意されている点。別のアプリケーションを介さずにアバターを制御できます。アバターへの反映方法などが公式サイトでサポートされていることも嬉しいポイントです。

• iOS版をダウンロード

2DR

画像引用元：2DR

スマートフォンの前面カメラを使用する、機器の表情認識機能に頼らないトラッキングアプリです。そのため対応機種が幅広く、Androidでもアバターに表情を付けられることが大きな特徴となっています。Live2Dに対応しつつも無料で利用できるため、初心者におすすめです。

• iOS版をダウンロード
• Android版をダウンロード

3tenePRO V2

画像引用元：3tenePRO V2

表情のトラッキングはもちろん、カメラだけで指や腕、ボディーをトラッキングできる多機能なVTuber向け支援アプリです。Live2Dアバターを制御するためには対応版（+500円）を購入する必要がありますが、これひとつにアバターを制御するために必要な要素がすべて詰まっているので、WEBカメラを接続したPCでアバターを動かしたいのであれば最初の選択肢として検討できるアプリケーションです。

• 公式サイト

FaceRig

画像引用元：STEAM

現在、最も普及率の高いであろうPC向けのトラッキングアプリです。機能が絞られている代わりに、扱いやすいことが特徴です。特に、Live2Dは規定通りに作成さえしていれば簡単にインポートが可能で、初心者でもすぐにアバターを動かすことができます。また、普及率の高さからWeb上のサポート情報も多く、何らかの疑問があっても調べれば大抵の問題は解決するのも大きな強みといえるでしょう。

• 公式サイト

まとめ

自分の表情をアバターに反映させれば、映像に臨場感とリアリティを与えることができます。本記事を参考に、ぜひ、アバターに表情をもたせてみましょう。表情のあるアバターが登場すれば、コンテンツのクオリティが向上することは間違いありません。

VTuberキャラの作り方！モデル作成方法とおすすめツール

2018年頃より一大ブームとなったVTuber。当初は技術的なハードルが高く個人参入は難しいとされていたジャンルですが、2020年現在は扱いやすいソフト…

詳細を見る