誰でも簡単にVTuberを体験できるスマホアプリ「ToF AR Lab」
ソニーセミコンダクタソリューションズは10月3日に、誰でも気軽にVTuber体験ができる機能を備えた、iOS/Android向けアプリ「ToF AR Lab」をリリースした。価格は無料で、App Store、Google Playからダウンロードできる。
「ToF AR Lab」の使用イメージ
「ToF AR Lab」は、スマートフォンやタブレット端末のカメラを使って、画面に映し出された現実風景にバーチャルの視覚情報を重ねて表示可能なアプリ。
カメラで写した人間の動きのデータが取り込まれ、あらかじめ用意した3Dの仮想キャラクター（アバター）の動きに反映されるので、誰でも簡単にVTuberを体験できる。
これまでのVTuber用アプリは、細かい動きの再現が難しかったが、「ToF AR Lab」は光を照射し、その反射光を検出するまでの時間差を利用して、距離情報を取得可能なToF（Time of Flight）カメラなどで取得した被写体の深度（奥行き）情報を利用することで、手や指の細かな動きまでをアバターに反映し、よりスムーズで違和感のない体験を実現している。
VTuber機能だけでなく、多彩な体験が可能な機能を備える
ほかにも、メッシュ処理機能によって画面上に3Dの仮想空間（メタバース）を作り出す「SandBoxRoom」、水の中にいるかのようななバーチャル体験ができる「IceWater」、現実風景における壁や床などを手や足で触れる動作によって、バーチャルな蝶を飛ばせる「Kirigami」といった機能も用意する。
「ToF AR Lab」のダウンロード
iOS版＝https://apps.apple.com/us/app/tof-ar-lab/id1613821588
Android版＝https://play.google.com/store/apps/details?id=jp.co.sonysemicon.tofar.lab
「ToF AR Lab」は、スマートフォンやタブレット端末のカメラを使って、画面に映し出された現実風景にバーチャルの視覚情報を重ねて表示可能なアプリ。
カメラで写した人間の動きのデータが取り込まれ、あらかじめ用意した3Dの仮想キャラクター（アバター）の動きに反映されるので、誰でも簡単にVTuberを体験できる。
これまでのVTuber用アプリは、細かい動きの再現が難しかったが、「ToF AR Lab」は光を照射し、その反射光を検出するまでの時間差を利用して、距離情報を取得可能なToF（Time of Flight）カメラなどで取得した被写体の深度（奥行き）情報を利用することで、手や指の細かな動きまでをアバターに反映し、よりスムーズで違和感のない体験を実現している。
ほかにも、メッシュ処理機能によって画面上に3Dの仮想空間（メタバース）を作り出す「SandBoxRoom」、水の中にいるかのようななバーチャル体験ができる「IceWater」、現実風景における壁や床などを手や足で触れる動作によって、バーチャルな蝶を飛ばせる「Kirigami」といった機能も用意する。
「ToF AR Lab」のダウンロード
iOS版＝https://apps.apple.com/us/app/tof-ar-lab/id1613821588
Android版＝https://play.google.com/store/apps/details?id=jp.co.sonysemicon.tofar.lab
