複合現実ビデオで見られる空のロボットの VR マスクは、技術の進歩がそうあるべきであるように、かなりクールだが不気味な顔面修正を受ける日も近いかもしれません。
新しいブログ投稿Google Research ブログで (感謝の意を表します)ザ・ヴァージ）では、ハイテク巨人の数人の研究者が、複合現実ビデオ（VR ユーザーとその周囲の仮想現実の両方を表示するビデオ）用に、ブロック状の VR ヘッドセットをユーザーの顔の画像に置き換えるプロセスについて議論しています。
研究者らは、最終的にはこの「ヘッドセット取り外し」技術を複合現実ビデオを超えて VR 世界そのものに拡張し、エンゲージメントと社会的交流を高めることができるかもしれないと期待している。
シンプルなアイデアのように思えますが、そこに到達するにはハイテクな手順が必要です。まず、目の動きや瞬きを含むユーザーの顔の 3D モデルを取得し、「視線依存の動的外観」のためにデータベースに保存できます。
マッシュ可能な光の速度
これにより、チームは、単に感情的にぼんやりとした変化のない顔ではなく、アクティブで反応的な顔のように見えるものを後からユーザーに投影できるようになります。これは、最初から VR グーグルがそこに存在するよりもはるかに不気味です。
特別な外部カメラが VR セッション中 (グリーン スクリーンの前で撮影) にユーザーを追跡し、前述のユーザーの顔のモデルとユーザーの実際の動きの間のキャリブレーションを可能にします。その後、チームはセッション ビデオ内でゴーグルが装着されている顔の部分をレンダリングできます。
視線追跡技術VR ヘッドセットを使用すると、研究者は使用中のユーザーの目の動きや瞬きがどのようなものであるかをかなりよく理解できるようになり、視線データベースからの正しい動きを使用して、ユーザーの実際の動きをほぼ反映できるようになります。
最終的なレンダリングからゴーグルが完全に削除されていない理由は、ユーザーに「スキューバ マスク効果」を与えるためであり、研究者らによると、視聴者が不気味の谷に陥ったり、不気味な気分になったりするのを防ぐためです。
上のビデオで、今後数年のうちに一般の消費者の手に届くプロセスの素晴らしい概要をご覧ください。