他者の口の動きと表情をリアルタイムに再現する「Face Sharing」開発

H2Lが提供する 「BodySharing技術(※)」の新技術として、H2LとNTTドコモが、自分の顔に他者の口の動きと顔の表情をリアルタイムに再現する「Face Sharing™️」を共同開発したことを発表した。

同技術を活用することで他者に代わって自分が会話をすることや、他者の口の動かし方を実際に体験できるようになるため、遠隔からサポートを受けながら外国語での会話や専門的な知識が必要な会話などを行うことが可能となる。

「Face Sharing」は、頬に装着したデバイスから口周りの筋肉に電気刺激を与えて収縮させることで、 他者の口の動きやAIが指定する口の動きを再現する技術。

複数のデバイスを用いることで、一人の口の動きを複数人に同時に再現することも可能となっている。

さらに、他者の顔の3D映像を自分に投影することで顔の表情を再現し、スピーカーを使用して他者の音声を再生することで声も再現も可能。

将来的には、口の動かし方の伝達が難しい外国語の発音や演技などを、直接口を動かして伝えることを目指していくという。

また、同技術を高速・大容量、低遅延、多数接続の特徴をもつ5Gと組み合わせることで、遠く離れた場所でも他者の口の動きや顔の表情をリアルタイムに再現することや、より多くの人数で同時に同一の体験を共有することが期待できるとのことだ。

(※)筋変位センサーを活用し、手や腕などの身体情報をコンピューターと相互伝達することにより、人やロボット、VR・ARのキャラクターへ体の動きを伝えることができ、独自の触感提示技術により、他人の体験やVR・AR空間の体験を体に伝えることができる技術

モバイルバージョンを終了