Microsoft の研究者は、キネクトの手話入力を理解するためのボディリーディング機能。
マイクロソフト リサーチ アジア中国科学院計算技術研究所は、Kinect を使用してコンピューター手話認識を支援するために協力しています。上のビデオで示されているように、彼らは手と体の動作を追跡することで標識を変換する Microsoft Kinect の機能を実証しました。
関連項目:
マイクロソフトリサーチ言う「翻訳モード」では、Kinect は手話をテキストまたは音声に翻訳できます。孤立した単語の認識と連続した文の認識の両方がテストされました。 「コミュニケーション モード」では、アバターは、手話入力をテキストに変換したり、その逆を行ったりすることで、聴覚障害者または聴覚障害者と健聴者とのコミュニケーションを支援します。
すべてはプロセスを通じて機能しますマイクロソフトリサーチこれは「3D 軌跡マッチング」と呼ばれます。Kinect for Windows ソフトウェアは手の動きの解読を支援し、それを照合して単語を識別します。
この Kinect 研究イニシアチブは、主に手話でコミュニケーションをとる人々にとって、改善されたより自然なアクセシビリティ オプションをもたらす可能性があります。
「私たちは、すべての人々の日常生活を改善するためにIT（情報技術）を活用すべきだと信じています」とMicrosoft Research Asiaの研究プログラムマネージャー、Guobin Wu氏は公式文書で述べた。ブログ投稿。 「これはまだ研究プロジェクトですが、最終的には、この研究が、近い将来、聴者と聴覚障害者との間のギャップを埋めるための日常的な対話ツールを提供できることを願っています。」
この手話認識プロジェクトの詳細については、研究者らが研究結果を以下にまとめています。紙(PDF)。
Kinect テクノロジーで他にできることは何だと思いますか?私たちは、人々が Kinect を使用して次のことを行うのを見てきました。うつ病を検出する、助けるために実際に服を試着するそして使用のために軍事現場で。コメントであなたの考えを共有してください。