音声のみを使用するジェスチャー コントロール システム

クレジット:

しかし、それはまさに、ワシントン州レドモンドに本拠を置くソフトウェア大手の研究所である Microsoft Research で研究者グループが行っていることだ。ジェスチャー コントロールはますます一般的になってきており、一部のテレビにも組み込まれています。 Microsoft 独自の Kinect デバイスなどの他のモーション センシング テクノロジは、カメラを使用して動きやジェスチャを感知して解釈しますが、サウンドウェーブドップラー効果、いくつかの賢いソフトウェア、ラップトップの内蔵スピーカーとマイクのおかげで、これは音だけを使用して行われます。

デスニー・タンMicrosoft Researchの主任研究者でSoundWaveチームのメンバーでもある同氏は、このテクノロジーはすでに多くの単純なジェスチャーを感知するために使用できており、スマートフォンやラップトップに複数のスピーカーとマイクが搭載され始めているため、このテクノロジーの感度はさらに高くなる可能性があると述べています。 Microsoft Research とワシントン大学の共同研究である SoundWave が今週発表されます。テキサス州オースティンで開催されたコンピューティングにおけるヒューマンファクターに関する 2012 ACM SIGCHI カンファレンスにて。

SoundWave のアイデアは昨年の夏に浮上しました。Desney らが超音波トランスデューサーを使用して触覚効果を生み出すプロジェクトに取り組んでいたとき、ある研究者は体を動かすと音波が驚くべき方法で変化することに気づきました。トランスデューサーは研究者の体で反射する超音波を発しており、その動きによって拾われる音のトーンが変化し、バックエンドで観察される音波が変化しました。

研究者らは、これがジェスチャー感知に役立つ可能性があるとすぐに判断しました。そして、多くのデバイスにはすでにマイクとスピーカーが組み込まれているため、それらの既存のセンサーを使用して動きを検出できるかどうかを実験しました。タン氏によると、標準的なコンピュータのスピーカーとマイクは、人間が聞くことができる帯域を超えた超音波帯域で動作することができます。つまり、SoundWave のテクノロジをラップトップやスマートフォンで動作させるために必要なのは、SoundWave ソフトウェアをロードすることだけです。

カーネギーメロン大学でユーザーインターフェースのセンシングを研究している大学院生、クリス・ハリソン氏は、既存のハードウェアとソフトウェアアップデートで動作するSoundWaveの能力を「大きな勝利」と呼んでいる。

「これには興味深い可能性があると思います」と彼は言います。

SoundWave ソフトウェアを搭載したコンピュータのスピーカーは、20 ~ 22 キロヘルツの一定の超音波音を発します。周囲に何も動いていない場合、コンピューターのマイクから聞こえる音も一定であるはずです。しかし、何かがコンピューターに向かって動いている場合、そのトーンはより高い周波数にシフトします。遠ざかると、トーンは低い周波数にシフトします。

これは予測可能なパターンで発生するため、周波数を分析して、移動物体の大きさ、移動速度、進行方向を判断できるとタン氏は言います。これらすべてに基づいて、SoundWave はジェスチャを推測できます。

タン氏によると、このソフトウェアの精度は 90% の範囲にあり、ユーザーがジェスチャーを行ってからコンピューターが応答するまでに目立った遅延はありません。また、SoundWave は、スピーカーを他の目的で使用しているときにも動作できます。

これまでのところ、SoundWaveチームは、手を上下にスワイプする、体に近づけたり遠ざけたり、手足を曲げたり、体全体を近づけたり遠ざけたりするなど、ソフトウェアが理解できるさまざまな動きを考案してきました。コンピュータから離れてください。これらのジェスチャを使用して、研究者はコンピュータ画面上のページをスクロールしたり、簡単な Web ナビゲーションを制御したりできます。ユーザーがコンピュータに近づいたり離れたりしたことを感知すれば、コンピュータを自動的に起動したりスリープ状態にしたりできる可能性がある、とタン氏は言う。

ハリソン氏は、特にユーザーがジェスチャーを記憶する必要があるため、ジェスチャーの数を制限しても問題ないと考えています。 SoundWave チームは、そのテクノロジーをテトリスのゲームの制御にも使用しました。これは、楽しいだけでなく、システムの精度と速度の良いテストにもなりました。

Leave a Reply

Your email address will not be published. Required fields are marked *

Subscribe Now & Never Miss The Latest Tech Updates!

Enter your e-mail address and click the Subscribe button to receive great content and coupon codes for amazing discounts.

Don't Miss Out. Complete the subscription Now.