プロジェクトゲームフェイスをご紹介します：ハンズフリーで、AIにより動くゲーミングマウス

Introducing Project Gameface An AI-powered gaming mouse that moves hands-free.

Project Gamefaceは、頭の動きや表情でコンピュータのカーソルを制御することができる、新しいオープンソースのハンズフリーゲーミングマウスです。眉を上げてクリックやドラッグをしたり、口を開けてカーソルを動かしたりすることができ、誰でもゲームを楽しむことが可能になります。

このプロジェクトは、筋肉ジストロフィーを患う四肢麻痺のビデオゲームストリーマー、ランス・カーの物語から着想を得ました。ランスは、頭部追跡マウスを使用してカーソルを制御し、自分のゲームへの愛を制限されることを拒否しました。2021年、ランスが夜にゲームをしている間に家が火事になり、それがライブストリームで世界中のゲーマーに見られました。ランスは、高価な頭部追跡マウスを含むオンラインゲームのすべての機器を火災で失いました。このマウスが彼にコンピュータゲームをプレイするための主要な技術でした。

ランスの物語を聞いた後、私たちは彼を支援するために協力して、Google MediaPipeのオープンソースソリューションを使用した、ハンズフリーゲーミングマウスであるProject Gamefaceを共同設計しました。ウェブカメラで簡単にキャプチャされた頭の動きや表情は、機械学習モデルによって認識され、カーソルを動かすことができます。異なるユーザーのニーズに適応するために、ジェスチャーサイズのアイデアを取り入れ、ユーザーがマウスアクションをトリガーするためにどの程度目立たせる必要があるかを制御できるようにしました。

• I/O 2023 で発表した100のこと
• 責任あるAI進歩のための政策アジェンダ：機会、責任、セキュリティ
• 洪水予測により、より多くの人々が安全に過ごせるよう支援する

Project Gamefaceは、ゲームをよりアクセスしやすくする可能性を秘めた、有望な新しい技術です。コードはオープンソースであり、今日プレビュー版が利用可能です。ツールはまだ開発段階にありますが、比較的安価に構築および維持することができるため、人々の生活を変える可能性に興奮しています。この技術に貢献したり、改善したり、使用したりすることに興味を持っている場合は、私たちのGitHubリポジトリを訪問してください。

We will continue to update VoAGI; if you have any questions or suggestions, please contact us!