ChatGPTグラスでAIを現実生活に取り入れよう

多くの人が OpenAI の ChatGPT でチャットを楽しんでいる中、スタンフォード大学の学生 1 人が、この大規模言語モデルの新しい用途、つまり現実世界で他の人とやりとりすることを発見しました。 

コンピュータサイエンスと電気工学を学ぶブライアン・ハウピン・チアン氏は、オープンソースのMonocle ARハードウェアとOpenAIのWhisper自動音声認識（ASR）技術を活用し、ChatGPTをポータブルかつインタラクティブなものにしました。現在、このシステムではスマートフォンも使用されています。これらの技術を組み合わせたシステムは、チアン氏によって「rizzGPT」（「Rizz」は「カリスマ性」を意味するスラング）というキャッチーな名前が付けられました。リアルタイムのガイドに従い、チアン氏は模擬面接、友人との偶然の出会い、新しいレストランでのおすすめ料理選びなど、様々な場面でこのAIチャットアシスタントを活用しています。

Twitterで共有されたrizzGPTのガイドの中で、チアン氏はこのシステムを「ARとAIによって実現されるアンビエントコンピューティングの新時代。誰もが24時間365日対応可能なパーソナルアシスタントを持つ時代」の幕開けだと説明しています。スタンフォード大学の学生であるチアン氏は、rizzGPTは気まずいデートや就職面接といった人生の様々な場面で活用でき、「リアルタイムのカリスマ性サービス（CaaS）」を提供すると冗談めかして語っています。

rizzGPTの優れた実例が、上記のツイートに示されています。動画では、AI強化されたChiang氏が、眼鏡のフレームにクリップされたARガジェット「Monocle」を使い、一連の面接の質問に的確に答えています。Monocleの内蔵ディスプレイには、ChatGPTから直接、AIによって完璧に仕上げられた回答のオートキューが表示されます。

rizzGPTシステムのもう一つの個人的なインタラクティブな状況的使用法は、Chiang氏が友人にばったり会った時です。AIは彼の友人を学習し、写真を使ってトレーニングし、彼らを認識できます。接続されたMonocle装着者は、特定の友人と交換したスマートフォンのメッセージに基づいて、適切な会話を思いつくことができます。これは「気まずいデート」にも簡単に活用でき、装着者は自動的に素晴らしい会話を繰り広げることができます。とはいえ、周りの人は、顔をスキャンして何を言うべきかを教えてくれるメガネをかけているあなたを見て、あまり喜ばないかもしれません。ここにはGoogle Glassを彷彿とさせる点があります。

Monocle ARとAIエージェントを組み合わせたもう一つの魅力的な例は、レストランでのメニューアドバイスの提供です。このツイートされた動画では、AIがChiang氏のためにメニューを（黙読で）読み上げ、口頭で質問されると、彼の食べ物の好き嫌いや栄養価に関する知識に基づいて音声アドバイスを提供している様子が確認できます。スタンフォード大学の学生であるChiang氏は、この実世界AIアプリケーションにおいて、音声文字変換、TTS、OCRなどの接続サービスも活用しています。

rizzGPT の他の楽しい使用例を思いついたら、Chiang が DM を募集しているので、遠慮せずに提案を送ってください。