医療オムニモーダルAI「AMIE」

これまでのAIは、テキスト入力に対して一問一答する静的なシステムが主流でした。しかし、人間の表情や声、非言語的な手がかり（咳、呼吸の乱れ、歩き方の不自然さなど）を統合して理解する「オムニモーダル（双方向リアルタイムマルチモーダル）AI」へと進化が進んでいます。その先駆的な実用例が、Google ResearchとGoogle DeepMindが開発した医療向けAI「AMIE」です。

最新の研究において、AMIEは対面ビデオ通話を通じたリアルタイム臨床診断のデモを公開しました。GeminiとProject Astraをベースにしたマルチエージェント構成で動くAMIEは、カメラやマイクから患者の顔色や呼吸音、視覚的な身振りを読み取り、並行して診断推論と適切な対話マネジメントを即座に（リアルタイムで）行います。

患者アクターを対象とした臨床評価において、AMIEはテキストチャットを大きく上回る満足度と、医師に近い温かみのある対話品質、安全性を記録しました。この成果は、将来的にオムニモーダルエージェントが、テキストを越えた高度な対話が求められるコールセンターや医療、接客現場の自律化を強力に牽引することを示しています。

---