AppleがAIアクセシビリティ機能を予告：視線で車椅子操作、自然言語での音声操作も

AIの進化といえば業務の自動化やチャットボットばかりが注目されがちですが、本当に切実な課題を解決する場所は、アクセシビリティの現場にあります。

Appleは5月19日、Apple Intelligenceを活用したアクセシビリティ関連の新機能を発表しました。年内に予定されているソフトウェアアップデートで順次提供される見込みです。視線だけで電動車椅子を運転する仕組みから、曖昧な指示でも意図を汲み取る音声操作まで、同社のオンデバイスAIがOSの中核に組み込まれます。

正確な名前を覚えなくても、見たままを声に出せば動く

これまで、身体が不自由な人が「音声コントロール」で端末を操作する場合、画面上に表示された番号を読み上げるか、アプリ開発者が設定した正確なボタン名を暗記して指示する必要がありました。

今回のアップデートにより、Apple Intelligenceが画面の構造を視覚的かつ文脈的に理解できるようになります。「紫のフォルダをタップして」「おすすめレストランのガイドを開いて」といった自然な表現で話しかけるだけで、端末が意図した操作を実行します。開発者がアクセシビリティ用のラベルを付け忘れているアプリでも、問題なく操作できるようになるのがポイントです。

視覚補助ツールの「VoiceOver」や「拡大鏡」も強化されます。iPhoneのアクションボタンを押しながらカメラを向けるだけで、ファインダーに映っている被写体について質問でき、さらに「もっと詳しく」「右側には何がある？」といった追加の会話で視覚情報を深掘りできます。請求書や医療記録などの書類読み取りにも対応します。

また、多段組の論文や図表を含む複雑な資料を読みやすく整形する「アクセシビリティリーダー」には、オンデマンドの要約機能や、書式を崩さない翻訳機能が追加されます。

Vision Proで車椅子を操作、動画の自動字幕起こしも

重度の運動機能障害を持つ人に向けて、空間コンピュータ「Apple Vision Pro」を高精度な入力インターフェースとして活用する取り組みも始まります。

ヘッドセットに内蔵された視線トラッキングを使い、対応する電動車椅子を視線だけで操縦できるようになります。頻繁な再キャリブレーションが不要で、さまざまな照明環境下でも安定して動作するのが特徴です。まずは米国のToltおよびLUCIの駆動システムに対応し、Bluetoothおよび有線接続をサポートします。

聴覚サポートの面では、端末上で音声を自動テキスト化する字幕生成機能が導入されます。日常で友人が撮影した動画やSNSのクリップなど、字幕が付いていない動画でも、iPhone、iPad、Mac、Apple TV、Vision Proの各画面で自動的に字幕が表示されます。処理はすべてデバイス内で行われるため、プライバシーが守られる点も特徴です。

このほか、ソニーの「Access コントローラー」がiOSやmacOSに対応し、FaceTime通話に手話通訳者をスムーズに参加させられる開発者向けAPIなども提供されます。

なぜ重要か

今回の発表は、マルチモーダルAIがもっとも輝くのは「操作の摩擦を極限まで減らすこと」だと改めて示す好例と言えます。

画面上の未設定ボタンを「紫のフォルダ」と見た目で認識させるアプローチは、長年続いてきたアプリ側のアクセシビリティ対応不足という構造的な問題を、OS側のAIが強引に解決してしまうスマートな手法です。これは将来のOS向け自律型エージェントの基盤技術そのものでもあります。

また、高価なVision Proに「視線による車椅子操作」という代替の効かない用途を与えたことも意義深い動きです。筋萎縮性側索硬化症（ALS）などの患者にとって、高額で使い勝手の限られていた専用の視線入力機器を、市販の先端デバイスで置き換えられる可能性が開かれました。

懸念点を挙げるなら、信頼性の問題です。テキストの要約ミスなら笑って済みますが、電動車椅子の操作や視覚支援における誤認識は、直接ユーザーの身の危険につながります。Apple自身も免責事項で高リスクなナビゲーション用途を避けるよう明記していますが、現場での安全性担保が今後の普及における最大のハードルになるはずです。