애플, AI 접근성 기능 공개: 시선으로 휠체어 조작하고 자연어로 음성 제어

AI가 직장인의 보고서 작성을 돕는 것도 유용하지만, 대형 모델의 능력이 진정으로 삶을 바꾸는 영역은 바로 접근성 기술입니다.

Apple은 5월 19일, 자체 온디바이스 인공지능인 Apple Intelligence를 결합한 새로운 접근성 기능들을 공개했습니다. 올해 말 정식 배포될 예정인 이번 업데이트는 시선으로 전동 휠체어를 운전하는 기술부터 화면을 보며 자연어로 폰을 조작하는 기능까지 광범위한 생태계 변화를 담고 있습니다.

외워서 명령하지 않고 눈에 보이는 대로 말한다

운동 장애가 있는 사용자가 기존의 '음성 제어'로 기기를 다루려면 화면의 번호 그리드를 외우거나 개발자가 지정해 둔 정확한 버튼 이름을 정확히 발음해야 했습니다. 개발자가 접근성 태그를 빠뜨리기라도 하면 앱 내비게이션은 사실상 불가능했습니다.

이번 업데이트로 음성 제어에 자연어 이해 기능이 탑재되면서 사용자는 보이는 그대로 말할 수 있게 됩니다. 지도나 파일 앱처럼 시각적 요소가 많은 화면에서도 "보라색 폴더 눌러줘"나 "인기 맛집 가이드 탭해줘"라고 직관적으로 말하면 기기가 화면 픽셀과 문맥을 파악해 알아서 탭합니다.

시각 장애인을 위한 'VoiceOver'와 '확대기' 기능도 강력해집니다. iPhone의 동작 버튼을 누른 채 카메라를 비추면 눈앞에 무엇이 있는지 즉시 설명해 주고, 대화하듯 추가 질문을 던져 세부 정보를 파악할 수 있습니다. 스캔한 영수증이나 진단서, 개인 서류도 상세하게 읽어줍니다.

학술 논문처럼 다단 레이아웃과 도표가 섞인 복잡한 문서는 '접근성 리더'가 깔끔하게 재구성하며, 즉석 요약과 서식을 유지한 번역 기능까지 지원합니다.

Vision Pro로 움직이는 휠체어와 기기 내 자동 자막

조이스틱을 손으로 쥐기 힘든 중증 장애인을 위해 Apple Vision Pro는 차세대 보조 주행 장비로 변신합니다.

헤드셋의 정밀한 시선 추적 센서를 활용해 호환되는 전동 휠체어를 눈동자 움직임만으로 조종할 수 있는 기능이 들어갑니다. 주변 조명 환경의 영향을 적게 받고 잦은 재보정이 필요 없는 것이 특징이며, 미국 시장에서 Tolt 및 LUCI 주행 시스템과 연동해 블루투스 및 유선 연결로 먼저 선보입니다.

청각 장애인을 위한 온디바이스 자막 생성 기능도 추가됩니다. 가족이 찍어 보낸 일상 영상이나 자막이 없는 웹 영상이라도 iPhone, iPad, Mac, Apple TV, Vision Pro가 기기 자체에서 실시간으로 음성을 텍스트로 변환해 화면에 띄웁니다. 모든 과정이 기기 안에서 처리되므로 사적인 영상이 외부 클라우드로 유출될 염려가 없습니다.

이 밖에도 소니의 장애인 맞춤형 게임 컨트롤러인 'Access 컨트롤러' 지원이 공식 추가되며, FaceTime 영상 통화 도중 수어 통역사를 손쉽게 연결할 수 있는 개발자 API도 함께 공개됐습니다.

왜 중요한가

우리는 이번 발표가 멀티모달 AI가 기술 벤치마크 점수 경쟁을 넘어 실제 사용자의 일상 마찰을 어떻게 없앨 수 있는지 보여준 영리한 사례라고 봅니다.

'보라색 폴더'를 알아듣는 기능은 사소해 보이지만, 수많은 개발자가 방치해 온 접근성 라벨 누락 문제를 OS 차원의 시각 AI가 단번에 해결해 버리는 방식입니다. 이는 향후 앱을 스스로 조작하는 지능형 AI 에이전트로 나아가는 핵심 징검다리이기도 합니다.

또한 고가의 공간 컴퓨터인 Vision Pro에 확실한 '필수 용도'를 만들어줬다는 점도 주목할 만합니다. 루게릭병(ALS) 환자 등에게 수천만 원을 호가하던 기존의 폐쇄적인 시선 추적 보조 장비를 범용 IT 기기가 훌륭하게 대체할 수 있는 길을 열었기 때문입니다.

다만 치명적인 위험도 상존합니다. 생성형 AI의 일상적인 텍스트 오류와 달리, 시선 추적으로 휠체어를 몰거나 시각 정보를 잘못 파악해 안내할 경우 자칫 인명 사고로 이어질 수 있습니다. Apple 역시 면책 조항을 통해 고위험 내비게이션이나 의료 진단에 의존하지 말 것을 당부하고 있으며, 실전 환경에서 얼마나 오작동 없는 신뢰성을 보여주느냐가 성패를 가를 것입니다.