Google Lookout의 AI가 시각 장애인을 위한 이미지를 설명하는 방법

이미지 Q+A를 통해 사용자는 업로드된 이미지에 대해 음성이나 문자를 통해 질문할 수 있습니다. 액세스 방법은 다음과 같습니다.

생성적 AI 붐이 일어나기 전에도 Google Lookout 앱은 AI를 활용하여 시각 장애인 및 시각 장애인 커뮤니티가 휴대폰 카메라를 사용하여 주변을 탐색할 수 있도록 지원했습니다. 2019년 3월에 출시된 이 앱은 최근 편리한 AI 기반 기능인 Image Q+A를 추가했습니다.

이미지 Q+A 기능을 통해 사용자는 사진을 업로드하고 음성이나 텍스트를 입력하여 이미지에 대해 질문할 수 있습니다. 그러면 사용자는 자신의 우려 사항을 해결하는 이미지에 대한 자세한 설명을 받게 됩니다.

예를 들어, 이미지 속 피사체의 색상, 얼굴 표정 등 피사체와 관련된 구체적인 세부정보에 대해 질문할 수 있으며, 표지판 내용과 같은 이미지 내의 텍스트를 읽어 달라고 앱에 요청할 수도 있습니다.

이 기능은 가을에 출시되었지만 이번 주 Google은 이전에 Twitter였던 X의 게시물을 통해 이 기능에 대한 더 많은 통찰력을 공유했으며 사용자가 이 기술의 이점을 어떻게 얻었는지 보여주었습니다.

AI는 시각 장애인과 부분 시력이 있는 사람들이 세상을 더 잘 인식하도록 어떻게 도울 수 있습니까? ✨
커뮤니티가 이미지에 대해 질문할 수 있게 해주는 @Google Lookout 앱의 기능인 이미지 Q&A에 당사의 기술이 어떻게 활용되는지 설명합니다.
오디오 설명 버전을 시청하세요.→ https://t.co/KNqc6KbTWo pic.twitter .com/TLzNo7Ub0o

이 기술의 기반에는 Google의 AI 모델이 있는데, 이는 Google에 따라 동영상을 이해하고 구체적인 설명을 제공하도록 훈련되었습니다.

무료로 다운로드할 수 있는 앱의 기능에 액세스할 수 있습니다. 하지만 이 기능은 미국, 영국, 캐나다에서는 영어로만 제공됩니다.

이 앱에는 사용자가 텍스트를 훑어보고 소리내어 읽을 수 있는 텍스트 모드를 포함한 여러 가지 혁신적인 기능도 포함되어 있습니다. 라벨을 통해 포장된 식품을 식별할 수 있는 식품 라벨 모드; 달러, 유로, 인도 루피를 빠르게 식별할 수 있는 통화 모드; 그리고 더.