한양대학교 ERICA 소프트웨어융합대학 인공지능학과 유용재 교수는 주식회사 닷과 Microsoft와 협업하여 시각장애인을 위한 시각 이미지 촉각 자동 변환 솔루션인 ‘Dot Vista’를 개발했다고 밝혔다.
‘Dot Vista’는 한양대 유용재 교수 연구팀과 주식회사 닷의 산학 협력을 통해 공동 개발된 제품으로, 점자 그래픽 출력 장치인 '닷 패드(Dot Pad)'를 활용하여 이미지를 촉각으로 변환한다. 이를 통해 시각장애인들이 물체의 형태를 인지하고 학습할 수 있도록 돕는 윈도우 11 CoPilot+ 어플리케이션이다.
해당 어플리케이션은 11월 19일부터 21일까지 온/오프라인으로 진행된 Microsoft 개발자 컨퍼런스 ‘Microsoft Ignite’에서 처음 공개됐다. Microsoft Ignite는 IT 전문가, 개발자, 비즈니스 리더들이 최신 기술 혁신과 제품 업데이트를 공유하는 연례행사로, 올해는 AI와 클라우드 혁신을 중점적으로 다루었다. 이 컨퍼런스에서 Microsoft의 접근성 팀 리더인 Baldwin NG는 “사용자 피드백을 통해 Dot Vista는 시각장애인들에게 필요한 서비스라는 확신했다”며, “Microsoft가 전 세계의 접근성 문제를 해결하는 열쇠를 제공할 것”이라고 말했다.
‘Dot Vista’는 두 가지 주요 기능을 통해 시각장애인들에게 실질적인 도움을 제공한다. 첫 번째 시나리오는 ‘Accessible Zoo’로, 사용자가 동물 이미지를 업로드하면 자동으로 이미지 설명이 생성되고, 해당 설명은 닷 패드를 통해 점자로 출력되어 시각장애인이 촉각으로 동물의 형태를 느낄 수 있게 된다. 두 번째 시나리오는 ‘Fruits Classification’으로, 시각장애인이 과일의 신선도를 촉각으로 직접 느낄 수 있는 기능을 제공한다. 이를 통해 과일의 상태를 이해하는 데 도움을 주며, 신선도 등 특성을 촉각으로 경험할 수 있다. 이 AI 모델들은 차세대 AI 연산기법으로 주목받는 NPU 연산이 활용되었으며, 별도의 서버 없이 AI 기능을 사용할 수 있도록 로컬 모델로 구현되었다. Dot Vista는 2025년 2분기 윈도우 11용 제품으로 출시될 예정이다.
유용재 한양대 교수는 “햅틱스와 AI 기술이 결합된 보조공학 분야는 매우 중요한 연구 영역”이라며 “이번 협업을 시작으로, 닷, Microsoft와 함께 AI 기술을 통해 전 세계 시각장애인들이 삶과 교육에서 풍요로움을 누릴 수 있도록 미디어 및 콘텐츠 접근성 향상에 기여하는 연구를 지속해 나갈 것”이라고 포부를 밝혔다.
유 교수 연구팀은 AI 기반 감각운동기능 교육 시스템, 시청각 미디어에 맞춘 촉각효과 자동 변환 기술 등 다양한 햅틱스 및 AI 기술을 연구하고 있다. 연구팀은 이번 연구를 통해 시각적 이미지로부터 시각장애인에게 필요한 형태, 방향, 특징 등을 추출하고, 이를 만질 수 있는 촉각 그래픽스를 생성하는 ‘AI 프레임워크’를 기반으로, 앞으로 다양한 콘텐츠의 접근성 문제를 해결하기 위한 AI 기술을 지속적으로 연구할 계획이다.
