AI, 유리창 비친 모습과 창 너머 풍경 구분할 수 있게…KAIST 기술 개발
전산학부 윤성의 교수 연구팀, 피지컬 AI 핵심기술 개발
- 김종서 기자
(대전=뉴스1) 김종서 기자 = 한국과학기술원(KAIST)은 전산학부 윤성의 교수 연구팀이 빛과 물질의 상호작용, 공간 인식, 미래 상황 예측, 행동 계획을 아우르는 피지컬 AI 핵심 기술을 개발했다고 6일 밝혔다.
개발한 기술은 △유리나 물처럼 투명한 물체를 정확히 인식하는 기술 △빛과 물질의 상호작용을 분석해 주변 환경을 이해하는 기술 △사진 한 장만으로 로봇이 목적지를 찾아가는 기술 △미래 상황을 예측해 행동을 계획하는 기술 등이다.
이 기술들을 통해 AI가 '보고(인식) 이해하고(물리 이해) 예측하고(미래 예측) 행동하는(계획)' 전 과정을 수행하는 기반을 제시했다.
사람은 유리창을 볼 때 유리에 비친 모습과 너머의 풍경을 자연스럽게 구분한다. 그러나 기존 AI는 두 정보를 하나의 영상으로 인식해 투명한 물체를 제대로 이해하지 못하는 경우가 많았다.
개발한 기술들을 적용하면 AI는 투명한 환경에서도 장면을 정확하게 이해하고 시각 정보를 실제 행동으로 연결해 스스로 이동 경로를 찾아갈 수 있다. 사람처럼 행동 결과를 예측해 가장 적절하게 움직이는 것도 가능하다.
이번 기술은 서비스 로봇과 자율주행 로봇 등 차세대 자율 로봇의 핵심 기술로 활용될 것으로 기대된다.
윤 교수는 "이번 연구는 AI가 단순히 눈으로 보는 것을 넘어 현실 세계를 이해하고 앞으로 일어날 상황까지 예측해 스스로 행동을 결정하는 방향으로 발전하고 있음을 보여준다"며 "이번 성과가 자율주행차와 휴머노이드 로봇 등 실제 환경에서 작동하는 다양한 피지컬 AI 기술의 발전에 기여하기를 기대한다"고 말했다.
연구팀은 향후 세계 모델, 미래 예측, 행동 계획을 통합한 차세대 피지컬 AI 기술을 개발할 계획이다. 특히 다양한 환경에서 지속해서 학습하고 스스로 진화하는 체화형 AI 구현을 목표로 연구를 확장할 예정이다.
윤 교수가 교신저자로 참여한 이번 연구들은 과학기술정보통신부와 정보통신기획평가원(IITP), 한국연구재단(NRF)의 지원을 받아 수행 중인 피지컬 AI 및 지능형 로봇 연구과제의 일환으로 수행됐다.
연구 성과는 국제 인공지능(AI) 학회 'ICLR 2026'과 'CVPR 2026'에서 구두 발표 2편과 하이라이트 논문 2편 등 총 4편의 논문으로 발표됐다.
jongseo12@news1.kr
Copyright ⓒ 뉴스1. All rights reserved. 무단 전재 및 재배포, AI학습 이용금지.









