사이언스타임즈

양손으로 어떤 물체를 다룰 때 보이지 않는 부분까지 3차원으로 나타내는 인공지능(AI) 기술을 울산과학기술원(UNIST) 연구진이 개발했다.

UNIST 인공지능대학원 백승렬 교수팀은 단일 RGB 영상만으로 양손과 처음 보는 기구의 복잡한 상호작용을 실시간 3D로 시각화할 수 있는 AI 모델 'BIGS'(Bimanual Interaction 3D Gaussian Splatting)를 개발했다고 9일 밝혔다.

AI는 카메라로 촬영된 2D 데이터만 입력받기 때문에 손과 물체의 실제 위치나 입체적인 형태를 파악하려면 3차원으로 전환하는 과정이 필요하다.

기존 기술은 한 손만 인식하거나 사전에 스캔 된 물체만 대응할 수 있었다.

이 때문에 가상현실(VR)이나 증강현실(AR) 기술에서 현실감 있는 상호작용 장면을 재현해내는 데 한계가 있었다.

연구팀이 개발한 모델은 손이 가려지거나 일부만 보이는 상황에서도 전체 형상을 안정적으로 예측할 수 있고, 처음 보는 물체도 학습된 시각 정보를 통해 보이지 않는 부분까지 자연스럽게 그려낼 수 있다.

깊이 센서나 여러 각도의 카메라 없이 단 한 대의 카메라로 찍은 단일 RGB 영상만으로 이 같은 복원이 가능해 현장에서 쉽게 적용할 수 있다고 연구팀은 설명했다.

이 모델은 사물의 형상을 퍼지는 점 구름 형태로 표현하는 방식인 3D 가우시안 스플래팅(Gaussian Splatting)을 기반으로 한다. 픽셀 단위로 경계가 뚜렷한 포인트 클라우드 방식과 달리 손과 물체가 만나는 접촉면 등을 더 자연스럽게 나타낼 수 있다.

손이 겹치거나 일부가 가려진 상황에서는 모든 손을 하나의 기준 손 구조에 맞춰 정렬하는 방식을 이용해 해결했다. 또 학습된 확산 모델을 활용한 점수 증류 방식을 적용해 영상에 보이지 않는 물체의 뒷면까지 복원한다.

국제 데이터 세트를 활용한 실험 결과 손의 자세, 물체의 형상, 두 손과 물체 간 접촉 정보 복원, 화면 재현 렌더링 품질 등에서 기존 기술보다 우수한 성능을 보인 것으로 나타났다.

백승렬 교수는 "이번 연구는 향후 VR, AR, 로봇 제어, 원격 수술 시뮬레이션 등 다양한 분야에서 실시간 상호작용 복원 기술로 활용될 것"이라고 말했다.

이런 연구 결과는 오는 11일부터 5일간 미국에서 열리는 컴퓨터 비전 분야 학회인 'CVPR 2025'에서 발표된다.

태그(Tag)

관련기사

‘목소리 나이테’로 뇌 노화의 흔적 찾는다 ▲ 사람의 목소리와 말투는 나이가 들며 변한다. 이 목소리를 분석하면 뇌 나이를 측정하는 것은 물론 실제 나이와 측정된 나이의 차이를 이용해 치매 등 퇴행성 뇌 질환 위험도 확인할 수 있음이 밝혀졌다. Ⓒ사이언스타임즈 권예슬/ChatGPT 사람의 얼굴에는 살아온 세월이 묻어난다고 한다. 주름과 표정에 한 사람의 인생이 새겨진다는 것이다.

AI에 원자력·항공 수준의 안전장치가 필요하다 전직 안전 엔지니어의 폭로와 '반복적 배치'의 구조적 한계 최근 전 세계 생성형 인공지능(AI) 시장을 선도하는 빅테크 기업들은 차세대 AI 모델 개발의 속도전에 치중하고 있다. 하지만 그 결과 필수적인 윤리적·기술적 안전 통제 장치를 소홀히 다루고 있다는 내부자의 강력한 경고가 제기되고 있다. 최근 ChatGPT 개발

"디지털 주권"인가, "자원 침탈"인가? 빅테크의 유럽 입성과 '디지털 주권'의 양면성 인공지능(AI) 서비스의 폭발적인 성장에 맞춰 글로벌 빅테크 기업들이 유럽 대륙 곳곳에 대규모 데이터센터 건설을 추진하고 있다. 데이터센터는 미국 중심의 데이터 독점을 막고 유럽 자체적인 기술 자립, 즉 '디지털 주권(Digital Sovereignty)'을 확보하기 위한 핵심

달콤한 아첨꾼이 된 AI 인류를 위협하는 새로운 방식: 멸망이 아닌 "내분과 분열" 최근 인공지능(AI) 분야의 권위자들은 AI가 인간의 통제를 벗어나 인류를 위협할 수 있다는 경고를 잇달아 내놓고 있다. 그러나 인공지능이 영화 속 터미네이터처럼 물리적인 무력을 행사하기 전에, AI가 뿌려놓은 미묘한 아첨과 공감이 인간들 사이의 갈등을 부추겨 스스로 서로를

AI가 90년 난제를 풀었다? 무려 나비에-스토크스 방정식이다 9월 8일 화요일, OpenAI가 짧은 성명 하나를 올렸다. 자사의 미공개 내부 모델이 밀레니엄 문제 중 하나인 나비에-스토크스 방정식의 존재성과 매끄러움 문제를 풀어냈다는 내용이었다. 맙소사, 무려 그 유명한 나비에-스토크스 방정식이다. 이어서 수 시간 만에 "AI가 100만 달러짜리 수학 난제를 정복했다&q

목록으로

통합검색