서울대학교 AI연구원(AIIS)이 스카이인텔리전스와 손잡고 로봇 비전 공동연구를 진행하고 있다. 형태가 계속 변하는 케이블 같은 유연 물체를 로봇이 배선 작업에 활용할 수 있도록 학습 데이터를 만드는 연구로, 이 성과가 지난 2026년 8월 23일 방영된 JTBC 특집 다큐멘터리 ‘한국의 승부수-피지컬 AI’에서 소개됐다.
다큐멘터리에는 스카이월드와이드(종목코드 357880)와 자회사 스카이인텔리전스가 개발한 산업용 합성데이터·디지털 트윈 기반 피지컬 AI 학습 데이터 생성 기술이 담겼다. 로봇은 조명이나 각도, 물체 위치가 조금만 달라져도 오작동하기 쉬운데, 현실에서 이런 변수를 모두 재현해 데이터를 모으려면 시간과 비용이 크게 들고 설비 고장·안전사고 같은 상황은 반복 재현 자체가 어렵다는 점이 두 회사가 이 기술을 개발한 배경이다.
디지털 트윈으로 만든 합성데이터, 산학 연구로 이어지다
두 회사는 디지털 트윈 가상환경에서 마찰계수, 재질, 조명, 카메라 조건 등을 수학적 파라미터로 구현해 합성데이터를 생성한다. 엔비디아 옴니버스를 기반으로 데이터 생성과 라벨링, 품질검증까지 자동화했고, 현장에서 발생한 오류를 가상환경에 반영해 모델을 다시 학습시키는 Real-to-Sim-to-Real 데이터 루프도 구축했다. 스크래치나 오염, 변형처럼 현실에서 표본을 확보하기 어려운 상황도 이 방식으로 재현할 수 있다는 설명이다.
이재철 스카이인텔리전스 대표는 “계산과 추적, 재활용이 가능하고 피지컬 AI에 전달하면 즉시 학습에 활용할 수 있는 데이터를 학습용 합성데이터라고 부른다”며 “합성데이터 생성과 함께 피지컬 AI의 병목을 해결하는 전체 데이터 루프와 인프라를 구축하는 것이 중요하다”고 말했다.
서울대 AIIS와 함께 푸는 유연 물체 배선 난제
서울대 AIIS와의 공동 연구는 케이블처럼 형태가 계속 변하는 유연 물체를 로봇이 다루도록 하는 배선 작업에 초점을 맞추고 있다. 고정된 형태의 물체와 달리 케이블은 매 순간 모양이 달라져 기존 로봇 비전 기술로는 정확한 인식과 조작이 쉽지 않은데, 이 문제를 합성데이터와 디지털 트윈 기법으로 풀어보려는 시도다. 스카이인텔리전스는 이와 별개로 글로벌 산업용 로봇 기업 ABB로보틱스와도 프레임워크 협약을 맺어 산업 현장 적용 범위를 넓히고 있다.
신재혁 스카이월드와이드 대표는 “한국 제조업의 진짜 자산은 숙련공들의 손끝에 축적된 노하우”라며 “숙련 인력이 은퇴하더라도 기술이 단절되지 않도록 이를 데이터로 만들고 로봇에게 학습시켜 산업의 자산으로 계승하는 것이 중요하다”고 강조했다. 스카이월드와이드는 10년 이상 데이터베이스관리시스템(DBMS)과 그래프 기술을 개발해온 회사로, 국내 유일의 그래프 데이터베이스(GDB) 특허를 기반으로 기업의 AI 전환을 지원해왔다.
서울대 AIIS와 스카이인텔리전스의 이번 협업은 대학 연구실의 로봇 비전 연구가 산업 현장의 데이터 병목 해소로 직접 이어지는 사례로 꼽힌다. 케이블 배선처럼 표준화된 해법이 없던 문제에 합성데이터 기반 접근이 실제로 적용될 수 있을지 후속 연구 결과가 주목된다.