컨텐츠 바로가기

    03.17 (화)

    NC AI, '월드 파운데이션 모델' 성공 시연…'Sim2Real' 한계 극복

    댓글 첫 댓글을 작성해보세요
    주소복사가 완료되었습니다

    고난도 로봇 조작 태스크서 글로벌 최고 성능 모델 대비 80% 수준 성공률 달성

    [아이뉴스24 문영수 기자] NC AI는 로봇 지능의 핵심인 '월드 파운데이션 모델(WFM, World Foundation Model)'을 성공적으로 시연했다고 16일 밝혔다.

    NC AI는 대규모 컴퓨팅 인프라가 요구되는 월드 모델 연구 분야에서 자체 연구 인프라를 활용해 모델 학습과 검증을 수행, 주요 태스크에서 실무 적용 가능성을 확인할 수준의 성공률을 기록했다고 강조했다.

    아이뉴스24

    [사진=NC AI]

    <이미지를 클릭하시면 크게 보실 수 있습니다>



    아이뉴스24

    [사진=NC AI]

    <이미지를 클릭하시면 크게 보실 수 있습니다>



    전 세계 피지컬 AI 산업의 가장 큰 난제는 가상 시뮬레이션에서 학습한 로봇이 현실 세계의 미세한 마찰이나 물리적 변수 앞에서는 오작동을 일으키는 이른바 'Sim2Real(시뮬레이션-현실) 격차'다. 이를 해결하기 위해 미·중 빅테크들이 앞다퉈 로봇 파운데이션 모델에 천문학적인 투자를 단행하고 있는 가운데, NC AI는 시각적 모방을 넘어 현실의 정교한 물리 법칙까지 예측하는 WFM으로 해법을 제시했다.

    기존 WFM이 영상을 생성하고 이를 VLM으로 추론 후 행동을 선택하는 반면, NC AI의 WFM은 내부에서 영상을 생성하기 전 정보인 잠재공간(Latent Space) 정보로부터 바로 행동을 생성하는 모델을 적용해 효율성과 정확성을 동시에 확보했다. 영상 생성, 추론 단계를 제거해 속도를 높이고 고정밀 물리 엔진으로 생성한 학습 데이터를 다수 학습해 생성한 행동의 정확도까지 제고한 것이다.

    여기에 엔씨소프트 시절부터 20년 이상 대규모 MMORPG를 서비스하며 축적해 온 방대한 가상 세계 구축 노하우와 국내 유일의 3D생성 모델인 '바르코 3D(VARCO 3D)'를 자체 구축한 NC AI의 기술이 결합돼 현실 세계와 흡사한 수준의 3D와 시뮬레이터를 구현할 수 있다.

    또한 이번 연구 성과에서 가장 돋보이는 점은 '자원 효율성'이다. NC AI는 글로벌 톱 성능 모델의 파인튜닝에 필요한 GPU 자원의 단 25% 만으로 WFM을 성공적으로 학습시켰다.

    성능 지표 역시 실무 적용이 가능한 수준으로 끌어 올렸다. 로봇 팔의 복잡한 움직임을 제어하는 총 24개의 고난도 로봇 조작 태스크를 대상으로 시뮬레이터 수준의 정교한 예측을 테스트한 결과, 24개 전체 태스크 기준 SOTA 대비 70%의 성능을 확보했다. 특히 현장 투입 및 상용화와 직결되는 상위 18개 핵심 태스크를 선별해 측정한 결과에서는 엔비디아 코스모스 등 최고 성능 모델의 80%에 달하는 높은 태스크 성공률을 기록했다.

    NC AI는 로봇 학습의 필수 요소인 '데이터 부족' 문제를 근본적으로 해결할 대규모 합성 데이터 생성 파이프라인도 월드모델로 구현할 계획이다. 기존에는 눈이 내리는 공장, 조명이 꺼진 야간 물류센터, 예상치 못한 사람의 개입 등 현실에서 발생 가능한 다양한 변수를 실제 영상으로 수집하려면 막대한 시간과 비용이 소모됐다.

    하지만 NC AI의 WFM 환경에서는 프롬프트 조작만으로 이러한 극한 환경의 비디오 데이터를 대량으로 생성할 수 있다. 실제 A100 1대 기준 10초 비디오 생성에 80초 소요되는 고효율로, A100 성능의 3배 수준인 H100 GPU를 100대 활용할 경우 무려 1만시간 분량의 신규 합성 비디오 데이터를 단 11일 만에 생성할 수 있는 대량 생성 효율을 달성했다

    NC AI는 이를 바탕으로 반도체 클린룸, 철강 공정, 조선소 블록 등 한국 제조업 특성에 맞춘 '도메인 특화 맞춤형' 합성 데이터를 공급하여 실제 현장 데이터의 부족한 퍼즐을 보완할 예정이다.

    NC AI는 리얼월드, 삼성SDS, 씨메스, 컨피그 인텔리전스, 레인보우 로보틱스, 엔닷라이트, 펑션베이 등 기업은 물론 ETRI, KETI, 한국자동차연구원 등의 정부출연연, 카이스트, 서울대, 고려대, GIST 등 학계까지 모든 생태계를 아우르는 'K-피지컬AI 얼라이언스'의 핵심 주체로 참여하고 있다. 정밀 물리 시뮬레이션부터 3D 에셋 생성, 그리고 로봇 현장 실증으로 이어지는 거대한 가치 사슬 속에서 NC AI의 WFM은 다양한 기술들의 기반으로서 역할을 수행할 예정이다.

    이연수 NC AI 대표는 "이번 WFM 연구 성과는 막대한 연산 자원에만 의존하던 기존의 로봇 AI 개발 방식에서 벗어나, 정밀한 물리 이해와 최적화된 학습 아키텍처를 통해 글로벌 톱티어 수준의 실질적 유효성을 증명해 냈다는 데 큰 의의가 있다"며 "향후 NC AI의 독보적인 월드모델 기술력을 바탕으로 K-피지컬AI 얼라이언스와 함께 한국 산업 특화형 로봇 생태계를 견고히 구축하고, 나아가 글로벌 피지컬 AI 패권을 주도하는 핵심 경쟁력으로 키워나갈 것"이라고 강조했다.

    /문영수 기자(mj@inews24.com)


    [ⓒ 아이뉴스24 무단전재 및 재배포 금지]


    기사가 속한 카테고리는 언론사가 분류합니다.
    언론사는 한 기사를 두 개 이상의 카테고리로 분류할 수 있습니다.