[손슬기 기자]

<이미지를 클릭하시면 크게 보실 수 있습니다>

[디지털투데이 손슬기 기자] AI 테크 기업 크라우드웍스는 모티프테크놀로지스 컨소시엄에 데이터 공급 핵심 파트너로 참여해 정부 '독자 AI 파운데이션 모델(독파모)' 사업에 합류한다고 24일 밝혔다.

크라우드웍스는 이번 사업에서 모티프 컨소시엄이 개발 중인 3000억(300B) 파라미터급 추론형 대형언어모델(LLM)의 학습 데이터 구축을 담당한다. 단순 데이터 가공을 넘어 모델의 논리적 사고 역량을 높이는 '단계별 추론(Chain-of-Thought) 특화 학습 데이터셋' 구축에 집중한다.

자체 개발한 비정형 문서 데이터 전처리 솔루션 '알피 날리지 컴파일러(Alpy Knowledge Compiler)'도 투입한다. 표·차트 등 복잡한 구조의 비정형 문서를 정교하게 파싱(parsing)해 AI가 이해할 수 있는 형태로 변환하는 역할을 맡는다는 설명이다.

크라우드웍스 관계자는 "추론형 LLM의 지능은 얼마나 논리적이고 정교한 데이터를 학습하느냐에 달려 있다"며 "국내 빅테크들과의 협업으로 검증받은 데이터 정제 기술을 결집해 독자 AI 모델 개발을 뒷받침할 것"이라고 말했다.

<저작권자 Copyright ⓒ 디지털투데이 (DigitalToday) 무단전재 및 재배포 금지>