멀티모달 모델, 비전 인코더 공개글로벌 수준 벤치마크 달성
  • ▲ ⓒ크래프톤
    ▲ ⓒ크래프톤
    크래프톤이 AI 모델 브랜드 ‘Raon(라온)’을 론칭하고 모델 4종을 오픈소스로 공개했다고 2일 밝혔다.

    Raon은 ‘즐거움’을 뜻하는 순우리말 ‘라온’에서 착안한 이름이다. AI 기술을 통해 게임의 본질적인 즐거움을 창출하고자 하는 크래프톤의 철학을 반영했다.

    크래프톤은 이번 모델 공개를 통해 데이터 수집부터 모델 학습, 성능 평가까지 파운데이션 모델 개발 전 과정을 자체적으로 수행할 수 있는 기술 역량을 입증했다. 향후 AI 모델 브랜드를 중심으로 글로벌 AI 기술 경쟁력을 더욱 강화해 나간다는 계획이다.

    이번에 공개된 모델은 ▲Raon-스피치 ▲Raon-스피치챗 ▲Raon-오픈TTS ▲Raon-비전인코더다. 음성과 시각 정보를 아우르는 크래프톤의 멀티모달 AI 역량을 보여준다.

    Raon-스피치는 텍스트 중심 언어 모델을 확장해 음성 이해와 생성이 가능한 음성 언어 모델이다. 90억 파라미터 규모로, 10B 이하급 공개 음성 언어 모델 중 영어와 한국어 모두 글로벌 1위 성능을 기록했다.

    Raon-스피치챗은 사용자와 모델이 대화 중 자유롭게 끼어들 수 있는 실시간 양방향 통신(Full-duplex) 기술을 적용한 음성 언어 모델이다. 실시간 양방향 음성 모델로서 벤치마크 3종에서 주요 13개 태스크 평균 순위 기준 글로벌 최상위권 성능을 기록했다.

    Raon-오픈TTS는 공개 음성 데이터만으로 학습된 텍스트-음성 변환 모델이다. 두 음성의 자연스러움을 사람이 비교하는 블라인드 평가에서 비공개 데이터 기반 글로벌 연구용 TTS 모델들과 비교해 최상위 수준의 성능을 보였다.

    Raon-비전인코더는 이미지를 AI가 이해 가능한 정보로 바꿔준다. 일부 시각 인식 태스크에서 구글의 대표 비전 인코더 모델(SigLIP2)를 상회하는 결과를 기록했다. 해당 기술은 ‘독자 AI 파운데이션 모델’ 프로젝트에서도 활용 예정이다.

    이강욱 크래프톤 CAIO는 “이번 Raon 모델 시리즈 공개는 AI 기술 역량을 축적해 나가는 과정의 중요한 이정표”라며 “대규모 학습 데이터와 핵심 모델을 오픈소스로 공유해 연구자와 개발자들이 자유롭게 활용할 수 있도록 하고 멀티모달 기술 발전과 국내 AI 생태계의 성장에 기여하기를 기대한다”고 말했다.