강원 랜드 파칭코 - 2025년 실시간 업데이트
카카오는 자체 개발 언어모델‘카나나(Kanana)’의 연구 성과를 담은 테크니컬 리포트를 아카이브(ArXiv)에 공개했다.이와 더불어 언어모델 라인업 중 국내 AI 생태계 활성화를 위해‘Kanana Nano 2.1B’모델을 오픈소스로 깃허브(GitHub)에 배포했다.
테크니컬 리포트는 매개변수와 학습 방법,학습 데이터 등 세부 사항을 담아낸 AI 논문이다.카카오는 이번 리포트에 다양한 사이즈에 이르는 카나나 언어모델 전체의 Pre-training부터 Post-training까지 전 과정을 자세히 담았다.카나나 모델의 구조,학습 전략,경마 모바일베팅그리고 글로벌 벤치마크에서의 성과도 확인할 수 있다.
카카오의 초거대 언어모델‘카나나 Flag’는 지난해 말 학습을 완료했다.카카오는 지난해 10월 개발자 컨퍼런스‘if(kakaoAI)2024’에서 공개한‘카나나 언어모델’의 전체 라인업(Kanana Flag,과 와 грамматикаEssence,Nano)을 모두 구축하게 됐다.
‘Kanana Flag’는 글로벌 최고 수준의 한국어·영어 성능을 달성한 모델이다.한국어 성능을 평가하는‘LogicKor‘KMMLU’벤치마크에서 타 모델을 압도하는 처리 능력을 입증했다.영어 성능을 평가하는‘MT-bench‘MMLU’벤치마크에서는 경쟁 모델과 유사한 성과를 기록했다.또한,학습 자원 최적화를 통해 유사 사이즈의 모델 대비 50% 이상 비용을 절감하며,SOTA(State-of-the-Art) 수준의 효율성과 성능을 동시에 구현해냈다.
카카오는 향후 카나나 모델에 강화 학습과 연속 학습 기반의 최신 기술을 접목해 추론,수학,코딩 능력을 강화하고,정렬 기술을 고도화해 사용자 요청의 수행 정확도를 높일 계획이다.이를 통해 음성,이미지,영상 등 다양한 형태로 소통 가능하도록 지속적 모델 고도화를 이어가며,일상에 실질적인 가치를 더하는 기술로 자리잡을 수 있도록 기술 경쟁력을 강화해 갈 예정이다.
한편,카카오는 테크니컬 리포트와 함께 자체 개발 경량 모델‘Kanana Nano 2.1B’를 깃허브에 오픈소스로 공개했다.
카카오는 이번 오픈소스 공개를 통해 AI 기술의 접근성을 높이고자 하며,연구자와 개발자들이 해당 모델을 토대로 다양한 응용을 시도할 수 있도록 모델의 업데이트를 지속 지원할 계획이다.
김병학 카카오 카나나 성과리더는 “모델 최적화와 경량화 기술을 바탕으로 라마,젬마 등 글로벌 AI 모델과 견줄 수 있는 고성능의 자체 언어모델 라인업을 효율적으로 확보하게 됐으며,이번 오픈소스 공개를 통해 국내 AI 생태계 활성화에 기여할 수 있을 것으로 기대한다”고 말했다.