카카오는 18일 자체 구축한 'AI 안전성 평가 플랫폼'을 통해 지난달 28일 허깅페이스에 공개한 '카나나-2-1.3B-Instruct'와 '카나나-2-3B-Instruct'의 유해성 및 편향성을 측정한 결과를 발표했다. 평가에는 한국정보통신기술협회(TTA), 한국과학기술원(KAIST), 카카오가 공동 구축한 한국어 특화 AI 안전성 벤치마크 'AssurAI'가 활용됐다. AssurAI는 한국의 사회·문화적 맥락을 반영해 35개 위험 범주 내 9560개 항목을 평가한다. 평가 결과 카나나-2 1.3B 모델은 종합점수 0.70을 기록해 구글 '젬마'(0.68)와 알리바바 '큐웬'(0.58)을 앞섰다. 3B 모델 역시 0.70을 기록하며 젬마(0.66)와 큐웬(0.62)보다 높은 점수를 받았다. 세부 영역별로 1.3B 모델은 범죄·불법 행위 부문에서, 3B 모델은 성적 콘텐츠·아동보호와 권리 침해 영역에서 비교 모델 대비 우위를 보였다. 카카오는 향후 자체 개발하는 AI 모델에 출시 전 안전성 평가를 상시 적용하고, 평가 범위를 멀티모달 및 에이전틱 AI로 확대할 계획이다. 김경훈 카카오 AI 세이프티 리더는 이번 평가가 오픈소스 모델의 안전성을 사전에 점검하고 결과를 공개한 사례라며, 앞으로도 안전성 검증을 모델 출시의 핵심 단계로 정착시키겠다고 밝혔다.