카카오, 형태소 분석기 '카이' 무료 공개

[한국금융신문 김희연 기자] 카카오가 인공지능(AI) 기술을 적용한 형태소 분석기 'khaiii(Kakao Hangul Analyzer III, 카이)'를 오픈소스로 제공한다.

카카오는 딥러닝 기술 기반으로 개발한 형태소 분석기술을 오픈소스로 공개한다고 30일 밝혔다. 딥러닝 기술 기반의 형태소 분석기가 오픈소스로 제공되는 것은 국내에서 처음이다.

형태소 분석기술은 2개 이상의 글자로 이루어진 단어나 문장을 입력할 때, 형태소 단위로 자동 분리하는 기술이다. 예컨대 '학교에 간다'라고 입력하면 '학교(명사)+ 에(조사)+ 가(동사)+ ㄴ다(어미)'로 형태소 단위와 품사를 파악해 분류해내는 기술이다. 주로 자연어처리 응용 서비스의 기반 기술로 사용되고 정보 검색, 기계 번역, 스마트 스피커나 챗봇 등 여러 서비스에 활용할 수 있다.
이번에 오픈되는 카카오 형태소 분석기 카이는 딥러닝(심층기계학습)을 통해 학습한 데이터를 활용해 형태소를 분석하는 모델이다. 딥러닝 기술 중 하나인 CNN(Convolutional Neural Network, 합성곱신경망) 기술을 이용해 음절 기반으로 형태소를 분석한다. 카카오는 국립국어원에서 배포한 데이터인 세종 코퍼스를 기반으로 오류를 수정하고 카카오에서 자체 구축한 데이터를 추가해 정확도를 높였다. 또 딥러닝 과정에서 C++ 언어를 적용해 일반적으로 딥러닝에 쓰이는 GPU(그래픽처리장치)를 사용하지 않고도 빠른 분석 속도를 구현했다.

이번 카카오 형태소 분석기 공유로 한국어 연구와 챗봇·자연어 처리 응용기술 개발 등 한국어를 활용하는 다양한 분야에서 형태소 분석을 위한 비용과 시간을 줄일 수 있게 됐다.

카이는 깃허브(GitHub)에서 확인할 수 있으며, 누구나 무료로 이용 가능하다. 더 자세한 사항은 브런치에 게재된 카카오AI 리포트에서 확인할 수 있다.

김응균 카카오 자연어처리파트장은 "한국어를 연구하는 분들에게 도움이 되고자 형태소 분석기를 공개하게 되었다"며, "앞으로도 다양한 분야에서 딥러닝 기반의 기술연구를 진행하고 공유해 나갈 예정"이라고 밝혔다.

김희연 기자 hyk8@fntimes.com