NC AI, ‘바르코-비전 2.0’ 멀티모달 모델 4종 공개

[한국금융신문 김재훈 기자] 엔씨소프트(공동대표 김택진닫기김택진기사 모아보기, 박병무 이하 엔씨) AI 전문 계열사 NC AI가 자체 개발 멀티모달 ‘VARCO-VISION(바르코-비전)’으로 국내 AI 생태계 발전에 앞장선다.

NC AI는 16일 한국어 기반 멀티모달 AI 기술력을 집약한 총 4종(14B, 1.7B, 1.7B OCR, Video-Embedding) VARCO-VISION 2.0 멀티모달 AI 모델을 오픈소스로 공개한다고 발표했다.

VARCO-VISION 2.0 14B는 글로벌 오픈소스 VLM((비전언어모델) 최고 성능으로 알려진InternVL3-14B(140억 파라미터)와 알리바바 Ovis2-16B, Qwen2.5-VL 7B를 능가하는 성과를 달성했다. 4종의 모델 중 14B와 임베딩 모델 2종은 16일 1.7B와 OCR모델은 차주 중 공개 예정이다.
VARCO-VISION 2.0은 이미지와 텍스트를 함께 이해해 질문에 답할 수 있는 차세대 인공지능 모델이다. 여러 장의 이미지를 동시에 분석할 수 있어 복잡한 문서나 표, 차트도 효과적으로 처리할 수 있다는 점이 핵심 차별화 요소다. 한국어와 영어 모두 자연스럽게 이해할 수 있으며 특히 텍스트 생성 능력과 한국 문화에 대한 이해도를 크게 향상시켰다.

특히 오늘 공개된 14B모델 경우 멀티모달AI로 기존 최고 성능으로 알려진 InternVL3-14B, Ovis2-16B, Qwen2.5-VL 7B 등 동급 모델들을 영문 이미지 이해, 한국어 이미지 이해, OCR 벤치마크 등 다양한 평가에서 능가하며 멀티모달 AI에서도 소버린AI 가능성을 확인했다.

NC AI는 개인과 산업의 활용도를 실질적으로 높이기 위해 14B 파라미터 모델과 함께 1.7B 파라미터 경량 모델을 동시에 제공한다. 14B 모델은 복잡한 멀티이미지 분석과 고도화된 추론이 필요한 업무용 환경에 최적화되어 있으며 1.7B 경량 모델은 스마트폰이나PC 등 개인 기기에서도 원활하게 동작할 수 있도록 설계됐다.

이를 통해 대규모 클라우드 환경뿐 아니라 개인 디바이스에서도 고성능 멀티모달AI를 활용할 수 있다.

이미지 내 문자를 인식하는 광학 문자 인식 작업에 특화된 모델 VARCO-VISION-1.7B-OCR도 내놓았다. 기존 OCR(광학문자판독) 모델들과 달리 이미지와 언어 정보를 동시에 학습한VLM기반 접근 방식을 채택해 기존 오픈소스OCR 모델 대비 한국어OCR 능력이 더 높은 것으로 확인됐다.


이 모델의 가장 큰 특징은 AnyRes 해상도 분할 입력 방식을 적용한 것으로, 입력 이미지를 다수의 조각으로 나누고 각 부분에서 높은 해상도 정보를 생성하는 구조를 통해 다양한 해상도의 이미지를 손실 없이 효율적으로 처리한다. 특히 노이즈나 흐림 등이 포함된 어려운 환경에서도 이미지의 전반적인 분위기나 시각적 단서를 바탕으로 정밀하게 글자를 인식할 수 있어, 한국어-영어 혼합 환경에서도 높은 인식 정확도를 보여준다.

마지막으로 멀티모달 임베딩 모델VARCO-VISION-Embedding은 텍스트, 이미지, 비디오 간의 의미적 유사도를 고차원 임베딩 공간에서 정밀하게 계산한다. 임베딩이란 영상의 내용을 숫자로 변환해서 저장하는 것이다. 이 기술을 통해 사용자의 자연어 질의에 따라 동영상 콘텐츠를 고차원 임베딩으로 변환하고 임베딩 간의 거리나 유사도를 기반으로 관련성 높은 이미지나 비디오를 검색할 수 있다.

이번에 공개된 모델 4종은 금융, 교육, 문화, 쇼핑, 제조 등 다양한 도메인에서 활용 가능하다. 복잡한 보고서, 계약서, 청구서 등의 자동 분석 및 디지털화, 표와 차트가 포함된 문서 처리나 주문서 자동 정리 및 요약 등 문서 처리 및 자동화 분야에서 광범위하게 활용할 수 있다.
또한 제품 이미지 기반 자동 설명 생성, 비디오 콘텐츠의 자연어 기반 검색 시스템, 크리에이티브 콘텐츠 생성 및 광고 문구 작성 등 콘텐츠 및 미디어 분야에서도 업무효율의 증대를 가져올 것으로 기대된다.

NC AI의 이번 모델들은 단순한 성능 향상을 넘어 기술적 효율성에서도 주목할 만한 성과를 보여준다. VARCO-VISION 2.0의 경우 고품질 데이터 선별 과정과 새로운 데이터 합성 기술을 통해 상대적으로 적은 컴퓨팅 자원으로도 대규모 데이터를 효율적으로 학습할 수 있도록 최적화했다.

이번 모델 발표로 NC AI는 파운데이션 모델을 기반부터 구축하는 From Scratch 방식LLM 모델 개발 경험에 더해 멀티모달 모델 구축 능력까지 갖춘 독자 AI 기술력을 다시 한 번 입증했다. 특히 한국어 특화 성능과 글로벌 수준의 기술력을 동시에 확보해 국내 AI 산업 경쟁력을 크게 높였다는 평가다.

NC AI는 이번에 공개하는 4종 모델 모두를 연구용 오픈소스로 공개한다. 기업과 개인, 공공기관 누구나 활용할 수 있도록 함으로써 전국민 AI 생태계 발전에 기여하겠다는 의지다.

이연수 NC AI 대표는 "기술 고도화로 글로벌 트렌드가 텍스트만 처리하는 언어모델을 넘어 비전 모델을 함께 활용하는 비전언어모델로 전환되고 있다"며 "이번 4종 모델 공개를 통해 미디어와 게임, 패션 등 버티컬 AI로 기존 국내 멀티모달AI를 선도하는 NC AI가 비전언어모델에서도 한국의 주권을 지킬 수 있는 가능성을 확인했다"고 강조했다.

김재훈 한국금융신문 기자 rlqm93@fntimes.com