SKT, 독자 구축 ‘에이닷엑스 3.1 라이트’ 오픈소스로 공개

[디지털투데이 이진호 기자] SK텔레콤은 11일 오픈소스 커뮤니티 허깅페이스에 독자 구축 거대언어모델(LLM)인 '에이닷엑스(A.X) 4.1 라이트'를 오픈소스로 공개했다.

이번에 공개한 에이닷엑스 3.1 라이트는 기존 에이닷 전화 통화요약에 적용했던 에이닷엑스 3.0 라이트 모델의 업그레이드 버전이다. 70억개(7B) 매개변수를 기반으로 하는 경량 모델로 SKT는 프롬 스크래치 방식을 적용해 모델 구축과 데이터 학습 등 전 단계 개발을 직접 진행했다.

SKT는 "정보 처리 용량, 소비 전력 등 다양한 사양의 모바일 기기에서 최적의 품질을 구현할 수 있도록 해 기업들의 원활한 서비스 제공에 기여할 수 있을 것으로 기대된다"고 밝혔다.

에이닷엑스 3.1 라이트는 같은 규모의 매개변수를 바탕으로 하는 자매 LLM인 에이닷엑스 4.0 라이트와 동등한 수준의 우수한 한국어 처리능력을 갖췄다. 대표적인 한국어 능력 평가 벤치마크인 KMMLU에서 에이닷엑스 3.1 라이트는 4.0 라이트 대비 96% 수준의 성능을 나타냈다. 한국어 및 한국 문화 벤치마크인 CLIcK에서는 에이닷엑스 3.1 라이트가 4.0 라이트 대비 102% 수준의 성능을 기록했다.

SKT는 향후 보유 LLM을 꾸준히 오픈소스로 공개할 예정이다. 에이닷엑스 3.1 라이트 후속인 매개변수 340억개 프롬 스크래치 모델인 에이닷 3.1도 이달 중 발표할 예정이다.

한편 SKT는 그 동안 확보한 우수한 LLM 기술 역량을 바탕으로 정부가 추진하는 '독자 AI 파운데이션 모델 개발사업'에 지원할 예정이다.

SKT는 2018년부터 AI 언어 모델을 개발해 2019년 한국어 언어모델인 코버트(KoBERT)를 고객센터 챗봇 등에 활용하기 시작했고, 2020년 국내 최초로 GPT2를 한국어로 개발해 오픈소스로 공개한 바 있다. 2022년 선보인 에이닷 서비스에는 자체 개발한 A.X 모델을 적용해 자유 주제로 대화가 가능하게 했다. 지난해에는 A.X 3.0 모델을 에이닷 전화 통화요약 기능에 적용했다.

앞으로도 SKT는 에이닷엑스 3 계열의 소버린 AI 모델로 자생력 있는 기술을 갖추는 동시에 최적화된 성능·효율이 필요한 영역에는 대규모 학습(CPT)에 기반한 에이닷엑스 4 계열 모델을 활용할 예정이다. 이러한 투 트랙 전략으로 기업들이 각자 환경에서 AI 기술을 보다 쉽게 활용할 수 있는 선택지를 제하는 게 목표다.

기존 모델의 성능을 대폭 혁신할 수 있도록 GPU 자원을 확충과 개발 역량 강화에 집중한다. 프롬 스크래치 방식 개발 등 LLM 관련 기술 역량도 지속 고도화할 예정이다.

김태윤 SK텔레콤 파운데이션 모델 담당은 "꾸준히 쌓아 온 한국형 LLM 개발 역량을 바탕으로 AI 생태계 자립성을 높이고, 국가 AI 경쟁력 제고에 기여하도록 노력할 것"이라고 밝혔다.