자동차-프렌들리AI, 비 전문가도 쓸 수 있는 K-언어모델 비교 실험 플랫폼 ‘WBA' 공개

[디지털투데이 황치규 기자]AI 기술 전문 기업 프렌들리AI는 AI 비전문가도 참여할 수 있는 K-언어모델 비교 실험 플랫폼, ‘WBA(World Best AI, 와바’를 출시한다고 6일 밝혔다.

WBA는 블라인드 테스트 방식으로 사용자가 AI언어모델을 평가할 수 있는 서비스다. 평가 순위표 (리더보드, Leaderboard)도 공개된다.

회사 측에 따르면 최근 LG AI연구원, 업스테이지, SKT, 네이버 등 국내 AI 기업들은 다양한 언어모델을 오픈소스로 공개했다. 하지만 개발사가 공개한 일부 벤치마크 점수만으로는 실사용 환경에서 어떤 모델이 더 뛰어난 성능을 지녔는지 비교하기 어렵다.

이에 WBA에는 사용자 중심 평가 시스템이 채택됐다. WBA에 사용자가 원하는 질문을 입력하면 무작위로 선택된 2개 언어모델이 즉시 답변을 제공한다. ‘논리적 응답’ 옵션을 체크할 경우 추론(Reasoning) 언어 모델 2개가 응답을 생성한다. 사용자는 두 답변 중 더 마음에 드는 답변을 선택하면 된다. 평가 대상의 모델 이름은 사용자 투표가 끝나야 공개되므로 점수 조작이 불가능하다. WBA 리더보드 순위는 이 투표 점수를 합산한 결과로 결정된다.

전병곤 프렌들리AI 대표는 “한국에서 AI 언어모델 개발 경쟁이 본격화된 지금, 실제로 대중이 선택하는 진짜 고성능 AI가 무엇인지 확인해볼 기회”라고 말했다.