SKT, 'AI 멀티엔진' 시동…한국판 '텔코LLM' 6월 출격

AI 고객센터·유통망·네트워크 운용 등에 활용

(서울=연합인포맥스) 최정우 기자 = 통신 서비스를 잘 이해하는 똑똑한 '텔코LLM(거대언어모델)'이 이르면 오는 6월 선보인다.

SK텔레콤은 5G 요금제, T멤버십, 공시지원금 등 국내 통신 전문 용어와 AI 윤리가치와 같은 통신사의 내부 지침을 학습한 '텔코LLM'이 오는 6월 중 개발을 완료할 예정이라고 30일 밝혔다.

'텔코LLM'은 GPT, 클로드와 같은 범용 LLM이 아니라 통신업에 특화된 LLM을 뜻한다.

SK텔레콤은 오픈AI, 앤트로픽 등과 협력을 통해 통신사의 서비스나 상품, 멤버십 혜택, 고객 상담 패턴 등 방대한 양의 데이터를 수집, 정형·비정형 데이터를 선별하고 있다.

이를 통해 자사 LLM인 에이닷엑스(A.X)와 오픈AI의 GPT-4, 앤트로픽의 클로드에 한국어로 된 통신 관련 데이터를 학습시켜 다양한 텔코LLM을 개발 중이다.

SK텔레콤은 통신사들이 AI컨택센터(AICC), 유통망, 네트워크 운용, 사내 업무 등 활용처와 특정 업무마다 최적화된 LLM을 가져다 쓸 수 있게 하는 '멀티(다중) LLM' 전략을 추진하고 있다.

에릭 데이비스 SK텔레콤 AI Tech Collaboration 담당은 "1개의 범용 LLM으로 통신사들이 하려는 다양한 서비스와 문제를 해결하는 것은 쉽지 않을 것"이라며 "통신 데이터와 도메인 노하우에 맞춰 조정하는 미세조정(파인튜닝)과 모델평가(벤치마킹)를 거쳐 다양한 텔코LLM을 만들고 이를 상황에 맞게 골라 쓸 수 있도록 하는 것"이라고 설명했다.

범용 LLM은 통신사의 번호이동 방법이나 절차 등 전문지식을 제대로 학습하지 않아 요금제 추천 같은 고객 요구에 제대로 대응하기 어렵다.

통신 관련 데이터를 추가로 학습해 이 문제를 해결하는 과정이 텔코LLM의 파인튜닝이다.

이렇게 파인튜닝이 된 텔코LLM은 휴먼 피드백 기반의 강화학습(RLHF) 과정을 거친다.

마지막으로 텔코LLM의 언어 능력, 추론 능력, 통신 특화과제 수행 능력 등에 대해 모델평가(벤치마킹)를 진행하게 된다.

SK텔레콤은 통신사들이 생성형 AI 애플리케이션을 효율적으로 구축, 개발할 수 있는 '인텔리전스 플랫폼'도 공개했다.

멀티LLM부터 멀티모달, 검색증강생성(RAG) 등까지 아우르는 일종의 '기업용 AI 개발·운용 패키지'다.

범용 LLM은 성능에 비례하여 추론 비용이 많이 들고, 특정 영역에 대한 이해도는 낮을 수 있다.

이를 통신사의 서비스에 적용하면 비효율적인 만큼 상대적으로 통신업에 특화된 멀티 LLM을 이용해야 한다는 것이 회사 측 설명이다.

SK텔레콤은 멀티LLM을 쉽고 효율적으로 사용할 수 있는 인텔리전스 플랫폼을 현재A.(에이닷) 등의 서비스 등에 적용 중이며, 적용 사례를 지속 확대할 예정이라고 밝혔다.

jwchoi2@yna.co.kr