본문으로 바로가기
인트라위키 용어

거대언어모델(LLM)

거대언어모델(LLM)은 대규모 언어 데이터를 학습해 문맥을 처리하고 질문 답변·요약·번역·문서 생성 등 다양한 자연어 작업을 수행하는 인공지능 모델이다.

개요

거대언어모델(LLM)은 대규모 텍스트 데이터를 학습하여 문장의 맥락과 단어 사이의 관계를 파악하고 자연어를 이해·생성하도록 설계된 인공지능 모델이다. 영어로는 Large Language Model이라고 하며 LLM이라는 약칭이 널리 사용된다.

거대언어모델은 사용자의 질문에 답하거나 문서를 요약하고 번역·분류·작성하는 등 다양한 언어 작업을 하나의 모델에서 수행할 수 있다. 최근에는 텍스트뿐 아니라 이미지와 음성 등 여러 형태의 정보를 함께 처리하는 인공지능 시스템의 핵심 기술로도 활용되고 있다.

작동 원리와 학습

거대언어모델은 문장을 일정한 단위로 나누어 처리한다. 이러한 단위를 토큰이라고 하며, 단어나 단어의 일부 또는 문자 등이 토큰으로 표현될 수 있다. 모델은 많은 문장에서 토큰들이 어떤 순서와 관계로 나타나는지를 학습하고 주어진 문맥에서 다음에 올 가능성이 높은 토큰을 예측하는 방식으로 문장을 생성한다.

현대의 주요 거대언어모델에는 트랜스포머라는 신경망 구조가 널리 사용된다. 트랜스포머는 문장 안에 있는 여러 단어의 관계와 중요도를 계산하는 어텐션 기법을 활용해 긴 문맥에서 의미 관계를 파악할 수 있도록 설계된 구조다.

모델을 처음 구축할 때에는 대규모 문서와 코드 등 다양한 데이터를 이용한 사전학습이 이루어진다. 이후 특정 작업에 맞는 추가학습이나 사람의 평가를 활용한 조정 과정을 거쳐 사용자의 지시를 더 잘 따르도록 개선할 수 있다.

주요 활용 분야

거대언어모델은 질의응답, 문서 작성, 요약, 번역, 정보 분류, 아이디어 생성, 프로그래밍 코드 작성 등 다양한 분야에 활용된다. 기업에서는 고객 상담, 업무 문서 작성, 자료 검색과 지식관리 등을 지원하는 생성형 인공지능 서비스에 적용할 수 있다.

공공부문에서도 내부 행정업무 지원과 정책자료 검색, 민원 서비스, 특화된 지식 기반의 생성형 인공지능 구축 등을 위해 LLM 활용이 검토되고 있다. 특정 기관이 보유한 자료나 전문지식을 모델과 연결해 해당 분야에 특화된 서비스를 만드는 방식도 사용된다.

최근에는 외부 데이터베이스에서 필요한 정보를 검색한 뒤 그 결과를 바탕으로 답변을 만드는 검색증강생성 방식이나, 여러 도구와 시스템을 연결해 업무를 수행하도록 하는 인공지능 에이전트에도 거대언어모델이 활용된다.

거대언어모델의 한계

거대언어모델이 생성한 답변이 항상 사실과 일치하는 것은 아니다. 모델이 실제로 존재하지 않는 정보나 잘못된 내용을 그럴듯한 문장으로 만들어 내는 현상을 일반적으로 환각이라고 한다.

또한 학습 데이터에 포함된 오류와 편향이 출력 결과에 반영될 수 있으며, 질문 방식이나 제공된 문맥에 따라 답변이 달라질 수도 있다. 최신 정보가 학습 데이터에 포함되지 않았거나 특정 전문 분야의 정보가 부족하면 정확도가 낮아질 수 있다.

개인정보나 기업 내부자료를 외부 LLM 서비스에 입력하는 경우 데이터 처리와 저장 방식에 따른 보안 문제가 발생할 수 있다. 저작권이 있는 자료의 학습과 생성물 이용, 생성 결과의 책임 문제도 지속적으로 논의되는 영역이다.

안전한 활용과 검증

거대언어모델의 결과를 중요한 의사결정에 사용할 때에는 사람이 내용을 확인하고 원문이나 공식 자료를 통해 사실관계를 검증하는 과정이 필요하다. 특히 의료, 법률, 금융처럼 잘못된 정보가 큰 영향을 줄 수 있는 분야에서는 모델의 답변만으로 판단하지 않는 것이 중요하다.

조직에서 LLM을 활용할 때에는 입력 가능한 정보의 범위와 개인정보 처리기준, 생성 결과 검증 절차, 사용자 권한과 기록관리 등의 원칙을 마련할 필요가 있다. 모델의 성능뿐 아니라 안전성·신뢰성·보안성 등을 함께 평가하는 것도 중요하다.

거대언어모델은 인간처럼 사실을 이해하고 판단하는 존재라기보다 학습된 데이터와 문맥을 바탕으로 언어의 패턴을 계산하고 결과를 생성하는 인공지능 모델이다. 따라서 높은 활용 가능성과 함께 오류와 편향, 보안 등 기술적 한계를 이해하고 목적에 맞게 사용하는 것이 중요하다.

참고·검토 자료

  1. 한국지능정보사회진흥원 공공부문 거대언어모델 LLM 오픈소스 활용방안
  2. 한국지능정보사회진흥원 LLM 안전성 및 신뢰성 평가 데이터셋 구축
  3. 한국전자통신연구원 거대언어모델의 환각현상 완화 및 평가 기술 동향
이 문서에 정정 요청