Inception의 Mercury Coder: 디퓨전(Diffusion) 기술 기반으로 만들어진 새로운 언어 모델 (dLLM) 현재 대형 언어 모델(LLM)은 '오토리그레시브(Autoregressive)' 방식으로 작동합니다. 쉽게 말해, 문장을 만들 때 한 번에 전체를 구성하는 것이 아니라, 앞에서부터 차례대로 한 글자(토큰)씩 예측해서 생성하는 방식입니다.
예를 들어, "오늘 날씨가"라는 contents.premium.naver.com 현재 대형 언어 모델(LLM)은 '오토리그레시브(Autoregressive)' 방식으로 작동합니다. 쉽게 말해, 문장을 만들 때 한 번에 전체를 구성하는 것이 아니라, 앞에서부터 차례대로 한 글자(토큰)씩 예측해서 생성하는 방식입니다.
예를 들어, "오늘 날씨가"라는 문장을 만들었다면, 그다음에 올 단어를 예측하고, 이어서 그다음 단어를 예측하는 식으로 진행됩니다. 이러한 방식의 가장 큰 특징은 ‘앞에서 생성된 결과에 따라 다음 단어가 결정’된다는...
