계산에서 기억으로: 딥시크 엔그램과 구글 SCONE이 보여주는 AI 메모리 아키텍처의 전환 지난 글에서 딥시크의 엔그램(Engram)을 다루면서, 현재의 대형 언어모델이 왜 불필요하게 많은 계산을 반복하고 있는지에 대해 살펴본 적이 있습니다. 엔그램은 자주 등장하는 n-gram 패턴이나 고정된 지식을 계산으로 매번 재구성하는 대신, 대규모 메모리에서 바로 꺼 contents.premium.naver.com 지난 글에서 딥시크의 엔그램(Engram)을 다루면서, 현재의 대형 언어모델이 왜 불필요하게 많은 계산을 반복하고 있는지에 대해 살펴본 적이 있습니다.
엔그램은 자주 등장하는 n-gram 패턴이나 고정된 지식을 계산으로 매번 재구성하는 대신, 대규모 메모리에서 바로 꺼내 쓰는 구조를 통해 이 문제를 해결하려는 시도였습니다. 이를 통해 모델의 초기 레이어가 하던 정적인 작업을 줄이고, 더 중요한 추론과 reasoning에 계산 자원을 쓰게 만든다는 점이 핵심이었습니다.
흥미롭게도 비...