CVPR 에서 출간한 논문을 읽던 중 2023년 Meta AI Research에서 공개한 SAM 모델이라는 것을 알게 되었다. SAM은 어떤 이미지든 세그먼트할 수 있는(Segment Anything)능력을 갖춘 모델로, 입력된 이미지의 픽셀을 분석해 객체의 경계를 매우 정확하게 식별하고 분할(Mask)하는 기능을 제공한다.
특히 제로샷(Zero-shot) 성능이 뛰어나 별도의 추가 학습 없이도 다양한 이미지를 정확히 분할할 수 있다는 장점을 갖고 있다. SAM으로 형성된 Mask 결과물 주요 특징은 다음과 같다.
Zero-shot Segmentation: SAM의 가장 중요한 특징은 사전 학습된 지식을 바탕으로 별도의 추가 학습(fine-tuning) 없이도, 어떤 이미지에서든 즉각적으로 세그멘테이션이 가능하다. Prompt-based Segmentation: 사용자는 텍스트, 클릭 포인트, 바운딩 박스 등 다양한 형태의 프롬프트를 입력하여 원하는 영역을 손쉽게 분할할 수 있다. ...