Segment Anything 소개

SAM은 이미지 인코더와 프롬프트 인코더의 두 부분 아키텍처를 사용하여 작동합니다. 이미지 인코더는 입력 이미지를 한 번 처리하는 반면, 프롬프트 인코더는 다양한 프롬프트에 대해 신속하게 마스크를 생성할 수 있습니다. SAM은 포인트, 박스, 텍스트 또는 자유 형식 입력을 포함한 다양한 유형의 프롬프트를 수용합니다. 프롬프트가 주어지면 SAM은 이미지에서 관련 객체나 영역을 식별하고 이를 위한 픽셀 완벽한 마스크를 생성합니다. 모델의 제로샷 일반화 기능은 추가 훈련 없이 새로운 맥락에서 낯선 객체를 세분화할 수 있게 합니다. SAM은 또한 상호작용적으로 작동할 수 있어 사용자가 여러 프롬프트를 통해 세분화를 개선할 수 있으며, 모호한 프롬프트에 대해 여러 유효한 마스크를 생성할 수 있습니다.