ADV-008숲모델 해부형
밀집 모델
Dense Model
학습 난이도
숲
답변을 만들 때 모델 전체가 함께 작동하는 구조.
한 문장으로 이해하기
밀집 모델은 답을 만들 때 모델의 모든 부분이 함께 작동하는 전통적인 구조입니다. 구조가 단순하지만 규모가 커지면 비용도 함께 커집니다.
이렇게 떠올리세요
모든 직원이 모든 일에 다 같이 투입되는 회사와 같습니다.
실제 예시
초기 GPT 계열은 입력마다 전체 파라미터가 작동하는 밀집 모델이었습니다.
핵심 한 문장
밀집 모델은 매번 모델 전체가 함께 일하는 구조입니다.
위 문장을 보지 않고 자기 말로 다시 설명해보면 오래 기억에 남습니다.