GPT는 어떤 아키텍처를 사용하나요?
GPT는 주의 메커니즘에 기반한 신경망 아키텍처인 트랜스포머 아키텍처를 사용하여 입력과 출력 간의 전역 종속성을 찾습니다. 좀 더 구체적으로 설명하자면, GPT는 디코더 전용 트랜스포머라고 하는 트랜스포머 제품군의 하위 유형에 속합니다.
What architecture does GPT use?
GPT uses the transformer architecture which is a neural network architecture based on the attention mechanism to find global dependencies between the input and the output. To be more specific, GPT belongs to a sub type in the transformer family that is called decoder-only transformer.