태그 / #Transformer

#Transformer

1편

AI

LLM이 문장을 읽는 순서, 토큰·임베딩·Attention

모델 파일 안의 숫자 표가 문장을 읽는 순서 — 토큰으로 자르고 임베딩으로 벡터를 만들고 Attention 으로 관계를 계산해 다음 토큰 하나를 고르기까지 — 를 Transformer Explainer 화면과 함께 따라갑니다.

TransformerAttentionTokenEmbeddingLLM 인프라 입문