ViT Prof. Anderson Rocha Tavares Bloco 2 · Slide 2 / 2

Patches como tokens visuais

Bloco 2 — Patches

Clique em um patch

Selecione um patch para ver como ele é transformado em embedding

Patches:

← Selecione um patch para ver o processo

Analogia: texto vs. imagem

Texto

cachorro ↓ embedding [0.67, -0.23,
0.91, 0.14…]

Imagem

↓ embedding [0.23, -0.51,
0.84, 0.12…]
✂️
Achatar (flatten)

O patch P×P é convertido em um vetor de P²×C valores (C = canais de cor).

🔢
Projeção linear

Uma matriz W projeta o vetor achatado para o espaço de dimensão d do modelo.

🔗
Mesma dimensão

Todos os patches geram embeddings com a mesma dimensão d — pronto para o encoder.

🧩 Patches visuais são os 'tokens' da imagem — cada um é transformado em um vetor denso de mesma dimensão.