b belajar.myudak
V2 cabang

Vision Transformer

Gambar dipotong jadi patch, di-embed, ditambah token [CLS] dan posisi, lalu masuk Transformer encoder.

URUTAN BELAJAR

  1. patch embedding
  2. token CLS
  3. position embedding
  4. encoder block
  5. classification head

HASIL YANG DISIMPAN

Patch embedding untuk gambar kecil.

CEK PEMAHAMAN

Berapa jumlah token untuk gambar 32×32 dengan patch 8×8?

Soal

Soal untuk topik ini menyusul.

Sebelumnya

Membuka

Ujung jalur.