T2 cabang
Word2Vec
Skip-gram, CBOW, dan negative sampling: cara klasik belajar embedding kata.
URUTAN BELAJAR
- pasangan skip-gram
- subsampling
- distribusi negative sampling
- loss SGNS
HASIL YANG DISIMPAN
Embedding kecil yang mengelompokkan kata-kata serupa.
CEK PEMAHAMAN
Kenapa negative sampling jauh lebih murah daripada softmax penuh?
Soal
Soal untuk topik ini menyusul.
Sebelumnya
Membuka
Ujung jalur.