Saksikan logits berubah menjadi distribusi probabilitas melalui softmax, berubah bentuk dengan temperature, dan menciut menjadi satu kata yang disampel.
Diterjemahkan otomatis dari naskah asli berbahasa Inggris. Buka naskah asli berbahasa Inggris
Untuk kelanjutan dari "Once upon a ___", model menghasilkan skor (sebuah logit) untuk setiap kata dalam kosakatanya. Di sini kita mengurutkan hanya kandidat-kandidat utama sebagai pilar cahaya. Tinggi setiap pilar adalah logit-nya. Anda dapat melihat "time" menonjol di atas yang lain.
Perhatikan tinggi pilar dan temukan logit kata mana yang paling menonjol.
Ketajaman (entropi) 19%. 0% adalah satu titik, 100% adalah distribusi seragam.