Large Language Models

Plongements de mots : le sens comme coordonnées

Explorez les plongements de mots comme une nébuleuse en 3D où les points proches désignent des mots similaires, et où roi − homme + femme ≈ reine apparaît comme une direction.

Traduction automatique depuis l’original anglais. Ouvrir l’original anglais

Prologue · 1/4

Une nébuleuse de sens

Dans le modèle, chaque mot devient un vecteur à des milliers de dimensions. Ici, nous projetons cela en 3D et l’observons comme une nébuleuse. Chaque point de lumière est un mot, et plus deux points sont proches, plus leurs sens se ressemblent. Faites-la tourner lentement pour ressentir l’espace dans lequel les mots se dispersent.

Faites tourner la nébuleuse et remarquez les points de lumière se regrouper en quelques amas.

NeighborhoodAnimals

種と成体/幼体の軸。dog/cat/puppy/kitten が並びます。

Plongements de mots : le sens comme coordonnées - Luneidea