Large Language Models

단어 임베딩: 좌표가 된 의미

단어 임베딩을 3D 성운으로 탐험해보세요. 가까운 점은 비슷한 단어를 뜻하고, king − man + woman ≈ queen이 하나의 방향으로 나타나요.

영어 원문에서 기계 번역되었어요. 영어 원문 열기

Prologue · 1/4

의미의 성운

모델 안에서는 모든 단어가 수천 차원의 벡터가 돼요. 여기서는 그것을 3D로 투영해서 성운처럼 지켜봐요. 빛의 점 하나하나가 단어이고, 두 점이 가까이 있을수록 의미도 서로 가까워요. 천천히 돌려 보면서 단어들이 흩어진 공간의 느낌을 잡아 보세요.

성운을 돌려 보면서 빛의 점들이 몇 개의 무리로 모이는 모습을 살펴보세요.

NeighborhoodAnimals

種と成体/幼体の軸。dog/cat/puppy/kitten が並びます。

단어 임베딩: 좌표가 된 의미 - Luneidea