IT用語集 › AI & 機械学習 › Word2Vec
Googleが2013年に発表した古典的な単語埋め込みモデル。単語を、意味を持ったベクトルとして表現できることを示した。
有名な例は king - man + woman ≈ queen で、ベクトルの演算が意味の演算として成り立つ。方式は二つあり、CBOWは文脈から単語を予測し、Skip-gramは単語から文脈を予測する。BERTやGPTのような文脈を考慮した現代の埋め込みの先祖にあたる。
king - man + woman ≈ queen