ELMo - ELMo - Wikipedia
![]() | Nezdá se, že by toho bylo dost Reference v současné době v tomto článku k prokázání pozoruhodnost. Nicméně, editor provedl vyhledávání a tvrdí, že existuje dostatek zdrojů, které to naznačují je pozoruhodné téma.Září 2020) (Zjistěte, jak a kdy odstranit tuto zprávu šablony) ( |
ELMo je vkládání slov metoda pro reprezentaci sekvence slov jako odpovídající sekvence vektorů.[1] Tokeny na úrovni znaků jsou brány jako vstup do obousměrného LSTM který vytváří vložení na úrovni slov. Jako BERT (ale na rozdíl od vložení slova vytvořeného „Pytel slov "přístupy a dřívější vektorové přístupy jako Word2Vec a Rukavice ), Vložení ELMo jsou kontextově citlivá a vytvářejí různé reprezentace slov, která mají stejný pravopis, ale mají různé významy (homonyma ) jako „banka“ v „břehu řeky“ a „bankovní zůstatek“.
To bylo vytvořeno vědci na Allenův institut pro umělou inteligenci[2] a University of Washington.
Reference
- ^ Peters ME, Neumann M, Iyyer M, Gardner M, Clark C, Lee K, Zettlemoyer L (2018). "Hluboké kontextové reprezentace slov". arXiv:1802.05365 [cs.CL ].
- ^ https://allennlp.org/elmo
![]() | Tento software článek je a pahýl. Wikipedii můžete pomoci pomocí rozšiřovat to. |