🕷️ELMo

ELMo(Embeddings from Language Model)는 2018년에 제안된 새로운 워드 임베딩 방법론입니다. ELMo라는 이름은 세서미 스트리트라는 미국 인형극의 캐릭터 이름이기도 한데, 뒤에서 배우게 되는 BERT나 최근 MS가 사용한 Big Bird라는 NLP 모델 또한 ELMo에 이어 비슷한 캐릭터의 이름을 사용했습니다.

논문 링크 : https://aclweb.org/anthology/N18-1202

Ⅰ. ELMo(Embeddings from Language Model)

Ⅱ. BiLM(Bidirectional Language Model)의 사전 훈련

Ⅲ. BiLM의 활용

Last updated