목록skip gram (1)

Ordinary day

2. Word Vector

(해당 포스팅은 Natural Language Processing with Deep Learning CS224N/Ling284 를 토대로 작성한 것입니다.) 1. 컴퓨터에서는 우리가 사용하는 언어의 '의미'를 어떻게 다룰까?대개 일반적으로는 상위어 관계와 유의어 집합을 갖고있는 '워드넷(WordNet)'같은 분류학을 사용한다. (대표적으로 프린스턴 대학에서 만들고 관리하는 워드넷) 그러나 이산표현에도 문제점이 있는데..리소스는 훌륭하지만 단어의 뉘앙스를 놓칠 수 있다.신조어들을 놓칠 수 있다.주관적이다.표현을 생성하고 적용하는데 사람의 노력이 많이 필요하다.가장 큰 문제는 단어의 유사도를 계산하기 힘들다는 점이다.one-hot 벡터로 표현하는 것은 localist representation 이라고도 한다..
Study/NLP 2017. 8. 14. 00:59
Prev 1 Next