BIG DATA & AI
-
NLP 라이브러리 소개 - Document Embedding, Word Embedding / BERT, KoBERT, Word2Vec, Glove, FastText, ELMoBIG DATA & AI/NLP 2021. 4. 14. 20:48
지난 글(아래 링크 참조)에서, NLP에 대한 전반적인 개념 및 embedding 종류에 관하여 알아보았다. 2021.04.08 - [PROGRAMMING/NLP] - 자연어 처리 개념 (NLP Bible) 자연어 처리 개념 (NLP Bible) 프로젝트 중 자연어 처리 및 얕은 인공지능을 사용할 일이 생겼다. 졸업 프로젝트로 자연어 처리 및 딥러닝을 진행하면서, (심지어 비지도 학습이었다) 다시는 NLP를 건드리지 않겠다고 다짐했었 sysout.tistory.com 개념을 습득하였으니, 어서 실습으로 들어가자! ... 고 하고 싶은데 또 다른 이론을 배워야 한다. Embedding에는 여러 모델과 방법이 있는데, 우선 Document Embedding과 Word Embedding 위주로 어떤 pre-t..
-
자연어 처리 개념 (NLP Bible)BIG DATA & AI/NLP 2021. 4. 8. 15:36
프로젝트 중 자연어 처리 및 얕은 인공지능을 사용할 일이 생겼다. 졸업 프로젝트로 자연어 처리 및 딥러닝을 진행하면서, (심지어 비지도 학습이었다) 다시는 NLP를 건드리지 않겠다고 다짐했었는데, 회사에서 하게되다니!! 다시 국어 공부와 기계 가르치기 공부를 시작한다.. 책도 빌렸다. "밑바닥부터 시작하는 딥러닝(Deep Learning from Scratch)"이라고, Oreilly 출판간이다. 나중에 책 정리도 포스팅 해야겠다. 참고로 졸업 프로젝트 주제는 "소설 텍스트 분석을 통한 등장인물 도출 및 관계 분석" 이었는데, 주제 자체도 흥미로웠고 진행하면서 visualization 하는 부분이 재밌었던 기억이 난다. 정확도가 안 나와서 문제였지만 😂😂 자연어 처리(NLP)란? 일단, 우리가 평소에 쓰..