자연어 처리 (4)
2-5 구조 분석 어구 구조 분석: 단어 열로 구성된 어구를 통해 문장의 구조를 파악하는 방법 할당 분석: 단어와 단어 사이의 관계를 수치로 나타내고, 이를 분석하여 문장의 의미 파악, 주어진 문장을 구성하는 단어와 단어 사이의 관계를 수치화된 구조로 표현하고, 이를 바탕으로 기계적으로 처리해 관계를 파악하는 방법 술어절 구조 분석: 주격, 서술격, 목적격, 보격, 관형격, 부사격, 감탄격의 7가지로 구성되며 문장의 의미는 술어와 대상을 나타내는 명사구로 표현할 수 있으므로 이를 식별하는 처리를 의미함 딥러닝을 이용하는 방법: 딥러닝의 개념을 적용해 구조 분석을 수행하는 것, 구체적으로 RNN이 구조 분석에 사용 어구 구조 분석 단어열로 구성된 어구를 통해 문장의 구조를 파악하는 방법 동사구, 명사구, ..
자연어 처리 (2)
2-2 자연어 처리 기법 자연어 처리 기법의 종류 워드 임베딩(Word Embedding) 기법: 빈도수를 이용한 방법 횟수 기반 임베딩(Frequency-based Embedding): 단어의 빈도수를 바탕으로 하는 NLP방법, BOW, Count Vector, TF-IDF Vector 기법 예측 기반 벡터(Prediction-based Vector, Feed-forward 신경망 언어 모형): 단어 간의 관계를 벡터로 표현된 다차원 공간에서 유사도를 측정하고, 수치적 계산을 이용해 추론하는 방법, Word2Vec, CBOW, Skip-Gram 구조 분석: 문장의 구조 분석을 이용한 방법 어구 구조 분석, 할당 분석, 술어절 구조 분석 학습 및 예측을 통한 텍스트 생성 NLP 기법은 워드 임베딩, 구조..
