전체 글15 자연어 분류 (NLP Classification) 기초 설명 자연어처리에서 분류 Classifiaction란? 해피 AI 자연어처리에서 분류는 것은 문장이나 token을 의도와 목적에 맞게 구분하는 작업이라고 보시면 됩니다. 왜 분류(Classification)가 필요한가요? 해피AI 글쓴이나 발화자의 의도를 파악하기 위합니다. - 문장에 대한 감정적인 판단을 위해서 긍정인지?부정인지? - 말에서 의도하고자 하는 것은 무엇인지? - 어떤 의미로 쓰인 단어인지? 왜 분류(Classification)가 필요한가요? 해피AI 글쓴이나 발화자의 의도를 파악하기 위합니다. - 문장에 대한 감정적인 판단을 위해서 긍정인지?부정인지? - 말에서 의도하고자 하는 것은 무엇인지? - 어떤 의미로 쓰인 단어인지? 분류(Classification)모델은 어떤게 .. 2023. 4. 9. 지금 진행중인 자연어처리 연구에 대한 간략한 소개 지금 저는 Commonsense 상식의 극성을 잘 판별할 수 있는 Classifier의 기법을 제안하는 연구를 하고 있습니다(올해 EMNLP를 목표로 합니다) Commonsense 안에 있는 Demograhpic term이 Classifier의 성능에 중요한 영향을 미치고 있어서 이 Demograhpicterm을 컨트롤 하는 방법을 연구중입니다. 여러가지 메소드로 결과를 내긴 했는데... 좀 더 정리를 해야 합니다. 다음에 좀 더 자세히 소개해 드리겠습니다. 자연어 처리에서 Commonsense에 관해 관심있으신 분은 질문주세요. 제가 아는 선에서 말씀드릴게요. 향후 ChatGPT를 비롯한 범용적인 모델에 Commonsense의 활용이 필수적이어서 이 부분에 관한 좀 더 근본.. 2023. 4. 6. NER 과 분류 task간의 차이가 뭘까요? 나의 외주 업체 사장님이 NER 작업을 해달라고 하셨는데 원하는 작업은 NER 보다는 분류를 해야 되는 작업이었다. Q:NER도 어떻게 보면 분류인데 그냥 분류 task하고의 차이가 뭘까요? NER는 Token 단위로 분류를 하고 Classification은 문장단위로 분류를 하는 것이라 보면 됩니다. 예를들어 문장이 "나는 어제 학교에 가서 즐겁게 수업을 듣고 왔다."라는 문장이 있다면 분류 Task: 나는 어제 학교에 가서 즐겁게 수업을 듣고 왔다 ->긍정으로 분류 Ner Task: 나는 어제 학교에 가서 즐겁게 수업을 듣고 왔다 -> 나(주어), 학교(장소), 수업(배움) 등 이런 차이가 있죠! 토큰 단위로 분류하느냐? 문장 단위로 분류 하느냐 인데요.. 아래 그림은.. 2023. 4. 4. 이전 1 2 3 다음
