쉬엄쉬엄블로그

이 색깔은 주석이라 무시하셔도 됩니다. N21 (Sentence Classification) 실습 Hugginface from_pretrained() 선학습된 encoder model, tokenizer를 불러오는 함수 # https://huggingface.co/docs/transformers/model_doc/auto#transformers.AutoTokenizer from transformers import AutoTokenizer # transformers.AutoTokenizer의 from_pretrained() 함수 실습 # 많은 Tokenizer 가 있으나 이번 실습에서는 3가지 정도를 확인해본다. klue_tokenizer = AutoTokenizer.from_pretrained('..

이 색깔은 주석이라 무시하셔도 됩니다. N21 (Sentence Classification) 이론 Neural Network based Classification 접근방법 supervised learning (교사 학습) 예제 문제를 풀게하고 정답과 비교하여 잘 맞추는 방향으로 학습 구현하기도 쉽고 성능도 안정적으로 올라감 하지만 사람들이 직접 데이터를 구축해야 하는 단점이 있음 classification (분류) 가장 높은 숫자를 부여받는 class가 선택되도록 학습 감성 분류기 구현 예 감성분석 다음에 또 가려구요! - Positive 이게 좀 비좁은 느낌을 가져다 줄지도! - Negative 역시나 비싼 호텔인가 싶었어요. - Neutral 무료 Wi-Fi - Objective Class 설계 (4..

이 색깔은 주석이라 무시하셔도 됩니다. Neural Network based NLP -Overview- NLP Tasks NLP in Real Life Natural Language Processing with Disaster Tweets “Three people died from the heat wave so far” - 1 : 재난 “on the outside you’re ablaze and alive but you’re dead inside” - 0 : 재난 아님 어떤 Tweet이 진짜 재난인지 아닌지 분류 Tweet이 입력되면 0과 1이 출력하는 문제로 진짜 재난일 경우 1이 출력 LitCoin Natural Language Processing (NLP) Challenge 텍스트가 입력되면 생물의..