본문 바로가기

전체 글

 (85)
[SQL] DBMS 구조와 테이블 생성 1. 개념 2. 데이터 베이스 3. DATABASE 생성 및 조회 CREATE USER 계정명 @HOST IDENTIFIED BY ‘password'​ client p/g(웹 브라우저 등) server p/g(DB 등) 예 : 웹브라우저client ->버튼눌러서 정보 요청-> 쿠팡server : server에 data요청 my sql - DB server 서비스 요청 : client program My Sql workbench password => save : 로그인 정보 저장 오른쪽 위 토글버튼 : 사이드메뉴(왼,아래,오)를 넣었다 뺐다 뾱뾱 설정바꾸기: edit > preferences > Fonts&colors 개념 데이터베이스 Database Management System (DBMS) : 데이터..
[KoBERT] import gluonnlp as nlp 에서의 에러 해결 ✔️에러 문제 🎉 문제 해결 패키지 설치 시 mxnet을 먼저 설치하고 gluonnlp 설치하면 import 된다 #필요 패키지 설치 !pip install mxnet !pip install gluonnlp as nlp !pip install pandas tqdm !pip install sentencepiece !pip install transformers==3.0.2 !pip install torch !pip install pandas
[KoBERT] No module named 'kobert' 에러 해결 ✔️에러 문제 부트캠프의 미니 프로젝트 과정에서 우리팀은 Kobert를 이용해서 '다중감정분류모델'을 구축했어야했다..... 근데 아래처럼 Kobert 라이브러리를 설치하는 것 까지는 잘 작동하다가#필요 패키지 설치!pip install mxnet!pip install gluonnlp pandas tqdm!pip install sentencepiece!pip install transformers==3.0.2!pip install torch!pip install pandas#KoBERT 깃허브에서 불러오기 # 여기까진 ㄱㅊㄱㅊ!pip install git+https://git@github.com/SKTBrain/KoBERT.git@master#이 부분에서 ModuleNotFoundError: No mod..
231116 TIL | 미니프로젝트 - 4 ⭐오늘 진행한 것 단어사전 기반으로 모델링Kobert 진행 완료 Kobert 레퍼런스 : https://velog.io/@fhflwhwl5/Python-KoBERT-7가지-감정%[…]류모델-구현하기 ✔️Trial and Error Kobert 모델 import 안되는 문제 발생 → hugging face에서 불러와서 해결 완료 📝느낀 점 감정분석 모델은 긍/부정으로만 나뉘는 모델만 알고 있었는데 다중 분류를 위해서 새로운 모델인 Kobert모델을 직접 모델링할 수 있어서 좋은 기회였다. 다만 감정사전을 직접 구축하는 단계를 추가해야 완벽히 감정분석을 익힐 수 있을 듯 파이썬 버전이 바뀌면서 모델이 안돌아가서 너무 당황했지만 코드 수정으로 해결! 뿌듯했음 🚩 다음 할 일 : 단어 사전 구축(목표 : 금~다..
231115 TIL | 미니프로젝트 - 3 ⭐오늘 진행한 것 프로젝트 주제 변경 : 화장품 리뷰 데이터 분석 퍼스널 컬러 추천 → 일기 감정 분석 기반 노래 추천 멜론 크롤러 코드 짜기 - ㅎㄱ, ㄴㄹ, ㅈㅇ 모델링 방향 기획 - ㅇㅈ 🚩내일 할 일 : 단어사전 기반으로 모델링 (LSTM - 지우가 보낸 프로젝트, Kobert- 내가보낸 프로젝트) 진행해보기 이후 앙상블 or 추가로 여러모델돌려보고 앙상블✔️참고 GIT(레퍼런스는 모델링 진행하면서 더찾아보기) Kobert추가 모델 :BERT, KoBERT, KoBERT-large, KoElectra-base, KoElectra-base, KLUE RoBERTa-base, KLUE RoBERTa-large Kobert : https://github.com/jongmin-oh/lyrics_emoti..
231114 TIL | 미니프로젝트 - 2 미니 프로젝트 단계 데이터 수집 - 글로우픽 리뷰 데이터 웹 크롤링 => 진행 중 데이터 전처리 => 진행 중 2-1(띄어쓰기, 외국어, 자음모음(ㅋㅋ,,ㅎㅎㅎㅎ), 특수문자 ) 등 리뷰에서 제거 EDA 사용자 평점 분포, 화장품 브랜드 분포 등 데이터 기본 정보 시각화 4.'퍼스널 컬러'가 포함된 리뷰만 남기기 논의 필요 토큰화 후 고빈도단어 추출 => 진행 중 6.고빈도 단어추출결과 바탕으로 'Personal color vocabulary' 정의 논의 필요 리뷰에서 많이 나오는 단어들을 각 "웜톤/쿨톤 으로 분류" -> 세부톤 "봄 웜톤, 여름 쿨톤, 여름 뮤트, 가을 웜톤, 가을 뮤트 , 겨울 쿨톤" 으로 분류 모델링 사용자 입력 -> 추천 결과 출력 오늘 진행한 것 ㅎㄱ, ㅈㅇ - 리뷰 데이터 웹..
231113 TIL | 미니프로젝트 - 1 미니 프로젝트 단계 1. 데이터 수집 - 글로우픽 리뷰 데이터 웹 크롤링 => 진행 중 2. 데이터 전처리 2-1(띄어쓰기, 외국어, 자음모음(ㅋㅋ,,ㅎㅎㅎㅎ), 특수문자 ) 등 리뷰에서 제거 3. EDA - 사용자 평점 분포, 화장품 브랜드 분포 등 데이터 기본 정보 시각화 4.'퍼스널 컬러'가 포함된 리뷰만 남기기 논의 필요 5. 토큰화 후 고빈도단어 추출 논의 필요 6.고빈도 단어추출결과 바탕으로 'Personal color vocabulary' 정의 논의 필요 리뷰에서 많이 나오는 단어들을 각 "웜톤/쿨톤 으로 분류" -> 세부톤 "봄 웜톤, 여름 쿨톤, 여름 뮤트, 가을 웜톤, 가을 뮤트 , 겨울 쿨톤" 으로 분류 7. 모델링 8. 사용자 입력 -> 추천 결과 출력 오늘 진행한 것 ㅎㄱ, ㅈㅇ ..
Segemntation | 개요 Segmentation 개요 - Segmentation(세분화)란 이미지에서 관심객체를 픽셀단위로 추출하는 것을 말한다. 관심객체가 이미지 어디에 있는 위치 뿐아니라 그 객체의 모양을 추출하고자 할때 방식이다. - 딥러닝의 발전과 함께 많은 성능향상이 이뤄진 분야 이다. 응용분야 자율주행 자동자 영상의학 Segmentation 종류 Semantic segmentation Instance segmentation Panoptic segmentation Category(범주)별로 분류하는 segmentation이다. - class분류 이미지내의 모든 픽셀(요소)에 대해서 class를 분류하는 것을 목표로 한다. (배경포함) 같은 class의 객체가 여러개 있을 경우에 각각을 구분하지 않는다. 객체별로 분류하는..

티스토리툴바