본문 바로가기

전체 글

(72)
SQL로 하는 데이터 분석 | 2. 데이터 조회 | 작성 순서, 문자열 패턴, 날짜, AND-OR, ORDER BY, LIMIT [코드잇] SQL로 하는 데이터 분석 '강의를 수강하고 정리한 내용입니다. 목차 데이터베이스 기본 개념 및 테이블 생성 데이터 조회 데이터 분석 테이블 조인을 통한 깊이있는 데이터 분석 서브쿼리와 뷰를 활용한 유연한 데이터 분석 2. 테이블 조회 쿼리 실행 - ctrl + enter(드래그 후 실행시 드래그한 쿼리만 실행) 쿼리 전체 실행 - ctrl +shift +enter SQL 작성법 SQL문 끝에는 항상 세미 콜론 써줄것 SQL 문 안에는 공백이나 개행등을 자유롭게 넣을 수 있음(문장 구분은 세미콜론 기준) SQL문의 대소문자 구분 문자 - 대문자 : 예약어, 사용자지정부분 - 소문 데이터 베이스 이름과 테이블 이름 데이터 베이스이름.테이블이름 - 데이터 베이스 이름 뒤에 점.을 붙이고 테이블 이..
SQL로 하는 데이터 분석 | 1.데이터베이스 기본 개념 및 테이블 생성 [코드잇] SQL로 하는 데이터 분석 '강의를 수강하고 정리한 내용입니다. 목차 데이터베이스 기본 개념 및 테이블 생성 데이터 조회 데이터 분석 테이블 조인을 통한 깊이있는 데이터 분석 서브쿼리와 뷰를 활용한 유연한 데이터 분석 1. 데이터베이스 기본 개념 및 테이블 생성 [ DBMS ] 데이터베이스 : 일정한 체계 속에 저장된 데이터의 집합 DBMS : 데이터베이스 관리 시스템, 데이터베이스에서 데이터를 조회 종류 : MySQL, ORACLE,SQL Server, SQLite , MariaDB 서버 - 클라이언트 구조로 사용 SQL(Structured query Language) - DBMS에 명령하는 언어 DBMS를 사용한다 = 실행되고 있는 server에 client를 이용해서 접속한 후, 원하는 ..
2023 AI 허브 안심존 데이터 활용 경진대회 (feat. 최우수상) 2023 AI 허브 안심존 데이터 활용 경진대회 [ 대회 상세 내용 ] ○ 공모개요 - AI 허브( 바로가기 )에 있는 헬스케어 데이터를 이용한 아이디어 기획 및 제안하고, 우수 아이디어를 선정하여 시상 ○ 공모주제 - 헬스케어 데이터를 이용한 아이디어 기획 및 제안 ○ 기간 및 일정 - 접수 기간 : 2023. 11. 28 (화) ~ 12. 10 (일) 까지 ○ 시상내역 - 최우수상: 1팀 (50만원) - 우수상: 3팀 (각 30만원) ○ 심사기준 - 주제적합성(15), 데이터 활용 적절성(30), 우수성 및 창의성 (30), 실현가능성(15), 파급효과 (10) * 실제로 데이터를 신청하여 아이디어를 기획 제출할 경우 가점 5점 부여 * 실제 데이터를 다운받지 않아도 아이디어 기획 및 제안 가능 참가..
[SQL] DBMS 구조와 테이블 생성 1. 개념 2. 데이터 베이스 3. DATABASE 생성 및 조회 CREATE USER 계정명 @HOST IDENTIFIED BY ‘password'​ client p/g(웹 브라우저 등) server p/g(DB 등) 예 : 웹브라우저client ->버튼눌러서 정보 요청-> 쿠팡server : server에 data요청 my sql - DB server 서비스 요청 : client program My Sql workbench password => save : 로그인 정보 저장 오른쪽 위 토글버튼 : 사이드메뉴(왼,아래,오)를 넣었다 뺐다 뾱뾱 설정바꾸기: edit > preferences > Fonts&colors 개념 데이터베이스 Database Management System (DBMS) : 데이터..
[KoBERT] import gluonnlp as nlp 에서의 에러 해결 ✔️에러 문제 🎉 문제 해결 패키지 설치 시 mxnet을 먼저 설치하고 gluonnlp 설치하면 import 된다 #필요 패키지 설치 !pip install mxnet !pip install gluonnlp as nlp !pip install pandas tqdm !pip install sentencepiece !pip install transformers==3.0.2 !pip install torch !pip install pandas
[KoBERT] No module named 'kobert' 에러 해결 ✔️에러 문제 부트캠프의 미니 프로젝트 과정에서 우리팀은 Kobert를 이용해서 '다중감정분류모델'을 구축했어야했다..... 근데 아래처럼 Kobert 라이브러리를 설치하는 것 까지는 잘 작동하다가 #필요 패키지 설치 !pip install mxnet !pip install gluonnlp pandas tqdm !pip install sentencepiece !pip install transformers==3.0.2 !pip install torch !pip install pandas #KoBERT 깃허브에서 불러오기 # 여기까진 ㄱㅊㄱㅊ !pip install git+https://git@github.com/SKTBrain/KoBERT.git@master #이 부분에서 ModuleNotFoundErro..
231116 TIL | 미니프로젝트 - 4 ⭐오늘 진행한 것 단어사전 기반으로 모델링Kobert 진행 완료 Kobert 레퍼런스 : https://velog.io/@fhflwhwl5/Python-KoBERT-7가지-감정%[…]류모델-구현하기 ✔️Trial and Error Kobert 모델 import 안되는 문제 발생 → hugging face에서 불러와서 해결 완료 📝느낀 점 감정분석 모델은 긍/부정으로만 나뉘는 모델만 알고 있었는데 다중 분류를 위해서 새로운 모델인 Kobert모델을 직접 모델링할 수 있어서 좋은 기회였다. 다만 감정사전을 직접 구축하는 단계를 추가해야 완벽히 감정분석을 익힐 수 있을 듯 파이썬 버전이 바뀌면서 모델이 안돌아가서 너무 당황했지만 코드 수정으로 해결! 뿌듯했음 🚩 다음 할 일 : 단어 사전 구축(목표 : 금~다..
231115 TIL | 미니프로젝트 - 3 ⭐오늘 진행한 것 프로젝트 주제 변경 : 화장품 리뷰 데이터 분석 퍼스널 컬러 추천 → 일기 감정 분석 기반 노래 추천 멜론 크롤러 코드 짜기 - ㅎㄱ, ㄴㄹ, ㅈㅇ 모델링 방향 기획 - ㅇㅈ 🚩내일 할 일 : 단어사전 기반으로 모델링 (LSTM - 지우가 보낸 프로젝트, Kobert- 내가보낸 프로젝트) 진행해보기 이후 앙상블 or 추가로 여러모델돌려보고 앙상블✔️참고 GIT(레퍼런스는 모델링 진행하면서 더찾아보기) Kobert추가 모델 :BERT, KoBERT, KoBERT-large, KoElectra-base, KoElectra-base, KLUE RoBERTa-base, KLUE RoBERTa-large Kobert : https://github.com/jongmin-oh/lyrics_emoti..