본문 바로가기

분류 전체보기

(89)
linxu gru bash shell로 jupyter server 사용하기 목차링크 개요 다운로드 디렉토리 압축 분할 압축 hardlink vs symlink 삭제 개요 Jupyter Notebook Server를 사용하다 보면, linux terminal을 이용해 디렉토리나 파일 등을 관리할 일이 종종 생긴다. 서버를 종료해서 필요없는 파일이 사라지는건 상관이 없지만, 내가 필요한 파일들은 다운받아야한다. 딥러닝을 하면서, 모델의 weight를 저장하는데, 용량이 꽉 찰 때마다 비워주어야 하는데, 휴지통이 보이질 않는다. 다운로드 파일을 gui 인터페이스로(web application) 다운로드 할 수 있는 경우도 있다. 하지만, 대부분, 디렉토리 다운로드는 지원하지 않는다. 디렉토리를 다운 받아야 할 상황이 생기면 일일이 모든 파일을 다 다운받는 것은 비효율 적이다. 디렉토..
9주차 회고 2021-09-25 개발일기 (tistory.com) 2021-09-26 개발일기 (tistory.com) 2021-09-28 & 09-27개발일기 (tistory.com) 2021-10-01 & 09-30 &09-29 (tistory.com)
2021-10-01 & 09-30 &09-29 1. 오늘 공부한것 2. 오늘의 블로그 결과물 3. 앞으로 할것 1.오늘 공부한것 klue docs 공부 Klue re 대회 실험 DeepLearning Ml strategy 수강 2. 오늘의 블로그 결과물 linxu gru bash shell로 jupyter server 사용하기 (tistory.com) HuggingFace:나만의 Transformer 모델 만들기 (tistory.com) Wandb: ML process 관리 (tistory.com) 3. 앞으로 할것 Transformer 공부내용 논리적 구조에 맞게 초안작성 Aho-chorasik 알고리즘 구현 및 설명 초안작성,구현시 unittest시험해보면 좋을것 linear algebra, prabability 의 최소한의 기초체력(?) 을 기..
2021-09-28 & 09-27개발일기 1. 오늘 공부한것 2. 오늘의 블로그 결과물 3. 앞으로 할것 1.오늘 공부한것 GNU 배쉬 공부 Pytorch HuggingFace Trainer docs 공부 multiclassfication 문제를 multi binary classification으로 분류를 함부로 하면 안되는 이유 KLue 대회 실험 Relation Extraction 공부 2. 오늘의 블로그 결과물 3. 앞으로 할것 Transformer 공부내용 논리적 구조에 맞게 초안작성 Aho-chorasik 알고리즘 구현 및 설명 초안작성,구현시 unittest시험해보면 좋을것 linear algebra, prabability 의 최소한의 기초체력(?) 을 기른다. Fluent Python책에서 OOP object reference를 공..
2021-09-26 개발일기 1. 오늘 공부한것 2. 오늘의 블로그 결과물 3. 앞으로 할것 1.오늘 공부한것 Kaggle 미션 완료 Adaptive Compuation programming:Deeplearnig 책 공부 Unknown problem에 대하여 simple nueral net test가 왜안좋은지 분석 colab-ssh 연결 kaggle로 의미있는 대회 나가기로 결정 2. 오늘의 블로그 결과물 3. 앞으로 할것 Transformer 공부내용 논리적 구조에 맞게 초안작성 Aho-chorasik 알고리즘 구현 및 설명 초안작성,구현시 unittest시험해보면 좋을것 linear algebra, prabability 의 최소한의 기초체력(?) 을 기른다. Fluent Python책에서 OOP object reference를..
2021-09-25 개발일기 1. 오늘 공부한것 2. 오늘의 블로그 결과물 3. 앞으로 할것 1.오늘 공부한것 Kaggle EDA로 문제분석 scatter,hist 결과 기존의 feature로 분류하는것은 힘들다 판단. 새로운 basis vector의 필요성이 느껴져서 ,neural net 쓸려함 plot을 끊겨도 끊긴 지점부터 다운로드 하도록 코드작성 Unknown problem에 대하여 simple nueral net test 2. 오늘의 블로그 결과물 3. 앞으로 할것 Transformer 공부내용 논리적 구조에 맞게 초안작성 Aho-chorasik 알고리즘 구현 및 설명 초안작성,구현시 unittest시험해보면 좋을것 linear algebra, prabability 의 최소한의 기초체력(?) 을 기른다. Fluent Pyt..
2021-09-24개발일기 1. 오늘 공부한것 2. 오늘의 블로그 결과물 3. 앞으로 할것 1.오늘 공부한것 Kaggle Data분석 및 안수빈 마스터님께 질문으로 100만개의 데이터를 로딩하는것은 cpu에 큰무리가 온다. 데이터 분포의 시각화는 sampling 해서 해도 충분하다. KLUe,MRC를 위한 피어세션 앞으로의 커리어의 자문 및 고민(문영기 멘토님께) 조대현 멘토님 첫만남 컴퓨터 디바이스 오류 해결 2. 오늘의 블로그 결과물 3. 앞으로 할것 Transformer 공부내용 논리적 구조에 맞게 초안작성 Aho-chorasik 알고리즘 구현 및 설명 초안작성,구현시 unittest시험해보면 좋을것 linear algebra, prabability 의 최소한의 기초체력(?) 을 기른다. Fluent Python책에서 OOP..
8주차회고 9월20일:'2021-09-20 개발일기' 수정하기 (tistory.com) 9월21일:2021-09-21 개발일기 (tistory.com) 9월22일:2021-09-22 개발일기 (tistory.com) 9월23일: 9월24일:2021-09-24개발일기 (tistory.com)