본문 바로가기

분류 전체보기

(89)
2021-09-22 개발일기 1. 오늘 공부한것 2. 오늘의 블로그 결과물 3. 앞으로 할것 1.오늘 공부한것 Linear Algebra in IMpreial College 2weeks clear Data Science를 위한 book 탐색 2. 오늘의 블로그 결과물 3. 앞으로 할것 Transformer 공부내용 논리적 구조에 맞게 초안작성 Aho-chorasik 알고리즘 구현 및 설명 초안작성,구현시 unittest시험해보면 좋을것 linear algebra, prabability 의 최소한의 기초체력(?) 을 기른다. Fluent Python책에서 OOP object reference를 공부하고, Pytorch custom class 와 call frame글을 더 세심하게 작성 MobileNet v1 ,v2 의 pointwis..
2021-09-21 개발일기 1. 오늘 공부한것 2. 오늘의 블로그 결과물 3. 앞으로 할것 1.오늘 공부한것 Linear Algebra in IMpreial College vector projection 까지 clear 앞으로 무슨 자료를 가지고 어떤내용을 공부할까 많이 검색하고, 정리함 2. 오늘의 블로그 결과물 3. 앞으로 할것 Transformer 공부내용 논리적 구조에 맞게 초안작성 Aho-chorasik 알고리즘 구현 및 설명 초안작성,구현시 unittest시험해보면 좋을것 linear algebra, prabability 의 최소한의 기초체력(?) 을 기른다. Fluent Python책에서 OOP object reference를 공부하고, Pytorch custom class 와 call frame글을 더 세심하게 작성..
2021-09-20 개발일기 1. 오늘 공부한것 2. 오늘의 블로그 결과물 3. 앞으로 할것 1.오늘 공부한것 Flyent Python 책에서 OOP object reference 부분 copies are shallow by default 까지 공부 DeepLearning Specialization Normalization review Linear Algebra in IMpreial College 1week clear selfattention Qk is cosine simliarity, if i think that probability, then i use softmax to normalize to sum 1 Machine Learning A Probabilistic Perspective Bayes' rule 까지 공부 2. 오늘의..
Recursion using pass by reference 개요 What is it? memory allocation call frame recursion 에서의 주의점 recursion시 변수 메모리 마무리 개요 여러 코딩테스트 문제를 풀다 보면, 재귀를 사용하는 경우가 많습니다. 재귀를 사용하여 로직을 짜게되면, 이전 call frame에서의 state가 보존이 안되는 경우가 저는 많았습니다. 이는 pass by reference에 대하여 명확히 인지하지 않고 로직을 작성해서 발생한 일입니다. what is it reference 를 변수에 assignment 하게 되면 , 메모리에 가리키게 된다고 표현합니다. 이는 변수를 box라 표현하는 C스러운 표현이라고 생각합니다. Fluent Python 이라는 책에서는 이는 sticker 를 붙인다고 표현합니다. ..
2021-09-19 개발일기 1. 오늘 공부한것 2. 오늘의 블로그 결과물 3. 앞으로 할것 1.오늘 공부한것 Flyent Python 책에서 OOP object reference 부분 reference in immutable 까지 공부 DeepLearning Specialization Convolution Network Week2,3 공부 Linear Algebra in IMpreial College 에서 강의 들음 2. 오늘의 블로그 결과물 Recursion using pass by reference (tistory.com) 3. 앞으로 할것 Transformer 공부내용 논리적 구조에 맞게 초안작성 +softmax 관련내용을 더 추가해준다. Aho-chorasik 알고리즘 구현 및 설명 초안작성,구현시 unittest시험해보면..
2021-09-18 개발일기 1. 오늘 공부한것 2. 오늘의 블로그 결과물 3. 앞으로 할것 1.오늘 공부한것 Flyent Python 책에서 OOP object reference 부분 조금(!) 공부 DeepLearning Specialization Convolution Network Week2 공부 Machine Learning perspective in Probability에서 probability chapter 공부 Transformer test case를 lilianweng, adrew Ng의 test case를 빌려서, pytorch 프레임워크로 변환후 사용하기로 결정 2. 오늘의 블로그 결과물 3. 앞으로 할것 Transformer 공부내용 논리적 구조에 맞게 초안작성 +softmax 관련내용을 더 추가해준다. alia..
2021-09-17 개발일기 1. 오늘 공부한것 2. 오늘의 블로그 결과물 3. 앞으로 할것 1.오늘 공부한것 output layer에서 activation function으로 사용되어지는 softmax가 multihead attention에서 사용되어진 이유 앞으로 듣고 , 보게될 linear algebra, probability 강의, 책들 선정 statistcs vs statistics model vs ML model pytorch에 unittest는 직접 case를 만들어야한다. 2. 오늘의 블로그 결과물 3. 앞으로 할것 Transformer 공부내용 논리적 구조에 맞게 초안작성 +softmax 관견내용을 더 추가해준다. pass by reference vs pass by assignment 내용 보강하여, pass by ..
2021-09-16 개발일기 1.오늘 공부 내용: NLP 에서 Word Representation 모델들의 역사 Rnn, Lemo ,Gpt,Bert 의 발전과정 Recursion 을 pass by reference 를 통해 할 때 , call frame에서의 local variable의 주소 변화 2.오늘의 결과물: pass by referrence 글 논리적 구조에 맞게 초안작성 3. 앞으로 할일: Transformer 공부내용 논리적 구조에 맞게 초안작성 pass by reference vs pass by assignment 내용 보강하여, pass by reference 글 작성 Aho-chorasik 알고리즘 구현 및 설명 초안작성 Pytorch custom class 와 call frame글 작성