"2021/06" 관련 글 5

CNN 모델과 Convolution 기법 정리
Memo 2021. 6. 8. 22:59
GoogLeNet: Bottleneck과 Inception Module을 적용한 CNN Bottlenect - 계수의 개수와 계산량을 줄이기 위해 Convolution 층을 분리(Decomposition) - 분리된 층 사이에는 ReLU와 같이 비선형 함수가 있음 Inception Module: 이전 레이어의 1x1 conv, 3x3 conv, 5x5 conv, maxpooling 결과를 전부 이어 붙여 출력하는 구조 Inception V4 - 계수의 개수와 계산량에 비해 성능이 뛰어난 CNN - 층마다 Inception 모듈을 달리 적용하기 때문에 구조가 복잡함 MobileNet: Depth-wise Separable Convolution 개념 도입 Depth-wise Separable Convolut..
수학과 낙서에 대하여
Motivation 2021. 6. 5. 01:00
수학을 공부하면서 수학에 대한 공포감을 느낀다. 고등학생 때 수학을 못했던 기억이 있었고, 그것에 어떤 트라우마 생겨버렸는지 수학 문제만 보면 풀어보자는 생각보다는 지레 겁을 먹고 해석하는 것 조차 거부감이 든다. 트라우마는 맞는 것 같다. 실제로 고등학생 때 수학2를 공부하면서 쓴 고배를 마신 적이 있다. 미적분 보다 공간과 기하를 다루는 부분에서는 도대체 무슨 소리인지 몰라 엄청 헤매였었다. 당연히 진도가 밀릴 수 밖에 없었고 결국에는 따라가지 못해 수능에서 큰 낙점을 받고 만 것이다. 이런 과거가 있다보니 수학 문제만 맞닥뜨리면 초조하고 불안해진다. 그러나 당연하게도 그럴 필요없다. 이제는 수학 공부에 대해 평가받을 이유가 전혀 없다. 오직 이해와 통찰을 위해서만 수학을 공부하면 되는 것이기 때문에..
CNN 메모
Memo 2021. 6. 4. 01:07
Convolution Layer에서는 무슨 일이? $N$개의 $W \times H$ feature map과 $M$개의 $K \times K$ Kernel과 Convolution 연산이 일어남 Convolution 연산은 가중합이고, 이 연산 결과로 $M$개의 $R \times C$ feature map이 산출됨 Convolution 연산을 하면 데이터가 줄어듦 $N data \rightarrow N-K+1$ 안 줄어들게 하려면? feature map의 크기를 키워주면 됨 Padding: feature map의 양쪽 끝에 0을 넣음 Copying: feature map의 처음과 마지막 값을 양쪽 끝에 각각 복사함 Wrapping: 처음과 끝이 연결된 것처럼 생각하여 마지막과 처음 값을 양쪽 끝 각각에 복사함
선행대수 용어 정리
Memo 2021. 6. 4. 00:26
가역행렬(Invertible Matrix, Nonsingular Matrix): 역행렬이 존재하는 행렬 특이행렬(Singular Matrix): 역행렬이 존재하지 않는 행렬 직교집합(orthogonal set): 임의의 서로 다른 두 벡터가 서로 수직 정규직교집합(orthonormal set): 직교집합의 모든 벡터가 단위 벡터 직교기저: 표준 기저 벡터에서 서로 다른 두 벡터가 항상 수직 정규직교 기저: 직교기저인데 벡터 모두가 단위벡터일 때 고유값과 고유벡터: 정방행렬 $A$에 대해 $Av = \lambda v$를 만족하는 $v$와 $\lambda$를 찾을 수 있다면 $v$는 고유벡터(eigen vector), $\lambda$는 고유값(eigen value)이라고 한다. 기하학적으로는 선형변환 후 ..
sqlalchemy실습 메모
Code Snippets 2021. 6. 3. 19:11
!pip install sqlalchemy !pip install sqlalchemy Requirement already satisfied: sqlalchemy in c:\users\jhkim\anaconda3\lib\site-packages (1.3.20) # import sqlalchemy as * from sqlalchemy import * from sqlalchemy.ext.declarative import declarative_base from sqlalchemy.orm import sessionmaker import pymysql pymysql.install_as_MySQLdb() #http://i5on9i.blogspot.com/2020/05/no-module-named-mysqldb.htm..
admin

티스토리툴바