Soohyun’s Machine-learning

Propositional Logic : 명제적 로직from. Rosen's Discrete Mathematics NOT : The truth table for the negation of a proposition. T F F T AND : The truth table for the conjunction of two propositions. T T T T F F F T F F F F The truth table for the disjunction of two propositions. T T T T F T F T T F F F The truth table for the exclusive or of two propositions. T T F T F T F T T F F F inclusive or 예시 : "S..

CS231N 51 ~ ,cs231n_2018_lecture02.pdf (http://cs231n.stanford.edu/slides/2018/cs231n_2018_lecture02.pdf)http://cs231n.stanford.edu/slides/2018/cs231n_2018_lecture03.pdf Parametric approach : Linear classifier

기술 스택이란 ? 소프트웨어를 만들기 위해서 사용하는 프로그래밍 언어와 프레임워크와 관련 도구의 일체를 각 분야별로 정의한 걸 의미한다. 모바일 서비스에 필요한 개발 ? ex) "여기서 놀자" (여기요 + 야놀자) - 전국의 모든 모델 정보/사진 기반 제공 - 키워드/위치기반 /가격대나..검색 기능 제공 - 모바일에서 결제하고 포인트 적립 - 개인의 이용 내역이나 검색 내역 등을 기반으로 개인화된 추천 PG : payment gateway front-end + back-end + DB = full stack programmer front-end 개발자 해결해야 하는 문제 : 브라우저 호환 모바일/PC 지원 속도 및 성능최적화 유지보수를 위해 쉽고 유연하게 back-end 개발자 해결해야 하는 문제 : 모..

강사가 2시에 오면 수업을 시작한다 ㄴ 강사가 2시에 왔는데 수업을 안 한다 : Falseㄴ 강사가 아예 오지 않았다 : True (아예 위반할 것이 없으므로 True가 된다.) the set of intergers with squares less than 100 is not a subset of the set of nonnegative integers len(set) = 3 then, 2^3 = 8 (is it set's cardinality) Real numbers 은 대략 이라고 생각하면 된다. dot product 와 matrix multiplication 의 정확한 차이 a = a1, a2, a3, ...b = b1, b2, b3 ... a*b(dot product) 에 대응되는 건 a1*b1 ..

Measures of spread : range, variance & standard deviation A : -10, 0, 10, 20, 30B : 8, 9, 10, 11, 12 둘의 mean값은 동일한 10이다. 그러나 실질적으로 각각 구성하는 elements들은 다른게 보인다. How far away from average? 1. range : 숫자중 가장 큰 것 - 가장 작은 숫자 = 거리 A : 30 - (-10) = 40 40만큼 떨어져 있다.B : 12 - 8 = 4 4만큼 떨어져 있다. 2. variance : (squared small sigma) A'svariance B'svariance If you flip a fair coin 4 times, what is the probabilit..

복제하기 start = 'Na ' * 4 + '\n'middle = 'Hey' * 3 + '\n'end = 'Goodbye.' print(start + start + middle + end) slicing [start:end:step] step 만큼 건너뛰면서 start offset 부터 (end - 1) offset까지 sequence 추출 letters = 'abcdefghijklmnopqrstuvwxyz' >>> letters[::7] # 처음부터 끝까지 7 step 씩 건너 뛰면서 문자 추출'ahov' >>>letters[4:20:3] # 4번째부터 19번째까지 3 step 씩 건너 뛰면서 문자 추출'ehknqt' >>>letters[19:4] # 19번째부터 끝까지 4 step 씩 건너 뛰면서 ..

미분기호 라운드와 델타 차이 홀이나 전자가, N 혹은 P 영역으로 가면 recombination 이 일어나면서 줄어들잖아요? 저게 결국 그걸 뜻하는 식인데 델타p 는 N영역에서의 excess minority carrier concentrarion 이고 델타n은 P영역에서의 excess minority carrier concentration 입니다. 참고로 물리전자는 수학보다는 물리학이나 공학 페이지에 올리는게 나을거에요. ==그리스문자== 대문자 소문자 Α α →알파(ALPHA) Β β →베타(BETA) Γ γ →감마(GAMMA) Δ δ →델타(DELTA) Ε ε →입실론(EPSILON) : 소문자는 유전율의 기호로 쓰인다.전속밀도(D)=유전율(ε)x전장세기(E)인데 이를 "드라마 에로스입술" 로 외우면..

normal distribution (정규분포) or Gaussian distribution (가우스 분포) 연속 확률 분포의 하나. 정규 분포는 수집된 자료의 분포를 근사하는데에 자주 사용되며, 중심극한정리에 의해 독립적인 확률 변수들의 평균은 정규분포에 가까워지는 성질이 있기 때문이다. 정규분포는 2개의 parameter 평균 와 standard deviation (small sigma)에 대해 모양이 걸졍이 되고, 이때의 분포를 N(,)로 표기한다. 특히, 평균이 0이고 표준편차가 1인 정규분포 N(0,1)을 standard normal distribution이라고 한다. 출처 : https://ko.wikipedia.org/wiki/%EC%A0%95%EA%B7%9C%EB%B6%84%ED%8F%AC..

round your answers to the nearest hundredth: 백 자리에서 반올림0.224 면 0.220.776 이면 0.78 The following two-way table of column relative frequencies shows data on the 2012 US senate election and incumbents (senators that held the office before the election). Out of all the election participants, 23 were incumbents. Incumbents Non-incumbents Won 0.957 0.333 Lost 0.043 0.667 Column Total 1.00 1.00 How many..

khan academy 정리 1. mean 일반적인 의미의 average (전체 값을 sum한 것을, 전체 개수로 나눠준 것). specific하게 들어가면 좀 다른 것 같으나.. 일단 칸 아카데미 강의에서는 average 로 그냥 보는 듯 ex) 23, 29, 20, 32, 23, 21, 33, 25 mean : (23 + 29 + 20 + 32 + 23 + 21 + 33 + 25) / 8 2. median ---------> median값의 개수가 even number (짝수)이면 sum( median numbers ) / 2 = 24 이렇게 24가 median이 된다.ex) 20, 21, 23, 23, 25, 29, 32, 33 ------- ---20, 21, 23, 24, 25, 29, 32 -..

위키 백과의 정의 chain rule은 두 함수를 합성한 합성 함수의 도함수(derivative)에 관한 공식이다. 합성 함수 : 두 개 이상의 함수를 하나의 함수로 결합하여 만들어진 함수. 어떤 함수 속에 또 다른 함수가 들어있고, 그 또다른 함수속에 여전히 다른 함수가 들어있다. chain rule = 연쇄법칙 = 합성함수의 미분법. 합성함수의 미분은 합성함수를 구성하는 각 함수의 미분으로 곱으로 나타낼 수 있다. 함수 y = f(x)와 함수 z = g(y)를 합성한 함수 의 미분법은 다음과 같다. 위의 식에서의 g'(y) = g'(f(x))를 뜻하고, 두 함수 f(x), g(y)가 모두 미분가능한 함수라는 것을 가정한다. 합성 함수의 미분 공식은 다음과 같이 쓸 수 있다. 이와 같이 그 공식이 마치..

CS231N의 수식이 본격적으로 등장하기 시작한 Lecture 4. Backpropagation and Neural Networks (최초 멘탈 붕괴의 현장 아아...) convergence : 수렴divergence : 발산 출처 : http://www.ktword.co.kr/abbr_view.php?m_temp1=4659 발산 또는 gradient, 델 연산자 (Dell operator , Vector differential operator) 라고 한다. 벡터 미분 연산자라고도 하며, 이것 자체는 벡터가 아니지만 스칼라 함수에 사용되면 벡터가 된다. (scalar 는 단일값을 뜻한다.). 기본 벡터 i, j, k에 각각 x, y, z에 관한 편미분이 붙은 벡터이다. 3차원 공간 ( , 큰 R 이다. ..

칸 아카데미 선형 대수 중에서 vectors and spaces 부분 : https://www.khanacademy.org/math/linear-algebra/vectors-and-spaces/vectors/v/adding-vectors 선형대수에서 norm은 vector의 크기, 내지는 길이를 의미한다. 도함수로 만든다 = 미분한다 C : constant (수학에서는 대부분 set of complex numbers. 복소수를 의미한다. 실수 + 허수)Z : integers ex) {...., -3, -2, -1, 0, 1, 2, 3, ...} Z+는 positive intergers. 이때 0은 미포함R : set of real numbersN : natural numbers ex) {0, 1, 2, ..

regularization : kind of loss function softmax classifier = multinomial logistic regression probability distribution : 확률 분포analytic gradient :regularization strength: multivariate chain rule?zero element wise? diagonal : contributing : Jacobian matrix? holistic : subtle : twitch : tweak : convex hull: brittle : scalable : hand-specify : ingest : spit : concise : backwards : afford : perspective..

신경망의 기본은 매우 간단하다. 답을 찾고, 그 답이 맞는지를 확인한 다음, 맞으면 ㅇㅋ 아니면 '아냐 이거 아니야'라면서 다시 값을 조절한다. 하지만 이 세 단계를 이해하기까지 오랜 시간이 걸렸고, 세부적인 것들을 더 이해하려면 더 오랜 시간이 필요할 것 같다. 기본 공식 : y = x * Weight (가중치) + bias (편향) 이것만으로는 linear 하기 때문에 non-linearity를 주기 위해 activation function을 쓴다. (다만 이 activation function이 어떤식으로 non-linearity를 주는지는 모르겠다) Machine learning 공식이 linear가 되면 안되는 이유 = 똑같은 행동을 하면서 다른 결과를 기대하는 건 미친짓이다 - 아인슈타인그럼 ..

벡터 (Vector) 칸 아카데미 벡터 : https://www.khanacademy.org/math/precalculus/vectors-precalc/vector-basic/v/introduction-to-vectors-and-scalars 일반적으로 유클리디안 벡터, Euclidean vector (geometric vector 라고도 한다)를 말한다고 한다. magnitude와 direction을 갖는 vector. scalar 값, 단일값 : direction 이 없는 distance 는 scalar 이다. 5 meters------------ = 2.5 m/s

differential 과 derivative 의 차이? differential은 미분, derivative 는 도함수를 의미한다. 1) 편미분 (partial derivative) z = f(x, y) 라는 공식이 있다. 변수가 3개 (x, y, z)이다. 그런데 이 3가지 변수에 대해서 전부 미분하는 건 안 된다. 그래서 셋 중 하나를 뽑아 걔 하나만 가지고 미분하겠다!라는 거다.

- 머신러닝 학습 모델의 특성상, 모델을 그래프로 정의하고, 세션을 만들어서 그래프로 실행하고, 세션이 실행될 때 그래프에 동적으로 값을 넣어가면서(피딩, feeding) 실행한다는 기본 개념을 잘 이해해야 텐서플로 프로그래밍을 제대로 잘 할 수 있다. - 사이즈가 window size인 이유 : 주변 단어를 몇 개를 "본다"는 뜻이기 때문에. window 크기로 슬라이딩하면서 스크린하며 중심 단어들로 주변 단어들을 보고 각 단어에 해당하는 벡터들의 요소값들을 조금씩 업데이트하면서 단어를 벡터로 임베딩 - 아타리 퐁 게임을 어떻게 학습시키는지를 알려주는 카파시(Karpathy - yup! cs231n의 그 사람!) http://karpathy.github.io/2016/05/31/rl/ http://ka..

각종 자료들이 많은 곳 : http://www.whydsp.org/284 (모두의 연구소 출처, 특히 fundamental 한 이해를 도울 수 있는 영문 자료들) ※ 기반 언어는 Python / OS는 Windows 10 (Docker) 텐서플로우 - Tensorflowhttps://www.tensorflow.org/api_docs/python/ 텐서플로 한글 문서 - Tensorflow krhttps://www.gitbook.com/book/tensorflowkorea/tensorflow-kr/details 텐서플로우 튜토리얼 깃허브https://github.com/golbin/TensorFlow-Tutorials 파이토치 - Pytorchhttp://pytorch.org/docs/master/ 넘파이..

====================================================================================AXIS==================================================================================== x = [[ 1., 2.,], [ 3., 4.]] -------------> axis = 1||v axis = 0 가장 안쪽의 축은 axis=-1이라고 한다. 여기에서는 axis=1 과 동일하다. axis axis axis0 1 2 ..... 이런식으로 축이 간다. 안쪽일수록 rank (차원) - 1이나 마찬가지임. 3차원이면 axis 2가 가장 안쪽 축. 일일이 계산하는 번거로움이 있으므로 그냥 가..