모두를 위한 딥러닝 강의 시즌1을 듣고 복습한 내용입니다.
딥러닝(Deep Neural Network)의 시작
문제 발생) XOR 문제 해결이 힘들었음
해결) Backpropagation을 알아내서 해결 (Paul Werbos, Hinton)
새로운 문제 발생) neural net이 깊어지면 backpropagation이 잘 안됨
해결) 초기값만 잘 준다면 깊은 신경망도 잘 작동한다. + 깊은 신경망을 이용해 복잡한 문제 해결 가능하다. (Hinton and Bengio)
'딥러닝, 머신러닝 > 모두를 위한 딥러닝 강의 복습' 카테고리의 다른 글
Learning rate, Data preprocessing, Overfitting, Regularization (0) | 2022.01.07 |
---|---|
Softmax Regression (0) | 2022.01.06 |
Logistic Classification, Logistic Regression의 cost 함수 (0) | 2022.01.05 |
TensorFlow로 파일에서 데이터 읽어오기 (0) | 2022.01.04 |
Multi-variable linear regression (0) | 2022.01.04 |