Learning rate


Learning rate이 너무 크다면? overshooting 발생

Learning rate이 너무 작다면? cost의 변화가 거의 없음(학습이 안 됨)


: 적당한 Learning rate 값을 찾아야함.


Softmax Classification에 MNIST(숫자) data를 입력해 학습해보고,

테스트 및 정확도 측정을 해보자.




 


+ Recent posts