Bite Bits/Data Science

밑바닥부터 시작하는 딥러닝(Deep Learning from Scratch) - 4장 신경망 학습

상영 2018. 8. 24. 16:01


학습이란 훈련 데이터로부터 가중치 매개변수의 최적값을 자동으로 획득하는 것.

신경망이 학습할 수 있도록 해주는 지표인 손실함수

손실 함수의 결과값을 가장 작게 만드는 가중치 매개변수를 찾는 것이 학습의 목표

(손실 함수는 임의의 함수를 사용할 수도 있지만 일반적으로는 평균 제곱 오차와 교차 엔트로피 오차를 사용)

손실 함수의 값을 가급적 작게 만드는 기법으로 함수의 기울기를 활용하는 경사법을 소개