Day04. 신경망

Day04. 신경망
밑바닥부터 시작하는 딥러닝 1 | 사이토 고키 | 한빛미디어 - 예스24
딥러닝 분야 부동의 베스트셀러!머리로 이해하고 손으로 익히는 가장 쉬운 딥러닝 입문서이 책은 딥러닝의 핵심 개념을 ‘밑바닥부터’ 구현해보며 기초를 한 걸음씩 탄탄하게 다질 수 있도록 도와주는 친절한 안내서이다. 라이브러리나 프레임워크에 의존하지 않고 딥러닝의…

  • 퍼셉트론 에서는 가중치를 수동으로 매핑 해 주었음
  • 신경망은 가중치 매개변수의 적절한 값을 데이터로부터 학습하는 능력 있음

신경망과 퍼셉트론

신경망
  • 퍼셉트론과 상당히 유사해 보임
퍼셉트론
  • 다만 여기서 '편향' 이 들어가게 되면 아래와 같이 변경됨
  • 편향은 뉴런이 얼마나 쉽게 동작할지 정하게 됨

활성화 함수

  • 위는 퍼셉트론 기본 공식이다
  • 여기서 식을 나누면 아래와 같이 나누어 진다
공식 1. 외부에서 숫자를 계산하여 h 함수에 대입
공식 2. h 함수 내부 동작 (퍼셉트론은 활성화 함수로 계단 함수를 이용한다)
  • 여기서 h 를 활성화 함수라고 한다

시그모이드 함수

  • 신경망에서 자주 이용하는 함수