wonone11 님의 블로그

  • 홈
  • 태그
  • 방명록
wonone11 님의 블로그 입니다.

전체 글 11

경사하강법(gradient descent) 정리

경사하강법이란 간단히 말하면 함수의 기울기를 이용하여 함수의 최솟값을 찾는 방법이다.경사하강법은 반복적으로 수행하며 정해진 반복 횟수를 다 했거나 더 이상 값을 최소화하지 못한다고 판정되면 반복을 멈춘다. 자료 출처 위 예시와 같이 경사하강법은 정해진 수식을 반복하여 함수의 최솟값을 찾는다.   기본적인 경사하강법의 수식  이 수식 전체를 설명하자면 최솟값을 찾고 싶은 함수 f를 x에 대해 미분하여 현재 x 좌표의 기울기를 구한 후 lr 곱하고 구한 값을 현 x 좌표에 빼주는 식이다. 이 말이 이상하게 들릴 수도 있지만 아래의 설명을 듣고 다시 와서 스스로 이 식이 어떻게 작동하는지 이해했으면 좋겠다. 수식 분해 및 해석 위 설명에서 기울기와 lr를 곱한 값을 뺀다.왜 빼냐 하면기울기 값을 보면 알 수 ..

카테고리 없음 2025.01.27
이전
1 2
다음
더보기
프로필사진

wonone11 님의 블로그

wonone11 님의 블로그 입니다.

  • 분류 전체보기 (11)

Tag

경사하강법, 딥러닝, AI,

최근글과 인기글

  • 최근글
  • 인기글

최근댓글

공지사항

페이스북 트위터 플러그인

  • Facebook
  • Twitter

Archives

Calendar

«   2025/10   »
일 월 화 수 목 금 토
1 2 3 4
5 6 7 8 9 10 11
12 13 14 15 16 17 18
19 20 21 22 23 24 25
26 27 28 29 30 31

방문자수Total

  • Today :
  • Yesterday :

Copyright © Kakao Corp. All rights reserved.

티스토리툴바