ํ์ต๋ฅ 2 ๊ฒฝ์ฌํ๊ฐ๋ฒ๊ณผ ๋ฏธ๋ถ – ๋จธ์ ๋ฌ๋์ด ๋ฐฐ์ฐ๋ ์๋ฆฌ ์์ ์ ๋ฆฌ ๋จธ์ ๋ฌ๋๊ณผ ๋ฅ๋ฌ๋์์ ๋ชจ๋ธ์ด ํ์ต์ ํ๋ค๋ ๊ฑด, ๋จ์ํ ๋ฐ์ดํฐ๋ฅผ ์ธ์ฐ๋ ๊ฒ ์๋๋๋ค. ๋ชจ๋ธ์ด ์ ์ ๋ ์ ํํ ์์ธก์ ํ๊ธฐ ์ํด **์กฐ๊ธ์ฉ ์ค์ค๋ก๋ฅผ ๊ฐ์ **ํด๋๊ฐ๋ ๊ณผ์ ์ด์ฃ . ๊ทธ ํต์ฌ์ ์๋ ๊ฒ์ด ๋ฐ๋ก ๊ฒฝ์ฌํ๊ฐ๋ฒ(Gradient Descent)์ ๋๋ค. ๊ทธ๋ฆฌ๊ณ ์ด ๊ฒฝ์ฌํ๊ฐ๋ฒ์ ๊ณ ๋ฑํ๊ต ์ํ ์๊ฐ์ ๋ฐฐ์ด **“์ ์ ์ ๊ธฐ์ธ๊ธฐ”, ์ฆ ๋ฏธ๋ถ๊ฐ**๊ณผ ๋๋๋๋ก ๊น์ ๊ด๋ จ์ด ์์ต๋๋ค. ์ด๋ฒ ๊ธ์์๋ ๋จธ์ ๋ฌ๋์ด ์ค์ฐจ๋ฅผ ์ค์ฌ๋๊ฐ๋ ๊ณผ์ ์ ๋ฏธ๋ถ์ ์์ ์ผ๋ก ์ฝ๊ฒ ํ์ด๋ณด๊ฒ ์ต๋๋ค.๐ ๋ชฉ์ฐจ1. ๊ฒฝ์ฌํ๊ฐ๋ฒ์ด๋?2. ๋น์ฉ ํจ์์ ์ต์๊ฐ ์ฐพ๊ธฐ3. ์ ์ ์ ๊ธฐ์ธ๊ธฐ = ๋ฏธ๋ถ๊ฐ์ด ์ ์ค์ํ ๊น?4. ๊ฒฝ์ฌํ๊ฐ๋ฒ์ด ์๋ํ๋ ๊ณผ์ 5. ํ์ต๋ฅ (learning rate)์ ์๋ฏธ6. ๋ง๋ฌด๋ฆฌ ์์ฝ1. ๊ฒฝ์ฌํ๊ฐ๋ฒ์ด๋?๊ฒฝ์ฌํ๊ฐ๋ฒ(Gradient Descent).. 2025. 4. 8. ๊ฒฝ์ฌํ๊ฐ๋ฒ(Gradient Descent) ์์ ์ ๋ณต ๋ฅ๋ฌ๋ ํ์ต์ ํต์ฌ ์๊ณ ๋ฆฌ์ฆ, ๊ฒฝ์ฌํ๊ฐ๋ฒ! ์ด๋ฆ์ ๋ฏ์ค์ง๋ง, ์ดํดํ๋ฉด ์ ๊ฒฝ๋ง ํ๋ จ์ ์ ์ฒด ๊ตฌ์กฐ๊ฐ ๋ณด์ด๊ธฐ ์์ํฉ๋๋ค.์๋ ํ์ธ์! ์ค๋์ ๋ฅ๋ฌ๋์ ์ ๋๋ก ๊ณต๋ถํ๋ ค๋ฉด ๋ฐ๋์ ์์์ผ ํ ๊ฐ๋ , ๋ฐ๋ก ๊ฒฝ์ฌํ๊ฐ๋ฒ(Gradient Descent)์ ๋ํด ์์ธํ ์์๋ณด๋ ค ํฉ๋๋ค. ์ฒ์์ ์ํ์ ์ผ๋ก ๋๊ปด์ง ์ ์์ง๋ง, ๊ฐ๋ ๋ง ์ ๋๋ก ์ก์ผ๋ฉด ๋ค์ํ ๋ชจ๋ธ ํ์ต์ ์์ ๊ฐ์ด ์๊ธฐ์ค ๊ฑฐ์์.๋ชฉ์ฐจ1. ๊ฒฝ์ฌํ๊ฐ๋ฒ์ด๋? 2. ๊ฒฝ์ฌํ๊ฐ๋ฒ ์์๊ณผ ์๋ฆฌ 3. ๋ค์ํ ๊ฒฝ์ฌํ๊ฐ๋ฒ ์ข ๋ฅ 4. ํ์ต๋ฅ ๊ณผ ์๋ ด ๋ฌธ์ 5. ์ค์ ํ๊ณผ ์ฃผ์์ฌํญ1. ๊ฒฝ์ฌํ๊ฐ๋ฒ์ด๋?๊ฒฝ์ฌํ๊ฐ๋ฒ(Gradient Descent)์ ์ ๊ฒฝ๋ง์ด ์ต์ ์ ๊ฐ์ค์น๋ฅผ ์ฐพ๊ธฐ ์ํด ์ฌ์ฉํ๋ ์ต์ ํ ์๊ณ ๋ฆฌ์ฆ์ ๋๋ค. ์์ค ํจ์(Loss Function)์ ๊ฐ์ ์ต์ํํ๋ ๋ฐฉํฅ์ผ๋ก ํ๋ผ๋ฏธํฐ(๊ฐ์ค์น์.. 2025. 3. 27. ์ด์ 1 ๋ค์