|
26 | 26 | ์ข
์ข
:math:`b` ๋ *ํธํฅ(Bias)* ์ด๋ผ ๋ถ๋ฆฝ๋๋ค. |
27 | 27 |
|
28 | 28 |
|
29 | | -PyTorch ์ ๋๋ถ๋ถ์ ๋ค๋ฅธ ๋ฅ๋ฌ๋ ํ๋ ์์ํฌ๋ค์ ๊ณ ์ ์ ์ธ ์ ํ ๋์ํ์ |
| 29 | +PyTorch ์ ๋๋ถ๋ถ์ ๋ค๋ฅธ ๋ฅ๋ฌ๋ ํ๋ ์์ํฌ๋ค์ ๊ณ ์ ์ ์ธ ์ ํ ๋์ํ๊ณผ |
30 | 30 | ์กฐ๊ธ ๋ค๋ฅด๊ฒ ๋์ํฉ๋๋ค. ์
๋ ฅ์ ์ด ๋์ ์ ํ์ผ๋ก ๋งคํํฉ๋๋ค. |
31 | 31 | ์ฆ ์ฃผ์ด์ง :math:`A` ์์ ์ถ๋ ฅ์ :math:`i` ๋ฒ์งธ ํ์ |
32 | 32 | ์
๋ ฅ์ :math:`i` ๋ฒ์งธ ํ์ ๋งคํ๋๊ณ ํธํฅ(Bias)์ ๋ํฉ๋๋ค. |
|
57 | 57 | # ~~~~~~~~~ |
58 | 58 | # |
59 | 59 | # ๋จผ์ ์ ๋น์ ํ์ฑ์ด ํ์ํ์ง ์ค๋ช
ํ๋ ๋ค์ ์ฌ์ค์ ์ฃผ๋ชฉํ์ญ์์ค. |
60 | | -# :math:`f(x) = Ax + b` ์ :math:`g(x) = Cx + d` ๋๊ฐ์ ์ํ๋งต์ด ์๋ค๊ณ ๊ฐ์ ํฉ๋๋ค. |
| 60 | +# :math:`f(x) = Ax + b` ์ :math:`g(x) = Cx + d` ๋ ๊ฐ์ ์ํ๋งต์ด ์๋ค๊ณ ๊ฐ์ ํฉ๋๋ค. |
61 | 61 | # :math:`f(g(x))` ๋ ๋ฌด์์ผ๊น์? |
62 | 62 | # |
63 | 63 | # .. math:: f(g(x)) = A(Cx + d) + b = ACx + (Ad + b) |
|
70 | 70 | # ์๋ค๋ ๊ฒ์ ์ ์ ์์ต๋๋ค. |
71 | 71 | # |
72 | 72 | # ์ํ ๊ณ์ธต ์ฌ์ด์ ๋ง์ฝ ๋น์ ํ์ฑ์ ์ ์ฉํ๋ค๋ฉด |
73 | | -# ์ด๊ฒ์ ์ ๊ฒฝ์ฐ์ ๋ฌ๋ฆฌ ๋์ฑ ๋ ๊ฐ๋ ฅํ ๋ชจ๋ธ์ ๊ตฌ์ถํ ์ ์์ต๋๋ค. |
| 73 | +# ์ด๊ฒ์ ์ ๊ฒฝ์ฐ์ ๋ฌ๋ฆฌ ๋์ฑ๋ ๊ฐ๋ ฅํ ๋ชจ๋ธ์ ๊ตฌ์ถํ ์ ์์ต๋๋ค. |
74 | 74 | # |
75 | 75 | # ํต์ฌ์ ์ธ ๋น์ ํ์ฑ :math:`\tanh(x), \sigma(x), \text{ReLU}(x)` ๋ค์ด ๊ฐ์ฅ |
76 | 76 | # ์ผ๋ฐ์ ์
๋๋ค. ์๋ง ์๋ฌธ์ด ์๊ธธ๊ฒ๋๋ค : "์ ์ด๋ฐ ํจ์๋ค์ด์ง? ๋๋ ๋ค๋ฅธ ๋ง์ |
|
82 | 82 | # |
83 | 83 | # ๋น ๋ฅธ ์ฐธ๊ณ : AI ํด๋์ค์ ๋ํ ์๊ฐ์์ ์ผ๋ถ ์ ๊ฒฝ๋ง์ ๋ฐฐ์ ์ง๋ง :math:`\sigma(x)` ๊ฐ ๊ธฐ๋ณธ์ด์์ ๊ฒ์
๋๋ค. |
84 | 84 | # ์ผ๋ฐ์ ์ผ๋ก ์ฌ๋๋ค์ ์ค์ ๋ก ๊ทธ๊ฒ์ ์ฌ์ฉํ์ง ์๊ณ ํผํฉ๋๋ค. |
85 | | -# ์ด๊ฒ์ ๋ณํ๋๊ฐ ์ธ์์ ์ ๋ ๊ฐ์ด ์ปค์ง์ ๋ฐ๋ผ ๋งค์ฐ ๋นจ๋ฆฌ *์ฌ๋ผ์ง๊ธฐ* ๋๋ฌธ์
๋๋ค. |
| 85 | +# ์ด๊ฒ์ ๋ณํ๋๊ฐ ์ธ์์ ์ ๋๊ฐ์ด ์ปค์ง์ ๋ฐ๋ผ ๋งค์ฐ ๋นจ๋ฆฌ *์ฌ๋ผ์ง๊ธฐ* ๋๋ฌธ์
๋๋ค. |
86 | 86 | # ์์ ๋ณํ๋๋ ํ์ตํ๊ธฐ ์ด๋ ต๋ค๋ ๊ฒ์ ์๋ฏธํฉ๋๋ค. |
87 | 87 | # ๋๋ถ๋ถ์ ์ฌ๋๋ค์ tanh ๋๋ ReLU๋ฅผ ๊ธฐ๋ณธ๊ฐ์ผ๋ก ์ฌ์ฉํฉ๋๋ค. |
88 | 88 | # |
|
0 commit comments