Inflearn brand logo image
Inflearn brand logo image
์ฑ„๋„ํ†ก ์•„์ด์ฝ˜

์™์™ ์ดํ•ด๋˜๋Š” ๊ฐ•ํ™”ํ•™์Šต ํ•ต์‹ฌ์ด๋ก 

์ด ๊ฐ•์˜๋ฅผ ํ†ตํ•ด ๊ฐ•ํ™”ํ•™์Šต์˜ ๊ธฐ๋ณธ ์ด๋ก ์„ ์ตํžˆ์‹ค ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค.

Thumbnail

์ดˆ๊ธ‰์ž๋ฅผ ์œ„ํ•ด ์ค€๋น„ํ•œ
[๋ฐ์ดํ„ฐ ๋ถ„์„, ๋”ฅ๋Ÿฌ๋‹ ยท ๋จธ์‹ ๋Ÿฌ๋‹] ๊ฐ•์˜์ž…๋‹ˆ๋‹ค.

์ด๋Ÿฐ ๊ฑธ ๋ฐฐ์šธ ์ˆ˜ ์žˆ์–ด์š”

  • ๊ฐ•ํ™”ํ•™์Šต ๊ธฐ์ดˆ ์ด๋ก 

  • Tensorflow 2.0 ๊ฐ•ํ™”ํ•™์Šต ํ”„๋กœ๊ทธ๋ž˜๋ฐ

๋‹น์‹ ์ด ์ง€๊ธˆ, ๊ฐ•ํ™”ํ•™์Šต์„ ๋ฐฐ์›Œ์•ผ ํ•˜๋Š” ์ด์œ  ๐Ÿ˜†

๊ฐ•ํ™”ํ•™์Šต์ด๋ž€ ์‰ฝ๊ฒŒ ๋งํ•ด ์ปดํ“จํ„ฐ ํ”„๋กœ๊ทธ๋žจ์ด ์ฃผ์–ด์ง„ ์ƒํ™ฉ์—์„œ ์–ด๋– ํ•œ ํ–‰๋™์„ ์ทจํ• ์ง€ ํ•™์Šตํ•˜๋Š” ๊ฒƒ์„ ์˜๋ฏธํ•ฉ๋‹ˆ๋‹ค. ์ฆ‰ ์–ด๋ ค์šด ์˜์‚ฌ๊ฒฐ์ • ๋ฌธ์ œ๋ฅผ ์‰ฝ๊ฒŒ ํ•ด๊ฒฐํ•  ์ˆ˜ ์žˆ๋Š” ์ผ์ข…์˜ ๋จธ์‹ ๋Ÿฌ๋‹์ด๋ผ๊ณ  ์ดํ•ดํ•˜๋ฉด ์ข‹์„ ๊ฒƒ ๊ฐ™์•„์š”. ๊ฐ•ํ™”ํ•™์Šต์€ ์ธ๊ณต์ง€๋Šฅ์ด ์˜์‚ฌ๊ฒฐ์ •์„ ํ•˜๋Š” ๋ฐ ์žˆ์–ด ๊ฐ€์žฅ ํ•„์ˆ˜์ ์ธ ๋‚ด์šฉ ์ค‘ ํ•˜๋‚˜๋กœ, ์Šค์Šค๋กœ ๊ธฐ๊ณ„๊ฐ€ ์ƒํ˜ธ์ž‘์šฉ์„ ํ†ตํ•ด ์ตœ์ ์˜ ๊ฒฐ๋ก ์„ ๋‚ผ ์ˆ˜ ์žˆ๋Š” ํ”„๋กœ๊ทธ๋žจ์„ ์„ค๊ณ„ํ•  ์ˆ˜ ์žˆ๊ฒŒ ๋  ๊ฒƒ์ž…๋‹ˆ๋‹ค. 

ํ•˜์ง€๋งŒ ์–ด๋ ต๋‹ค. ์–ด๋ ต๋‹ค. ๋„ˆ๋ฌด ์–ด๋ ต๋‹ค ๐Ÿ˜ฑ

๊ฐ•ํ™”ํ•™์Šต์„ ๊ณต๋ถ€ํ•˜๊ณ  ์‹ถ์€ ์šฐ๋ฆฌ์˜ ๋ฐ”๋žŒ๊ณผ ๋‹ค๋ฅด๊ฒŒ, ๊ฐ•ํ™”ํ•™์Šต์„ ํ˜ผ์ž ๊ณต๋ถ€ํ•˜๋Š” ๊ฒƒ์€ ๋„ˆ๋ฌด ์–ด๋ ต์Šต๋‹ˆ๋‹ค. ๊ฐ€์žฅ ํฐ ๋‘ ๊ฐ€์ง€ ์ด์œ ๋ฅผ ๊ผฝ์•„๋ณด๋ฉด์š”.

  • ๋Œ€ํ‘œ์ ์ธ ๊ฐ•ํ™”ํ•™์Šต ๊ณต์‹์ด ๋‹ด๊ณ  ์žˆ๋Š” ์›๋ฆฌ๋ฅผ ์ดํ•ดํ•˜๊ธฐ ์–ด๋ ต๋‹ค.
  • TD vs MC, Value-based vs Policy-based ๋“ฑ ํ•œ ์•Œ๊ณ ๋ฆฌ์ฆ˜์— ๋‹ค์–‘ํ•œ ๊ฐœ๋…๋“ค์ด ์„ž์—ฌ์žˆ๋‹ค.

๊ธฐ๋ณธ๊ธฐ๋งŒ ํƒ„ํƒ„ํ•ด๋„, ํ•™์Šต ์†๋„์— ๋ถ€์Šคํ„ฐ๊ฐ€ ์ƒ๊ธธ ๊ฑฐ์—์š” ๐Ÿ”ฅ

๊ฐ•ํ™”ํ•™์Šต์„ ๊ณต๋ถ€ํ•˜์‹ ๋‹ค๋ฉด ์ตœ์‹  ๋…ผ๋ฌธ๊ณผ ํ˜„๋ž€ํ•œ ๋ฐ๋ชจ๋“ค์„ ๊ฟˆ๊พธ์‹ค ์ˆ˜ ์žˆ์ง€๋งŒ, ์ข€ ๋” ๋จผ ๋ฏธ๋ž˜๋ฅผ ์œ„ํ•ด์„œ๋Š” ๊ฐ•ํ™”ํ•™์Šต์˜ ๊ธฐ๋ณธ๊ธฐ๋ฅผ ์ถฉ์‹คํžˆ ์ตํž ํ•„์š”๊ฐ€ ์žˆ์Šต๋‹ˆ๋‹ค. ์ด ๊ฐ•์˜๋ฅผ ํ†ตํ•ด ์—ฌ๋Ÿฌ๋ถ„์€ ๊ฐ•ํ™”ํ•™์Šต์˜ ๊ธฐ์ดˆ ๊ฐœ๋…์„ ์‹ฌ๋„ ์žˆ๊ฒŒ ๋ฐฐ์šฐ๊ณ  ๋‹ค์Œ๊ณผ ๊ฐ™์€ ๋ชจ์Šต์œผ๋กœ ๊ฑฐ๋“ญ๋‚˜์‹ค ์ˆ˜ ์žˆ์„ ๊ฒƒ์ž…๋‹ˆ๋‹ค.

 ์ด ๊ฐ•์˜๋ฅผ ๋“ค์€ ํ›„ ๋‹น์‹ ์˜ ๋ชจ์Šต!

  • ๊ฐ•ํ™”ํ•™์Šต์˜ ๋ฌธ์ œ ์ •์˜๋ฅผ ๋ช…ํ™•ํ•˜๊ฒŒ ์ดํ•ดํ•  ์ˆ˜ ์žˆ๊ฒŒ ๋ฉ๋‹ˆ๋‹ค.
  • MDP, ๋‹ค์ด๋‚˜๋ฏน ํ”„๋กœ๊ทธ๋ž˜๋ฐ์— ๋Œ€ํ•ด ์ดํ•ดํ•  ์ˆ˜ ์žˆ๊ฒŒ ๋ฉ๋‹ˆ๋‹ค.
  • ์‹œ๊ฐ„์ฐจ ํ•™์Šต, ๋ชฌํ…Œ์นด๋ฅผ๋กœ ๋ฐฉ๋ฒ• ๋“ฑ ๊ฐ•ํ™”ํ•™์Šต์˜ ํ•ต์‹ฌ ๊ธฐ์ˆ ์— ๋Œ€ํ•ด ์ฐจ๊ทผ์ฐจ๊ทผ ์•Œ์•„๊ฐˆ ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค.
  • ๊ฐ•ํ™”ํ•™์Šต์˜ ๋…ผ๋ฌธ์„ ๋ณด๋ฉด ์ˆ˜์‹์ด ์ดํ•ด๋˜๊ธฐ ์‹œ์ž‘ํ•ฉ๋‹ˆ๋‹ค.

์ œ ๊ฐ•์˜๋งŒ์˜ ํŠน๋ณ„ํ•œ ์  ๐Ÿ˜—

  • ๊ฐ•ํ™”ํ•™์Šต์˜ ๊ฐ ํ•ต์‹ฌ ๊ฐœ๋…๋งŒ ๊ณจ๋ผ์„œ!
    ๋ฉ€ํ‹ฐ ์•”๋“œ ๋ฐด๋””ํŠธ, ๋งˆ๋ฅด์ฝ”ํ”„ ๊ฐธ๊ฒฐ์ • ๊ณผ์ •๋ถ€ํ„ฐ ๋™์  ํ”„๋กœ๊ทธ๋ž˜๋ฐ, ๋ชฌํ…Œ์นด๋ฅผ๋กœ ๋ฐฉ๋ฒ• ๋“ฑ
    ๊ฐ•ํ™”ํ•™์Šต์— ํ•„์š”ํ•œ ํ•ต์‹ฌ ๊ฐœ๋…๋งŒ ์ •๋ฆฌํ•ด ๊ธฐ์ดˆ๋ถ€ํ„ฐ ์ œ๋Œ€๋กœ ์•Œ๋ ค๋“œ๋ฆฝ๋‹ˆ๋‹ค.

  • ํŠน์ • ๋ฌธ์ œ์—์„œ ์–ด๋–ค ๊ฐ•ํ™”ํ•™์Šต ๊ธฐ๋ฒ•์„ ์‚ฌ์šฉํ•ด์•ผ ํ•˜๋Š”์ง€ ์ดํ•ดํ•  ์ˆ˜ ์žˆ์Œ!
    ์ด๋ก ์„ ์•„๋Š” ๊ฒƒ์—์„œ ๋๋‚˜์ง€ ์•Š์Šต๋‹ˆ๋‹ค. ์‹ค์ œ ์‹ค์Šต ๊ณผ์ •์„ ์ €์™€ ํ•จ๊ป˜ ๊ฒฝํ—˜ํ•ด ๋ณด๋ฉด์„œ
    ํŠน์ • ์ƒํ™ฉ์—์„œ ์–ด๋–ป๊ฒŒ ๋Œ€์ฒ˜ํ•ด์•ผ ํ•˜๋Š”์ง€ ์ง๊ด€์ ์œผ๋กœ ์ดํ•ดํ•  ์ˆ˜ ์žˆ์„ ๊ฒƒ์ž…๋‹ˆ๋‹ค.

  • ๋‹ค์–‘ํ•œ ์‹ค์Šต์„ ํ†ตํ•œ ๊ฐœ๋… ์ฒดํ™”! 
    ๊ธฐ์ดˆ ์ด๋ก ์„ ๋ฐฐ์šด ํ›„ ๋ฐ”๋กœ ์‹ค์Šต์œผ๋กœ ์ ์šฉํ•˜๋Š” ๊ณผ์ •์„ ํ†ตํ•ด ๋ฐฐ์šด ๋‚ด์šฉ์„ ๋ฐ”๋กœ
    ๋‚ด ๊ฒƒ์œผ๋กœ ๋งŒ๋“ค ์ˆ˜ ์žˆ๋„๋ก ๋„์™€๋“œ๋ฆฝ๋‹ˆ๋‹ค.

์ด ๊ฐ•์˜์—์„œ ๋ฐฐ์šฐ๋Š” ๋‚ด์šฉ ๐Ÿ˜

๊ฐ•ํ™”ํ•™์Šต ๊ธฐ์ดˆ

๊ฐ•ํ™”ํ•™์Šต์˜ ๊ธฐ์ดˆ ์ด๋ก ๊ณผ ํ”„๋ ˆ์ž„์›Œํฌ์— ๋Œ€ํ•ด ์•Œ์•„๋ณด๊ณ , ์ธ๊ณต์ง€๋Šฅ์˜ ๋ณด์ƒ ์ฒด๊ณ„์™€ ๊ด€๋ จ๋œ ๊ธฐ์ดˆ ๊ฐœ๋…์ธ ๋ฉ€ํ‹ฐ ์•”๋“œ ๋ฐด๋””ํŠธ์™€ ๋งˆ๋ฅด์ฝ”ํ”„ ์ƒํƒœ, ๋ณด์ƒ, ์ƒํƒœ ์ „์ด ๋“ฑ์— ๋Œ€ํ•ด ์•Œ์•„๋ด…๋‹ˆ๋‹ค.

๋™์  ํ”„๋กœ๊ทธ๋ž˜๋ฐ

์•ž์„œ ๋ฐฐ์šด ๋งˆ๋ฅด์ฝ”ํ”„ ๊ฒฐ์ • ํ”„๋กœ์„ธ์Šค์˜ ๋‚ด์šฉ์„ ๊ธฐ๋ฐ˜์œผ๋กœ ๋™์  ํ”„๋กœ๊ทธ๋ž˜๋ฐ์˜ ์ •์˜์™€ ํ™œ์šฉ ๋ฐฉ๋ฒ•์— ๋Œ€ํ•ด ์•Œ๋ ค๋“œ๋ฆฝ๋‹ˆ๋‹ค.

๋ชฌํ…Œ์นด๋ฅผ๋กœ ๋ฐฉ๋ฒ•

๊ณ„์‚ฐํ•˜๋ ค๊ณ  ํ•˜๋Š” ๊ฐ’์ด ๋ณต์žกํ•œ ๊ฒฝ์šฐ ์‚ฌ์šฉํ•˜๋Š” ๋ชฌํ…Œ์นด๋ฅผ๋กœ ๋ฐฉ๋ฒ•์˜ ๊ธฐ์ดˆ ๊ฐœ๋…์— ๋Œ€ํ•ด ์•Œ์•„๋ด…๋‹ˆ๋‹ค.

์‹œ๊ฐ„์ฐจ ํ•™์Šต

์‹ค์ œ ํ•™์Šต์˜ ๊ฒฝํ—˜์œผ๋กœ๋ถ€ํ„ฐ ์ง์ ‘ ๋ฐฐ์šฐ๋Š” ํ˜•ํƒœ์˜ ์‹œ๊ฐ„์ฐจ ํ•™์Šต์˜ ๊ธฐ์ดˆ ๊ฐœ๋…์„ ์•Œ์•„๋ณด๊ณ , ๋ชฌํ…Œ์นด๋ฅผ๋กœ ๋ฐฉ๋ฒ•๊ณผ ์ง์ ‘ ๋น„๊ตํ•˜๋ฉฐ ์–ด๋–ค ์ƒํ™ฉ์—์„œ ํ™œ์šฉํ•  ์ˆ˜ ์žˆ์„์ง€ ์•Œ์•„๋ด…๋‹ˆ๋‹ค.

๋ชจ๋ธ ๊ธฐ๋ฐ˜ ๊ฐ•ํ™”ํ•™์Šต

๋จธ์‹ ๋Ÿฌ๋‹์—์„œ์˜ ๋ชจ๋ธ์˜ ๊ฐœ๋…์„ ์•Œ์•„๋ณด๊ณ , ํ‘œ์™€ ๋ชจ๋ธ์— ๊ธฐ๋ฐ˜ํ•œ ๊ฐ•ํ™”ํ•™์Šต ์ด๋ก ์„ ์•Œ์•„๋ณด๊ณ  ์ง์ ‘ ์‹ค์Šตํ•ด ๋ด…๋‹ˆ๋‹ค.

์ •์ฑ… ๊ธฐ๋ฐ˜ ๊ฐ•ํ™”ํ•™์Šต

๊ฐ€์น˜ํ•จ์ˆ˜๋ฅผ ํ† ๋Œ€๋กœ ํ–‰๋™์„ ๊ฒฐ์ •ํ•˜์ง€ ์•Š๊ณ , ์ƒํƒœ์— ๋”ฐ๋ผ ๋ฐ”๋กœ ํ–‰๋™์„ ์„ ํƒํ•˜๋Š” ์ •์ฑ… ๊ธฐ๋ฐ˜ ๊ฐ•ํ™”ํ•™์Šต์— ๋Œ€ํ•ด ์•Œ์•„๋ด…๋‹ˆ๋‹ค.

์ €๋Š” ์ด๋Ÿฐ ์‚ฌ๋žŒ์ž…๋‹ˆ๋‹ค ๐Ÿ˜


์ œ ๊ฒฝ๋ ฅ์€ ๋‹ค์Œ๊ณผ ๊ฐ™์•„์š”.

ํ˜„) Riiid VP of AIOps
ํ˜„) Google Developer Expert for ML
์ „) ๋„ค์ด๋ฒ„ AI Research Engineer
์ „) ์นด์นด์˜ค Data Engineer

๊ฐ•์˜ ์ˆ˜๊ฐ• ์ „, ๊ถ๊ธˆํ•œ ์ ์„ ๋ฏธ๋ฆฌ ํ™•์ธํ•˜์„ธ์š”! ๐Ÿ˜

Q. ๋น„์ „๊ณต์ž, ์ž…๋ฌธ์ž๋„ ๋“ค์„ ์ˆ˜ ์žˆ๋Š” ๊ฐ•์˜์ธ๊ฐ€์š”?

๋„ค ๊ทธ๋ ‡์Šต๋‹ˆ๋‹ค. ๊ธฐ์ดˆ ๊ฐœ๋…์„ ๋‹ค๋ฃจ๊ธฐ ๋•Œ๋ฌธ์— ์ „๊ณต์ž๊ฐ€ ์•„๋‹Œ ๋ถ„๋“ค๋„ ๋ช…ํ™•ํ•˜๊ฒŒ ์ดํ•ดํ•  ์ˆ˜ ์žˆ๋„๋ก ์ฐจ๊ทผ์ฐจ๊ทผ ์•Œ๋ ค๋“œ๋ฆด ์˜ˆ์ •์ž…๋‹ˆ๋‹ค.

Q. ์™œ ๊ฐ•ํ™”ํ•™์Šต์„ ๋ฐฐ์›Œ์•ผ ํ•˜๋‚˜์š”?

์ €๋Š” ์ธ๊ณต์ง€๋Šฅ์˜ ๋ฏธ๋ž˜๊ฐ€ ๊ฐ•ํ™”ํ•™์Šต์— ๋‹ฌ๋ ค ์žˆ๋‹ค๊ณ  ๋ฏฟ์Šต๋‹ˆ๋‹ค. ํŠนํžˆ AI Production๊ณผ ๊ฐ•ํ™”ํ•™์Šต์„ ์ปค๋ฆฌ์–ด์˜ ๋‘ ํ‚ค์›Œ๋“œ๋กœ ์‚ผ์•˜์„ ๋งŒํผ ๊ฐ•ํ™”ํ•™์Šต์— ๋Œ€ํ•œ ํ™•์‹ ์ด ์žˆ์Šต๋‹ˆ๋‹ค.

Q. ๊ฐ•ํ™”ํ•™์Šต์„ ๋ฐฐ์šฐ๋ฉด ๋ญ๊ฐ€ ์ข‹์€๊ฐ€์š”?

์ธ๊ณต์ง€๋Šฅ์ด ์ฃผ์–ด์ง„ ์ƒํ™ฉ์—์„œ ์˜์‚ฌ๊ฒฐ์ •์„ ๋‚ด๋ฆฌ๋Š” ๋ฐฉ๋ฒ•์— ๋Œ€ํ•œ ์ด๋ก ์  ํ† ๋Œ€๋ฅผ ์Œ“์„ ์ˆ˜ ์žˆ๊ฒŒ ๋ฉ๋‹ˆ๋‹ค.

Q. ๊ฐ•์˜๋ฅผ ๋“ฃ๊ธฐ ์ „, ์ค€๋น„ํ•ด์•ผ ํ•  ๊ฒƒ์ด ์žˆ๋‚˜์š”?

Python์˜ ๊ธฐ์ดˆ๋ฅผ ์กฐ๊ธˆ ์ตํ˜€๋‘์‹œ๋ฉด ๊ฐ•์˜ ์ˆ˜๊ฐ•์— ๋„์›€์ด ๋  ๊ฒ๋‹ˆ๋‹ค.

Q. ์ˆ˜์—… ๋‚ด์šฉ์„ ์–ด๋Š ์ˆ˜์ค€๊นŒ์ง€ ๋‹ค๋ฃจ๋‚˜์š”?

๊ธฐ์ดˆ ์ด๋ก ๊ณผ ๊ฐ„๋‹จํ•œ ์‹ค์Šต๊นŒ์ง€ ๋‹ค๋ฃจ๊ฒŒ ๋  ๊ฒƒ์ž…๋‹ˆ๋‹ค.

ํ˜น์‹œ, ์ด ๊ฐ•์˜๋„ ๋“ค์–ด๋ณด์…จ๋‚˜์š”? โœจ

 Chris Song ์ง€์‹๊ณต์œ ์ž์˜ ๋จธ์‹ ๋Ÿฌ๋‹ ๊ฐ•์˜

์ด๋Ÿฐ ๋ถ„๋“ค๊ป˜
์ถ”์ฒœ๋“œ๋ ค์š”!

ํ•™์Šต ๋Œ€์ƒ์€
๋ˆ„๊ตฌ์ผ๊นŒ์š”?

  • ๊ฐ•ํ™”ํ•™์Šต์˜ ๊ธฐ๋ณธ๊ธฐ๋ฅผ ์ตํžˆ๊ณ  ์‹ถ์€ ๋ถ„๋“ค

  • ์•ŒํŒŒ๊ณ ์˜ ์›๋ฆฌ๋ฅผ ์ดํ•ดํ•˜๊ณ  ์‹ถ์€ ๋ถ„๋“ค

  • ๋จธ์‹ ๋Ÿฌ๋‹ ๋Œ€ํ•™์›์— ์ง„ํ•™ ์˜ˆ์ •์ธ ๋ถ„๋“ค

  • ๋จธ์‹ ๋Ÿฌ๋‹์œผ๋กœ ์ปค๋ฆฌ์–ด๋ฅผ ์ „ํ–ฅํ•˜๊ณ ์ž ํ•˜๋Š” ๋ถ„๋“ค

์„ ์ˆ˜ ์ง€์‹,
ํ•„์š”ํ• ๊นŒ์š”?

  • ํŒŒ์ด์ฌ ๊ธฐ์ดˆ

์•ˆ๋…•ํ•˜์„ธ์š”
Chris Song์ž…๋‹ˆ๋‹ค.

1,017

๋ช…

์ˆ˜๊ฐ•์ƒ

89

๊ฐœ

์ˆ˜๊ฐ•ํ‰

8

๊ฐœ

๋‹ต๋ณ€

4.4

์ 

๊ฐ•์˜ ํ‰์ 

3

๊ฐœ

๊ฐ•์˜

(ํ˜„) ๋คผ์ด๋“œ VP of AIOps

(ํ˜„) Google Developer Expert for Machine Learning

(์ „) Naver - AI Research Engineer

(์ „) Kakao - Data Engineer

์ปค๋ฆฌํ˜๋Ÿผ

์ „์ฒด

12๊ฐœ โˆ™ (5์‹œ๊ฐ„ 2๋ถ„)

๊ฐ•์˜ ๊ฒŒ์‹œ์ผ: 
๋งˆ์ง€๋ง‰ ์—…๋ฐ์ดํŠธ์ผ: 

์ˆ˜๊ฐ•ํ‰

์•„์ง ์ถฉ๋ถ„ํ•œ ํ‰๊ฐ€๋ฅผ ๋ฐ›์ง€ ๋ชปํ•œ ๊ฐ•์˜์ž…๋‹ˆ๋‹ค.
๋ชจ๋‘์—๊ฒŒ ๋„์›€์ด ๋˜๋Š” ์ˆ˜๊ฐ•ํ‰์˜ ์ฃผ์ธ๊ณต์ด ๋˜์–ด์ฃผ์„ธ์š”!