Community

๐Ÿ”Ž ๋ฐ์ดํ„ฐ ๊ณผํ•™์— ๋Œ€ํ•ด

์œ ํŠœ๋ธŒ ์ฑ„๋„ ์˜ 2020๋…„ 6์›” ๊ฐ•์˜ ์˜์ƒ(https://youtu.be/8N9ife7fHKk?t=2323)์„ ์ด์ œ์„œ์•ผ ์šฐ์—ฐํžˆ ๋ณด๊ฒŒ๋˜์—ˆ๋‹ค. 38๋ถ„๋ถ€ํ„ฐ ์•ฝ 10๋ถ„๊ฐ„ ์•„๋ž˜ ๊ทธ๋ฆผ ํ•œ์žฅ์„ ๊ฐ€์ง€๊ณ  ๋ฐ์ดํ„ฐ ์‚ฌ์ด์–ธ์Šค์— ๋Œ€ํ•œ ์ƒ๊ฐ๊ณผ ์šฐ๋ฆฌ๋‚˜๋ผ ๋ฐ์ดํ„ฐ ์‚ฌ์ด์–ธ์Šค ์—…๊ณ„์— ๊ด€ํ•œ ์ƒ๊ฐ์„ ํ’€์–ด๋‚ด๋Š”๋ฐ, ๋„ˆ๋ฌด๋‚˜๋„ ํฅ๋ฏธ๋กœ์› ๊ณ  ์žฌ๋ฐŒ์—ˆ๋‹ค. ๋‚ด๊ฐ€ ์˜ค๋žœ ์‹œ๊ฐ„ ์ƒ๊ฐํ•˜๊ณ  ๊ณ ๋ฏผํ–ˆ๋˜ ์ง€์ ๋“ค๊ณผ ์ผ์น˜ํ•˜๋Š” ๋ถ€๋ถ„์ด ์ƒ๋‹นํžˆ ๋งŽ์•„์„œ ์ผ๊นŒ? ๊ทธ๋ž˜์„œ, ์˜์ƒ ๋‚ด์šฉ์ด ์ฐธ ๋ฐ˜๊ฐ‘๊ธฐ๋„ ํ–ˆ๋‹ค. ์˜์ƒ์—์„œ ์ธ์ƒ๊นŠ์—ˆ๋˜ ๋Œ€๋ชฉ๊ณผ ๊ทธ ๋Œ€๋ชฉ์ด ์ธ์ƒ ๊นŠ์—ˆ๋˜ ๊ฐœ์ธ์  ์ด์œ ์— ๋Œ€ํ•ด ๊ธฐ๋กํ•˜๊ณ  ์‹ถ์–ด์„œ ์˜์ƒ์„ ๋ณด๊ณ  ๋‚œ ์งํ›„ ๋ฐ”๋กœ ์ด๋ ‡๊ฒŒ ๊ธ€์„ ์“ฐ๊ณ  ์žˆ๋‹ค. --- 1. "๋ฐ์ดํ„ฐ ์‚ฌ์ด์–ธ์Šค๋Š” ์ตœ๊ทผ ๋ช‡๋…„๊ฐ„ ํฐ ๋ถ์ด ์ผ์—ˆ๋‹ค. ๊ทผ๋ฐ ๋‚ด๊ฐ€ ๊ฐœ์ธ์ ์œผ๋กœ ๋А๋ผ๋Š” ์•„์‰ฌ์šด ์ ์€ ์šฐ๋ฆฌ๋‚˜๋ผ์—์„œ์˜ ๋ฐ์ดํ„ฐ ๊ณผํ•™์— ๊ด€ํ•œ ์œ ํ–‰์€ ํ•œ์ชฝ์œผ๋กœ(์˜ˆ์ธก ๋ฐฉ๋ฒ•๋ก ) ์น˜์šฐ์ณ์ ธ์žˆ์ง€ ์•Š๋‚˜ ํ•˜๋Š” ๊ฐœ์ธ์  ์šฐ๋ ค๋ฅผ ๊ฐ€์ง€๊ณ  ์žˆ๋‹ค." -> ๋‚˜ ๋˜ํ•œ ๊ฐœ์ธ์ ์œผ๋กœ ์šฐ๋ฆฌ๋‚˜๋ผ ๋ฐ์ดํ„ฐ ์‚ฌ์ด์–ธ์Šค ์—…๊ณ„๋Š” ์˜ˆ์ธก ๋ชจ๋ธ๋ง์— ์ƒ๋‹นํžˆ ์น˜์šฐ์ณ ์žˆ๋‹ค๊ณ  ์ƒ๊ฐํ–ˆ๋Š”๋ฐ, 2๋…„ ์ „์˜ ์ด ์˜์ƒ์—์„œ๋„ ๊ฐ™์€ ์ง€์ ์„ ์ง€์ ํ•˜๊ณ  ๊ณ„์…จ๋‹ค. ๋ฐ•์ง€์šฉ ๊ต์ˆ˜๋‹˜์ด 2020๋…„์— ํ–ˆ๋˜ ๊ฐœ์ธ์  ์šฐ๋ ค๋Š” 2022๋…„์—๋„ ์—ฌ์ „ํ•œ๋“ฏ ํ•˜๋‹ค. 2022๋…„์— ์šฐ๋ฆฌ๋‚˜๋ผ ๋ฐ์ดํ„ฐ ์‚ฌ์ด์–ธ์Šค ์—…๊ณ„์˜ ์ˆ˜์‹ญ๊ฐœ์˜ ์ฑ„์šฉ ๊ณต๊ณ ๋ฅผ ๋“ค์—ฌ๋‹ค ๋ณด์•˜์ง€๋งŒ, "์ถ”๋ก "์ด๋ผ๋Š” ํ‚ค์›Œ๋“œ๋Š” ๋”ฑ ํ•œ ๋ฒˆ๋งŒ ๋ณผ ์ˆ˜ ์žˆ์—ˆ๋‹ค. ๊ทธ๋ž˜์„œ์ธ์ง€ ๊ทธ ๊ณต๊ณ ๋ฅผ ๋‚ธ ๊ธฐ์—…์˜ ํ•ด๋‹น ํŒ€์€ ๋‚ด๊ฒŒ ๋งค์šฐ ํŠน๋ณ„ํ•˜๊ฒŒ ๋А๊ปด์กŒ๋‹ค. ์‹ค์ œ๋กœ ์–ด๋–ค ์ฒ ํ•™๊ณผ ๋ฐฉ์‹์œผ๋กœ ์˜ˆ์ธก ๋ชจ๋ธ๋ง๊ณผ ์ธ๊ณผ์ถ”๋ก  ๋ฐฉ๋ฒ•๋ก ์„ ๊ฒฐํ•ฉํ•˜์—ฌ ๋ฐ์ดํ„ฐ ๊ณผํ•™์„ ํ•˜๊ณ  ์žˆ๋Š”์ง€ ๋งค์šฐ ๊ถ๊ธˆํ•œ ์ƒํƒœ์ด๋‹ค. 2. "๋ฐ์ดํ„ฐ ๊ณผํ•™์€ ํ•˜๋‚˜์˜ ํŠน์ • ํ•™๋ฌธ์ด๋ผ๊ธฐ ๋ณด๋‹ค๋Š” ๊ต‰์žฅํžˆ ํฌ๊ด„์ ์ด๋ผ๊ณ  ์ƒ๊ฐ์„ ํ•œ๋‹ค. ํŠน์ • ํ˜„์ƒ์ด๋‚˜ ๋Œ€์ƒ์— ๋Œ€ํ•ด ๋ฐ์ดํ„ฐ๋ฅผ ์ˆ˜์ง‘ํ•˜๊ณ  ๋˜๋Š” ๋งŒ๋“ค์–ด๋‚ด๊ณ , ๊ทธ ๋ฐ์ดํ„ฐ๋ฅผ ๊ฐ€์ง€๊ณ  ๋ถ„์„์„ ์ˆ˜ํ–‰ํ•˜์—ฌ ์˜์‚ฌ๊ฒฐ์ •์— ๋„์›€์ด ๋˜๋Š” ์ธ์‚ฌ์ดํŠธ๋ฅผ ์ถ”์ถœํ•˜๋Š” ๊ณผํ•™์  ์ ‘๊ทผ๋ฒ•๋“ค์„ ํ†ต์นญํ•˜๋Š” ๊ฒƒ์ด ๋ฐ์ดํ„ฐ ๊ณผํ•™์ด๋ผ๊ณ  ์ƒ๊ฐํ•œ๋‹ค. ๊ทธ๋ž˜์„œ, ์–ด๋–ค ํŠน์ • ํ•™๋ฌธ ๋ถ„์•ผ๊ฐ€ ๋ฐ์ดํ„ฐ ๊ณผํ•™์„ ํ•œ๋‹ค๊ธฐ ๋ณด๋‹ค๋Š”, ๋ฐ์ดํ„ฐ ๊ณผํ•™์˜ ์–ด๋–ค ์ฒ ํ•™์„ ๊ฐ€์ง€๊ณ  ๋งŽ์€ ๋ถ„์•ผ์—์„œ ์—ฐ๊ตฌ๋ฅผ ํ•˜๊ณ ์žˆ๋‹ค๊ณ  ์ƒ๊ฐํ•จ." -> "๋ฐ์ดํ„ฐ ๊ณผํ•™"์ด๋ผ๋Š” ๊ฒƒ์„ ํ•˜๊ณ ๋Š” ์žˆ์ง€๋งŒ, "๋ฐ์ดํ„ฐ ๊ณผํ•™"์„ ๋ชจ๋ฅด๋Š” ์‚ฌ๋žŒ๋“ค์—๊ฒŒ ์ด ์˜์—ญ์€ ์–ด๋–ป๊ฒŒ ์ •์˜ํ•  ์ˆ˜ ์žˆ์„๊นŒ์— ๋Œ€ํ•œ ๊ณ ๋ฏผ์„ ๊ฐ€์ง€๊ณ  ์žˆ์—ˆ๋‹ค. ๋ฐ์ดํ„ฐ ๊ณผํ•™์€ ์ˆ˜ํ•™, ํ†ต๊ณ„ํ•™ ๋“ฑ ์ˆœ์ˆ˜ํ•™๋ฌธ์˜ ์œ„์— ์‹ค์šฉํ•™๋ฌธ์ด ์–น์–ด์ง„ ์œตํ•ฉํ•™๋ฌธ์ด๋ผ๊ณ  ์ƒ๊ฐํ–ˆ์—ˆ๊ธฐ์— ๋”๋”์šฑ ์ •์˜๊ฐ€ ์–ด๋ ค์› ๋‹ค. "ํ•™๋ฌธ"์ด๋ผ๋Š” ํ‘œํ˜„ ๋˜ํ•œ ์ ์ ˆํ•  ์ง€๋Š” ๋ชจ๋ฅด๊ฒ ๋‹ค. ๊ณผ์—ฐ "๋ฐ์ดํ„ฐ ๊ณผํ•™"์„ ํ•™๋ฌธ์ด๋ผ๊ณ  ํ•  ์ˆ˜ ์žˆ๋Š”๊ฐ€? ๊ฐœ์ธ์ ์œผ๋กœ๋Š” "๋„๊ตฌ"๋ผ๋Š” ๋‹จ์–ด๊ฐ€ ๋”์šฑ ์ ์ ˆํ•˜๋‹ค๊ณ  ์ƒ๊ฐํ•œ๋‹ค. ๊ทธ๋ž˜์„œ, ๋ฐ•์ง€์šฉ ๊ต์ˆ˜๋‹˜์ด ์œ„์™€ ๊ฐ™์ด ์ •์˜ํ•œ ๋ฐ์ดํ„ฐ ๊ณผํ•™์ด ๋‚ด๊ฐ€ ์ƒ๊ฐํ–ˆ๋˜ ๋ฐ์ดํ„ฐ ๊ณผํ•™๊ณผ ๊ฐ€์žฅ ๊ฐ€๊นŒ์› ๋˜ ๊ฒƒ์ด ์•„๋‹๊นŒ? ๋ฐ์ดํ„ฐ ๊ณผํ•™๊ณผ ๋งˆ์ฐฌ๊ฐ€์ง€๋กœ "๋น…๋ฐ์ดํ„ฐ"์— ๋Œ€ํ•œ ์ •์˜๋„ ์—ฌ์ „ํžˆ ์ƒ๋‹นํžˆ ๋ชจํ˜ธํ•˜๋‹ค. ๋‹จ์ˆœํžˆ ํฌ๊ธฐ๊ฐ€ ํฐ ๋ฐ์ดํ„ฐ? ์˜ค์ฃฝํ•˜๋ฉด ์•„๋ž˜์™€ ๊ฐ™์€ ์œ ๋ช…ํ•œ ๋ง์ด ์žˆ๋‹ค. ๋น…๋ฐ์ดํ„ฐ๋Š” ์‹ญ๋Œ€์˜ ์„น์Šค์™€ ๊ฐ™๋‹ค. ๋‹ค๋“ค ๊ทธ๊ฒƒ์— ๋Œ€ํ•ด ๋งํ•˜์ง€๋งŒ, ์ง„์งœ๋กœ ์–ด๋–ป๊ฒŒ ํ•˜๋Š”์ง€๋Š” ์•„๋ฌด๋„ ๋ชจ๋ฅด๊ณ , ๋‚˜๋งŒ ๋นผ๊ณ  ๋ชจ๋‘๊ฐ€ ํ•˜๊ณ  ์žˆ์„ ๊ฑฐ๋ผ ์ƒ๊ฐํ•œ๋‹ค. ๊ทธ๋ž˜์„œ ๋‹ค๋“ค ์ž๊ธฐ๋„ ํ•˜๊ณ  ์žˆ๋‹ค๊ณ  ์ฃผ์žฅํ•œ๋‹ค. - ๋Œ„ ์• ๋ฆฌ์–ผ๋ฆฌ (Big data is like teenage sex: everyone talks about it, nobody really knows how to do it, and everyone thinks everyone else is doing it, so everyone claims they are doing it. - Dan Ariely) ๊ทธ๋ž˜์„œ, ๋‚˜๋Š” ๊ฐœ์ธ์ ์œผ๋กœ ๋น…๋ฐ์ดํ„ฐ๋ผ๋Š” ๋‹จ์–ด๋ฅผ ๊ทธ๋ ‡๊ฒŒ ์ข‹์•„ํ•˜์ง€๋Š” ์•Š๋Š”๋‹ค. ๋น…๋ฐ์ดํ„ฐ๋ฅผ ์ •์˜ํ•˜๋Š” ๋ฐ์—๋Š” ๋‹จ์ˆœํžˆ ํฌ๊ธฐ๊ฐ€ ํฐ ๋ฐ์ดํ„ฐ ์ •๋„๋กœ ์ •์˜ํ•˜๋Š” ๊ฒƒ์œผ๋กœ ์ถฉ๋ถ„ํ•˜๋‹ค๊ณ  ์ƒ๊ฐํ•˜์ง€๋งŒ, ๊ทธ ํฌ๊ธฐ์— ๋Œ€ํ•œ ๊ธฐ์ค€์—๋Š” ๋˜ ์ฃผ๊ด€์ด ๊ฐœ์ž…ํ•˜๊ธฐ ๋งˆ๋ จ์ด๋‹ˆ๊นŒ. ๋˜ ๋‹ค๋ฅธ ์ด๋“ค์€ "๋น…๋ฐ์ดํ„ฐ"๋ผ๋Š” ๋‹จ์–ด์— ๊ทธ ์ด์ƒ์˜ ์˜๋ฏธ๋ฅผ ๋ถ€์—ฌํ•˜๊ธฐ๋„ ํ•œ๋‹ค. ๊ทธ๋ž˜์„œ, "๋น…๋ฐ์ดํ„ฐ ๊ณต๋ถ€ํ•˜๊ธฐ", "๋น…๋ฐ์ดํ„ฐ ์ดํ•ดํ•˜๊ธฐ"๋ผ๋Š” ๋ง์ด ์กด์žฌํ•˜๋Š” ๊ฒƒ์ด ์•„๋‹๊นŒ? 3. "์ง์ ‘์ ์ธ ๋ฐ์ดํ„ฐ ๊ณผํ•™ ํˆด๋กœ์จ๋Š” ์˜ˆ์ธก์„ ์œ„ํ•œ ๋จธ์‹ ๋Ÿฌ๋‹์ด๋‚˜ ์ธ๊ณผ์ถ”๋ก ์„ ์œ„ํ•œ ๊ณ„๋Ÿ‰ ๊ฒฝ์ œํ•™์€ ์‚ฌ์‹ค ๊ฐ์ž์˜ ๋ชฉ์ ์„ ๊ฐ€์ง€๊ณ  ๋…๋ฆฝ์ ์ธ ๋ถ„์•ผ๋กœ ๋ฐœ์ „ํ•˜๊ณ  ์žˆ๋‹ค. ๊ทธ๋ ‡๋‹ค๊ณ ํ•ด์„œ ํ†ต๊ณ„๊ฐ€ ์ค‘์š”ํ•˜์ง€ ์•Š์€๊ฐ€? ์ ˆ๋Œ€ ๊ทธ๋ ‡์ง€ ์•Š๋‹ค. ์‚ฌ์‹ค ๋จธ์‹ ๋Ÿฌ๋‹์ด๋‚˜ ๊ณ„๋Ÿ‰ ๊ฒฝ์ œ๋Š” ๊ธฐ๋ณธ์ ์œผ๋กœ ํ†ต๊ณ„์— ์ด๋ก ์  ๋ฐ”ํƒ•์„ ๋‘๊ณ  ์žˆ๋‹ค. ๊ทธ๋ž˜์„œ, ๋‚˜๋Š” ํ†ต๊ณ„๋ผ๋Š” ๊ฒƒ์„ ๋ฐ์ดํ„ฐ ๊ณผํ•™์ด ๋– ์žˆ๋Š” ๋ฐ”๋‹ค ๊ทธ ์ž์ฒด๋ผ ํ‘œํ˜„ํ•˜๊ณ  ์‹ถ๋‹ค. ๊ทธ ๋ฐ”๋‹ค๊ฐ€ ์—†๋‹ค๋ฉด ์‚ฌ์ง„ ์† ์Œ๋Œ์ด ๋ฐฐ ์ž์ฒด๊ฐ€ ํ•ญํ•ด๋ฅผ ํ•  ์ˆ˜ ์—†๊ธฐ ๋•Œ๋ฌธ. ํ†ต๊ณ„๊ฐ€ ์ธ๊ณผ์ถ”๋ก ์„ ์œ„ํ•ด ๋ฐ˜๋“œ์‹œ ํ•„์š”ํ•˜๋‹ค๊ณ  ์ƒ๊ฐํ•˜์ง„ ์•Š์œผ๋‚˜, ๋ฐ์ดํ„ฐ ๋ถ„์„์— ๊ด€ํ•œ ๊นŠ์ด ์žˆ๋Š” ์ดํ•ด๋ฅผ ์œ„ํ•ด์„œ๋Š” ํ†ต๊ณ„ํ•™์€ ํ•„์ˆ˜์ ์ด๋‹ค." -> ์ถ”๋ก (inference)์ด๋ผ๋Š” ์˜์—ญ์€ ๋ฐ์ดํ„ฐ ๊ณผํ•™์„ ์ด๋Œ์–ด๊ฐ€๋Š” ์ˆ˜๋งŽ์€ ํ•™๋ฌธ๋“ค ์ค‘ ํ†ต๊ณ„ํ•™๋งŒ์˜ ๊ฒƒ์ด๋ผ๊ณ  ์ƒ๊ฐํ–ˆ์—ˆ๋Š”๋ฐ, ๊ณ„๋Ÿ‰ ๊ฒฝ์ œํ•™์ด ์ธ๊ณผ์ถ”๋ก ์„ ์ด๋Œ์–ด๊ฐ€๋Š” ํ•™๋ฌธ์ด์˜€๋‹ค๋Š” ๊ฒƒ์€ ์ด ์˜์ƒ์„ ํ†ตํ•ด ์•Œ๊ฒŒ๋˜์—ˆ๋‹ค. ์ฐธ ํฅ๋ฏธ๋กญ๋‹ค.๐Ÿ˜€ ์ถ”๋ก ์  ๊ด€์ ์˜ ๋ชจ๋ธ๋ง์— ๋Œ€ํ•œ ๊ด€์‹ฌ์€ ํšŒ๊ท€๋ถ„์„์ด ๊ฐ–๋Š” ๊ฐ€์น˜์— ๋Œ€ํ•ด ์ƒ๊ฐํ•ด๋ณด๋ฉฐ ์‹œ์ž‘๋˜์—ˆ๋‹ค. ๋‚ด ์ž…์œผ๋กœ ๋งํ•˜๊ธฐ๋„ ๋ถ€๋„๋Ÿฝ์ง€๋งŒ, ํ†ต๊ณ„ํ•™๊ณผ ๋Œ€ํ•™์› ํšŒ๊ท€๋ถ„์„ ์ˆ˜์—…์„ ์ง„ํ–‰ํ•˜์‹œ๋Š” ๊ต์ˆ˜๋‹˜์ด "ํšŒ๊ท€๋ถ„์„์€ ๊ตฌ์‹์ด๋‹ค."๋ผ๋Š” ์ถฉ๊ฒฉ์ ์ธ ๋ง์„ ๋“ค์€ ๋•Œ๊ฐ€ ๋ฐ”๋กœ ์ด ์ƒ๊ฐ์˜ ๊ณ„๊ธฐ์˜€๋‹ค. ๋‚˜๋Š” ๊ฒฐ์ฝ” ๊ทธ๋ ‡์ง€ ์•Š์„ ๊ฒƒ์ด๋ผ ์ƒ๊ฐํ–ˆ๊ธฐ ๋•Œ๋ฌธ์—. ํšŒ๊ท€๋ถ„์„์ด ๊ฐ€์ง€๋Š” ๊ฐ€์น˜์— ๋Œ€ํ•ด ๊ณ ์ฐฐํ•˜๋ฉฐ, ์ฑ…์—์„œ ์ฐพ์•„๋ณด๊ธฐ๋Š” ์–ด๋ ค์šด ๊ฐœ์ธ์ ์ธ ๊ถ๊ธˆ์ฆ์ด ์ƒ๊ธธ ๋•Œ๋ฉด ์ง€๋„๊ต์ˆ˜๋‹˜์„ ์ฐพ์•„๊ฐ€ ์งˆ๋ฌธ์„ ๋˜์ง€๊ธฐ๋„ ํ–ˆ๋‹ค. ํ†ต๊ณ„ํ•™์—์„œ๋Š” ํšŒ๊ท€๋ถ„์„์„ ์ฒ ์ €ํ•˜๊ฒŒ ์ถ”๋ก ์  ๊ด€์ ์œผ๋กœ ์ ‘๊ทผํ•œ๋‹ค. ๊ทธ๋ž˜์„œ, ์ž”์ฐจ๋ถ„์„์€ ํšŒ๊ท€๋ถ„์„์˜ ๊ฝƒ์ด๋ผ ๋ถˆ๋ฆฌ๊ธฐ๋„ ํ•œ๋‹ค. ๋‹ค์ค‘๊ณต์„ ์„ฑ์— ๊ด€ํ•œ ๊ณ ๋ฏผ์„ ํ•˜๋Š” ์ด์œ ๋„ ๋ฐ”๋กœ ์ด ์ถ”๋ก ์— ๊ด€์‹ฌ์ด ์žˆ๊ธฐ ๋•Œ๋ฌธ์ด๋‹ค. ๋ฐ˜๋ฉด, ๊ธฐ๊ณ„ํ•™์Šต์—์„œ ์ง€๋„ํ•™์Šต ๊ธฐ๋ฒ•์„ ์†Œ๊ฐœํ•  ๋•Œ ๋งจ์ฒ˜์Œ์— ๋“ฑ์žฅํ•˜๋Š” ํšŒ๊ท€๋ถ„์„ ๊ธฐ๋ฒ•์€ ์ฒ ์ €ํ•˜๊ฒŒ ์˜ˆ์ธก ๋ชจ๋ธ๋ง ๊ด€์ ์—์„œ ์†Œ๊ฐœ๋œ๋‹ค. ๊ทธ๋ž˜์„œ, ๋‹ค์ค‘๊ณต์„ ์„ฑ, ์ž”์ฐจ๋ถ„์„์— ๊ด€ํ•œ ์ด์•ผ๊ธฐ๋Š” ๋‚˜์˜ค์ง€ ์•Š๋Š”๋‹ค. ์ด๋Ÿฌํ•œ ๋‘ ๊ด€์ ์˜ ์ฐจ์ด๋Š” Ridge, Lasso์™€ ๊ฐ™์€ ๋ฒŒ์  ํšŒ๊ท€(penalized regression) ๋ฐฉ๋ฒ•๋ก ์— ๋Œ€ํ•œ ๋ชจํ‹ฐ๋ฒ ์ด์…˜์—์„œ๋„ ๋“œ๋Ÿฌ๋‚œ๋‹ค. ํ†ต๊ณ„ํ•™์—์„œ ๋ฒŒ์  ํšŒ๊ท€ ๋ฐฉ๋ฒ•๋ก ์˜ ๊ทผ๋ณธ์  ๋ชจํ‹ฐ๋ฒ ์ด์…˜์€ ๋‹ค์ค‘๊ณต์„ ์„ฑ์œผ๋กœ ์ธํ•ด ๋ฐœ์ƒํ•˜๋Š” ํšŒ๊ท€๊ณ„์ˆ˜ ์ถ”๋ก ์˜ ์–ด๋ ค์›€์ด์ง€๋งŒ, ๊ธฐ๊ณ„ํ•™์Šต์—์„œ ๋ฒŒ์  ํšŒ๊ท€ ๋ฐฉ๋ฒ•๋ก ์ด ๊ฐ–๋Š” ๊ทผ๋ณธ์  ๋ชจํ‹ฐ๋ฒ ์ด์…˜์€ Regularization์ด๋‹ค. ์„ ํ˜• ํšŒ๊ท€์—๋Š” unobserved data set์— ๊ด€ํ•œ ์„ฑ๋Šฅ์„ ์กฐ์ ˆํ• ๋งŒํ•œ ๋ชจ์ˆ˜๊ฐ€ ์—†๋‹ค๋Š” ๊ฒƒ์ด๋‹ค. ๋‹ค๋ฅธ ๋ง๋กœํ•˜๋ฉด ๊ณผ์ ํ•ฉ์ด ๋˜๋Š” ๊ฒƒ์„ ๋ฐฉ์ง€ํ•  ์ˆ˜ ์žˆ๋Š” ์žฅ์น˜๊ฐ€ ์—†๋‹ค๋Š” ์ด์•ผ๊ธฐ์ด๊ณ . ๋ฌผ๋ก , ํ†ต๊ณ„ํ•™๊ณผ์—์„œ ํšŒ๊ท€๋ถ„์„์„ ๊ฐ€๋ฅด์น  ๋•Œ "์ถ”๋ก ์  ๋ชจ๋ธ๋ง ๊ด€์ "์ด๋ผ๋Š” ๋“ฑ์˜ ์„ค๋ช…์€ ๋”ฐ๋กœ ํ•˜์ง€ ์•Š๋Š”๋‹ค. ๊ทธ๋Ÿฌ๋‚˜, ๋‚˜๋Š” "ํšŒ๊ท€๋ถ„์„์€ ๊ตฌ์‹์ด๋‹ค."๋ผ๋Š” ์ถฉ๊ฒฉ์ ์ธ ํ†ต๊ณ„ํ•™๊ณผ ๊ต์ˆ˜๋‹˜์˜ ์›Œ๋”ฉ์„ ๋“ฃ๊ณ  ํšŒ๊ท€๋ถ„์„์ด ๊ฐ–๋Š” ๊ฐ€์น˜์— ๋Œ€ํ•œ ๊ณ ์ฐฐ์„ ์‹œ์ž‘ํ–ˆ๊ณ , ์ถ”๋ก ์  ๋ชจ๋ธ๋ง์˜ ๊ด€์ ๊ณผ ์˜ˆ์ธก ๋ชจ๋ธ๋ง์˜ ๊ด€์ ์— ๋”ฐ๋ผ ๊ฐ™์€ ๋ฐฉ๋ฒ•๋ก ๋„ ๋‹ค๋ฅธ ๋ฐฉ์‹์œผ๋กœ ์„ค๋ช…๋˜๊ณ  ์ด๋ก  ์ „๊ฐœ๊ฐ€ ๊ฐ€๋Šฅํ•˜๋‹ค๋Š” ๊ฒƒ์„ ์ดํ•ดํ•  ์ˆ˜ ์žˆ์—ˆ๋‹ค. ๊ทธ๋ž˜์„œ, ๊ทธ ์ถฉ๊ฒฉ์ ์ธ ๋ง์„ ํ•ด์ค€ ๊ต์ˆ˜๋‹˜๊ป˜ ์ง€๊ธˆ์€ ์ฐธ ๊ฐ์‚ฌํ•œ ๋งˆ์Œ์ด ๋“ ๋‹ค. ๋ฌผ๋ก , ์ด๋Ÿฌํ•œ ๊ณ ์ฐฐ์„ ํ•˜์ง€ ์•Š์•„๋„ ๋‹ค์Œ ํ•™๊ธฐ์— ์ง€๋„๊ต์ˆ˜๋‹˜๊ณผ ๊ณ ์ฐจ์› ๋ฐ์ดํ„ฐ ๋ถ„์„์„ ๊ณต๋ถ€ํ•˜๋ฉฐ ๊ณ ๋„ํ™”๋œ ํ˜•ํƒœ์˜ ๋ฒŒ์  ํ•ญ์„ ๊ฐ–๋Š” penalized regression model์ด ๊ณ ์ฐจ์› ๋ฐ์ดํ„ฐ(n<p)์˜ ์˜ˆ์ธก ๋ชจ๋ธ๋ง์—์„œ ๊ฐ–๋Š” ๊ฐ€์น˜๋ฅผ ์•Œ๊ฒŒ ๋˜๊ธด ํ–ˆ์ง€๋งŒ. ์ด๋ ‡๊ฒŒ ๋‘ ๊ด€์ ์— ๋Œ€ํ•œ ์ดํ•ด๊ฐ€ ์–ด๋А์ •๋„ ์ •๋ฆฝ๋˜๊ณ  ๋‚œ ๋’ค์— ์ ‘ํ•œ ์ธ๊ณผ์ถ”๋ก  ๋ฐฉ๋ฒ•๋ก ์€ ๋‚ด๊ฒŒ ๋ฌด์ฒ™์ด๋‚˜ ํฅ๋ฏธ๋กœ์šธ ์ˆ˜ ๋ฐ–์— ์—†์—ˆ๋‹ค. ์˜ˆ์ธก ๋ฐฉ๋ฒ•๋ก , ์ธ๊ณผ์ถ”๋ก  ๋ฐฉ๋ฒ•๋ก  ๋‘˜ ์ค‘ ์–ด๋А ๊ฒƒ์ด ๋” ์ค‘์š”ํ•˜๋‹ค๊ณ  ์ด์•ผ๊ธฐ ํ•˜๊ณ ์‹ถ์€ ๊ฒƒ์ด ์•„๋‹ˆ๋‹ค. ๋‘ ๋ฐฉ๋ฒ•๋ก  ๋ชจ๋‘ ๋ฐ์ดํ„ฐ ๊ณผํ•™์—์„œ ๋„ˆ๋ฌด๋‚˜๋„ ์ค‘์š”ํ•˜๊ณ , ์šฐ๋ฆฌ๋‚˜๋ผ ๋ฐ์ดํ„ฐ ๊ณผํ•™ ์—…๊ณ„๋Š” ์—ฌ์ „ํžˆ ์˜ˆ์ธก ๋ฐฉ๋ฒ•๋ก ์— ์ง€๋‚˜์น˜๊ฒŒ ์น˜์ค‘๋˜์–ด ์žˆ๋‹ค๋Š” ์ ์„ ์ด์•ผ๊ธฐํ•˜๊ณ  ์‹ถ๋‹ค. ๋‘˜์€ ํ•„ํžˆ ๊ท ํ˜•์„ ๋งž์ถ”์–ด ์–‘๋ฆฝํ•˜์—ฌ ๊ฐ€์•ผํ•œ๋‹ค. ๊ทธ๋ž˜์•ผ, ์ „ ๊ธ€์—์„œ ๋งํ–ˆ๋“ฏ์ด ๋ฐ์ดํ„ฐ๋ฅผ ๊ธฐ๋ฐ˜์œผ๋กœ ๋ฐ”๋ณด๊ฐ™์€ ์˜์‚ฌ๊ฒฐ์ •์„ ๋‚ด๋ฆฌ๋Š” ์ผ์„ ํ”ผํ•  ์ˆ˜ ์žˆ๊ฒŒ ํ•ด์ค„๊ฑฐ๋‹ˆ๊นŒ. ์‚ฌ์ง„ ์†์—์„œ ํ†ต๊ณ„๋ผ๋Š” ๋ฐ”๋‹ค ์œ„์— ๋– ์žˆ๋Š” ๋ฐ์ดํ„ฐ ๊ณผํ•™์„ ์ด๋Œ์–ด๊ฐ€๋Š” ์Œ๋Œ์ด ๋ฐฐ๊ฐ€ ๊ณง ์ธ๊ณผ์ถ”๋ก  ๋ฐฉ๋ฒ•๋ก ๊ณผ ์˜ˆ์ธก ๋ฐฉ๋ฒ•๋ก ์ด๋“ฏ์ด. --- ๋„ˆ๋ฌด๋‚˜๋„ ์ธ์ƒ๊นŠ์—ˆ๋˜ ์˜์ƒ์ด๋ผ ์†Œ๊ฐ์ด ๋„ˆ๋ฌด๋„ˆ๋ฌด ๊ธธ์—ˆ๋˜ ๊ฒƒ ๊ฐ™๋‹ค.๐Ÿ˜‚ ์ข‹์€ ์˜์ƒ์„ ์ด๋ ‡๊ฒŒ ๋ฌด๋ฃŒ๋กœ ํ’€์–ด์ฃผ๋Š” ์ธ๊ณผ์ถ”๋ก ์˜ ๋ฐ์ดํ„ฐ ๊ณผํ•™ ์œ ํŠœ๋ธŒ ์ฑ„๋„ ์šด์˜์ง„, ์ธ๊ณผ์ถ”๋ก  ๋ถ„์•ผ์— ๊ด€ํ•œ ์ˆ˜์ค€ ๋†’์€ ๊ฐ•์˜๋ฅผ ๋ฌด๋ฃŒ๋กœ, ๊ทธ๊ฒƒ๋„ ํ•œ๊ตญ์–ด๋กœ ์ œ๊ณตํ•ด์ฃผ์‹œ๋Š” UNGC ๋ฐ•์ง€์šฉ ๊ต์ˆ˜๋‹˜๊ป˜ ๊ฐ์‚ฌํ•จ์„ ์ „ํ•œ๋‹ค.

์•Œ๋ฆผ

์•Œ๋ฆผ์ด ์—†์Šต๋‹ˆ๋‹ค