Community

๐Ÿ“ฐ OpenAI์˜ Superalignment ํŒ€ ํ•ด์ฒด

AI์˜ ์ •๋ ฌ(์ธ๋ฅ˜์—๊ฒŒ ์œ ์ตํ•œ ๋ฐฉํ–ฅ์œผ๋กœ ํ•™์Šต์‹œํ‚ค๋Š” ๊ฒƒ) ๋ฌธ์ œ๋ฅผ ํ•ด๊ฒฐํ•˜๊ธฐ ์œ„ํ•œ ํŒ€์ธ SuperalignmentํŒ€์˜ Lead์˜€๋˜ Ilya์™€ ํ•จ๊ป˜ co-lead์˜€๋˜ Jan Leike๊ฐ€ ์‚ฌ์ž„ํ•˜๋ฉด์„œ, ์‹ค์งˆ์ ์œผ๋กœ ํŒ€์ด (์ž์ง„)ํ•ด์ฒด ๋œ ๊ฒƒ ๊ฐ™์Šต๋‹ˆ๋‹ค. OpenAI๊ฐ€ Alignment๋ณด๋‹ค ์ œํ’ˆํ™”์ชฝ์„ ๋” ๋น ๋ฅด๊ฒŒ ๊ฐ€์ ธ๊ฐ€๋Š” ์ชฝ์œผ๋กœ ์šฐ์„ ์ˆœ์œ„๋ฅผ ๋†’์ด๋ฉด์„œ ๋ฐœ์ƒํ•œ ๊ตฌ์กฐ์ ์ธ ๋ณ€ํ™”์ธ ๊ฒƒ ๊ฐ™์Šต๋‹ˆ๋‹ค. Alignment์— ๋Œ€ํ•œ ์šฐ๋ ค๊ฐ€ ์žˆ๊ธด ํ•˜์ง€๋งŒ, ์ด๋กœ์ธํ•ด OpenAI์˜ ํ–‰๋ณด๋Š” ๋”์šฑ ๋นจ๋ผ์งˆ ๊ฒƒ์œผ๋กœ ์˜ˆ์ƒ๋ฉ๋‹ˆ๋‹ค. ๊ทธ๋ณด๋‹ค, ์ด๋Ÿฌํ•œ ๋ณ€ํ™”์—์„œ ์ƒ๊ฐํ•ด ๋ณผ ์ˆ˜ ์žˆ๋Š” ๊ฐ€์„ค์ด ๋‹ค์Œ๊ณผ ๊ฐ™์ด ์žˆ๋Š”๋ฐ์š”. 1๏ธโƒฃ OpenAI๋Š” ํ›จ์”ฌ ๋” ๋‚˜์€ ๋ชจ๋ธ์ด ์ด๋ฏธ ๊ฐ€์ง€๊ณ  ์žˆ์Œ. ๊ทธ๋ ‡์ง€ ์•Š๋‹ค๋ฉด ChatGPT๋กœ ์ด๋ฏธ ๋งŽ์€ ๋ˆ์„ ๋ฒŒ๊ณ  ์žˆ๋Š” ์ƒํƒœ์—์„œ GPT-4 ์ˆ˜์ค€์˜ ๋ชจ๋ธ์„ ๋ชจ๋“  ์‚ฌ๋žŒ์—๊ฒŒ ๋ฌด๋ฃŒ๋กœ ์ œ๊ณตํ•˜์ง€ ์•Š์„ ๊ฒƒ. 2๏ธโƒฃ ํ‡ด์‚ฌํ•˜๋Š” ํŒ€์›(Ilya, Jan๋“ฑ)์ด ๊ณง ๋” ํฐ ๋Šฅ๋ ฅ์ด ๋‚˜์˜ฌ ๊ฒƒ์„ ๊ฑฑ์ •ํ•˜์ง€ ์•Š๋Š”๋‹ค๋ฉด ์ •๋ ฌ์—๋„ ์‹ ๊ฒฝ ์“ฐ์ง€ ์•Š์„ ๊ฒƒ. AI๊ฐ€ ์ง€๊ธˆ ์ˆ˜์ค€์— ๋จธ๋ฌธ๋‹ค๋ฉด ๋Œ€๋ถ€๋ถ„ ๋ฌธ์ œ๊ฐ€ ๋˜์ง€ ์•Š์„ ๊ฒƒ์ด๊ธฐ ๋•Œ๋ฌธ. Jan Leike๊ฐ€ ์‚ฌ์ž„ํ•˜๋ฉด์„œ ์“ด ๊ธ€์—๋Š” OpenAI๊ฐ€ Alignment(์ •๋ ฌ)์— ์†Œํ™€ํ•ด์„œ ๋” ์ด์ƒ ํ•จ๊ป˜ ํ•  ์ˆ˜ ์—†๋‹ค๊ณ  ํŒ๋‹จํ•ด์„œ ์‚ฌ์ž„ํ–ˆ๋‹ค๊ณ  ํ•˜๋Š”๋ฐ์š”. ์ด๋Ÿฐ ์ƒํ™ฉ๋“ค์„ ๋ณด๋ฉด ์•„๋งˆ๋„ Ilya์™€ ํ•จ๊ป˜ Superalignment์™€ ๊ด€๋ จ๋œ ํšŒ์‚ฌ๋‚˜ ๋‹จ์ฒด๋ฅผ ์„ค๋ฆฝํ•˜์ง€ ์•Š์„๊นŒ๋ผ๋Š” ์ถ”์ธก์ด ๋ฉ๋‹ˆ๋‹ค. OpenAI์˜ ์ด๋ฆ„๊ณผ ๋‹ฌ๋ฆฌ ๋‚ด๋ถ€์˜ ํ–‰๋ณด๊ฐ€ Apple๋งŒํผ์ด๋‚˜ ๋น„๋ฐ€๋ฆฌ์— ์ง„ํ–‰๋˜๊ณ  ์žˆ๋Š”๋ฐ์š”. ใ…Žใ…Ž ๊ณผ์—ฐ ์ง„์‹ค์€ ์–ด๋””๊นŒ์ง€์ผ์ง€ ์‚ฌ๋ญ‡ ๊ถ๊ธˆํ•ด์ง‘๋‹ˆ๋‹ค.

์•Œ๋ฆผ

์•Œ๋ฆผ์ด ์—†์Šต๋‹ˆ๋‹ค