๐ฆ๋๋ง ๋ชจ๋ฅด๋ ํ๋ก๋ํธ ๊ด๋ฆฌ ์ด์ผ๊ธฐ
[โ๏ธ๋ฆฌํ
์
๋ฐ์ดํฐ ํด๋ถํ๊ธฐ]
(๐๊ฐ๋จ ์์ฝ)
ํ๋ก๋ํธ ์ ๋๋ฆฌํฑ์ค์ ๊ธ๋ก๋ฒ ๋ฆฌ๋์ธ Amplitude๊ฐ ์ ์ํ๋ ๊ธฐ์ค์ ๊ฐ์ง๊ณ ๊ฐ์ฅ ์ผ๋ฐ์ ์ธ ๋ฆฌํ
์
์ธก์ ๋ฐฉ๋ฒ์ ํตํด ์ฌ๋ฐฉ๋ฌธ ์ ์ ์๋ฅผ ์ง๊ณํ๋ ๊ธฐ์ค์ ๋ฐ๋ผ ๋ฆฌํ
์
์ ์ธก์ ํ๋ 3๊ฐ์ง ๋ฐฉ๋ฒ์ ์์๋ณด๊ฒ ์ต๋๋ค.
๐ N-Day Retention : ์ฒซ ์ ์
์์ ์ดํ, ๋ฆฌํ
์
๋ถ์ ๊ธฐ๊ฐ ์ค ํน์ ๋ ์ง์๋ง ์ฌ๋ฐฉ๋ฌธํ ์ ์ ์
โ ์๋ฅผ ๋ค์ด, 7์ผ ๊ธฐ์ค ๋ฆฌํ
์
์ ๋ถ์ํ๋ค๊ณ ๊ฐ์ ํฉ์๋ค. ์ด ๋ ํน์ ์ฝํธํธ์ ๋ชจ์ง๋จ ์๊ฐ 100๋ช
์ธ๋ฐ ์ด ์ค 10๋ช
์ ์๋ก ๋ค๋ฅธ ์ฌ์ฉ์๊ฐ Day 2์ ๋ฐฉ๋ฌธํ๋ค๋ฉด, ์ด ์ฝํธํธ์ Day 2 ๋ฆฌํ
์
๋น์จ์ 10%์
๋๋ค
โ ๊ฐ์ฅ ์ผ๋ฐ์ ์ธ ๋ฆฌํ
์
๋ถ์ ๋ฐฉ๋ฒ์ผ๋ก, Classic Retention์ด๋ผ๊ณ ๋ ๋ถ๋ฆ
๋๋ค
๐ Unbounded Retention : ์ฒซ ์ ์
์์ ์ดํ, ํน์ ๋ ์ง๋ฅผ ํฌํจํ ๊ทธ ์ดํ์ ๋ ์ง์๋ ํ ๋ฒ ์ด์ ์ฌ๋ฐฉ๋ฌธํ ์ ์ ์
โ ์ด๋ฒ์๋ ๋ถ์ ๊ธฐ๊ฐ์ 3์ผ๋ก ๋๊ณ ๋ฆฌํ
์
์ ๋ถ์ํ๋ค๊ณ ๊ฐ์ ํฉ์๋ค. ์ด ๋ ํน์ ์ฝํธํธ์ ๋ชจ์ง๋จ ์๋ 3๋ช
(A, B, C)์ธ๋ฐ ์ด ์ค A์ B๋ Day 1์ ๋ฐฉ๋ฌธํ์ง๋ง C๋ Day 3์๋ง ๋ฐฉ๋ฌธํ์ต๋๋ค. ์ด ๊ฒฝ์ฐ, Day 1 ๋ฆฌํ
์
์ 100%์
๋๋ค. ์๋ํ๋ฉด C๋ ๋ถ์ ๊ธฐ๊ฐ์ธ 3์ผ ๊ฐ์ด๋ฐ 1๋ฒ ์ด์ ๋ฐฉ๋ฌธํ ์ฌ์ฉ์์ ํด๋นํ๊ธฐ ๋๋ฌธ์
๋๋ค.
โ Unbounded ๋ฆฌํ
์
์ ๋ถ์ ๊ธฐ๊ฐ ์ด๋ด์ 1๋ฒ ์ด์ ์ฌ๋ฐฉ๋ฌธํ ์ ์ ์ ๋ฆฌํ
์
์ ํน์ ๋ ์ง๋ก๋ถํฐ 1์ผ์ฉ ์ฆ๊ฐ์ํค๋ฉด์ ์ธก์ ํ ์ ์๋๋ฐ์. ์ด๋ฐ ์๋ฏธ์์ Rolling Retention์ด๋ผ๊ณ ๋ ๋ถ๋ฆ
๋๋ค.
๐ Bracket Retention : N๊ฐ๋ก ๋๋์ด์ง ๋ฆฌํ
์
๋ถ์ ๊ธฐ๊ฐ์์ ๊ฐ ๊ตฌ๊ฐ๋ณ๋ก ์ฌ๋ฐฉ๋ฌธํ ์ ์ ์
โ ์๋ฅผ ๋ค์ด, Bracket ๋ฆฌํ
์
์์๋ ์ด 7์ผ์ ๋ถ์ ๊ธฐ๊ฐ์ 3๊ฐ์ง๋ก ๊ตฌ๋ถํด์ Day 1-3 / Day 4-5 / Day 6-7 ๊ฐ ๊ตฌ๊ฐ๋ณ๋ก ์ฌ๋ฐฉ๋ฌธํ ์ ์ ๋ค์ ํ์ธํ๊ฒ ๋ฉ๋๋ค.
โ ์ฌ๊ธฐ์์ ์ค์ํ ์ ์ ์ญ์ ์ด์ ๊ตฌ๊ฐ์์ ์ฌ๋ฐฉ๋ฌธํ ์ ์ ๋ ๋ค์ ๊ตฌ๊ฐ์์ ์ฌ์๋ณ์ด ๋๋, ์๋๋์ ๋ํ ์ฌ๋ถ์ผ ๊ฒ์
๋๋ค. ๊ฒฐ๊ณผ์ ์ผ๋ก๋ ์ด์ ๊ตฌ๊ฐ์ ๋ฐฉ๋ฌธํ ์ฌ์ฉ์๋ผ๊ณ ํ ์ง๋ผ๋ ์ดํ ๊ตฌ๊ฐ์์ ๋ค์ ํ๋ฒ ์ฌ์๋ณ์ด ๊ฐ๋ฅํฉ๋๋ค. (Unbounded ๋ฆฌํ
์
์ ๊ฒฝ์ฐ, ๋ถ์ ๊ธฐ๊ฐ ๋ด์์ ํน์ ์ ์ ์ ์ฌ๋ฐฉ๋ฌธ์๋ฅผ 1๋ฒ ์ด์ ์ง๊ณํ์ง ์์ต๋๋ค)
โ ํน์ ๊ตฌ๊ฐ๋ณ ๋ฆฌํ
์
์ ๋ถ์ํ๋ค๋ ์๋ฏธ์์, Range Retention์ด๋ผ๊ณ ๋ ๋ถ๋ฆ
๋๋ค.
๐ ์ํ ํ๋ก์ ํธ ์งํ : ์์ ์คํธ๋ฆฌ๋ฐ ์๋น์ค ๋ฐ์ดํฐ, ๋ฌด๋ฃ/์ ๋ฃ ์ด์ฉ ๊ณ ๊ฐ์ 7์ผ ๊ธฐ์ค ๋ฆฌํ
์
โ ๋ถ์ ๊ธฐ๊ฐ : 2020. 08. 20 ๋ถํฐ ์ง์ 7์ผ
โ ์์ ์ด๋ฒคํธ : new user (์ฑ๊ณผ์ ์ฒซ ์ํธ์์ฉ)
โ ์ฌ๋ฐฉ๋ฌธ ์ด๋ฒคํธ : any active event
โ ์ฝํธํธ A : ๋ฌด๋ฃ ์ด์ฉ ๊ณ ๊ฐ
โ ์ฝํธํธ B : ์ ๋ฃ ์ด์ฉ ๊ณ
โ ๋ฆฌํ
์
๋ถ์ ๊ธฐ๊ฐ : 7์ผ
1๏ธโฃ N-Day ๋ฆฌํ
์
: ๊ฐ์ฅ ์ผ๋ฐ์ ์ด๊ณ ๊ฐ๋จํ ๋ถ์ ๋ฐฉ๋ฒ
โ (์์ธํ ์ฐจํธ๋ ์๋ฌธ์ ํ์ธํด์ฃผ์ธ์.) Day 1๋ถํฐ์ ๋ฆฌํ
์
์ ์ดํด๋ณด๋ฉด ์ ๋ฃ ์ด์ฉ ๊ณ ๊ฐ์ ๋ฆฌํ
์
์ด ์๋ฑํ ๋์
โ Day 7์๋ ๊ฐ๊ฐ ํ๋ฝํ๋ ์ถ์ธ ํ์ธ ๊ฐ๋ฅ
โ ์ด์ฒ๋ผ ํน์ ๋ ์ง์๋ง ๋๋์ ์ค๋ ์ ์ ๋ค์ ๋น์จ์ ํ์ธํ๊ณ ์ ํ ๋ N-day ๋ฆฌํ
์
์ ์ฌ์ฉ
2๏ธโฃ Unbounded ๋ฆฌํ
์
: ๋๊ฐ์ ์ ์ ๋ฐ์ดํฐ์
์ ๊ฐ์ง๊ณ ์ข ๋ ํฌ๊ด์ ์ผ๋ก ์ฌ๋ฐฉ๋ฌธ ์ ์ ์๋ฅผ ์ธก์ ํ๋ ๋ฐฉ๋ฒ
โ ์ฌ๋ฐฉ๋ฌธ ์ ์ ์๋ฅผ ์ง๊ณํ๋ ์๋์ฐ๋ฅผ ํน์ ๋ ์ง ํ๋ฃจ๊ฐ ์๋๋ผ, ๋ถ์ ๊ธฐ๊ฐ์ ๋๊น์ง ๊ฐ์ ธ๊ฐ
โ N-day ๋ฆฌํ
์
์ ๋นํด ๋์ฑ ํฌ๊ด์ ์ผ๋ก ์ ์ ์ ์ฌ๋ฐฉ๋ฌธ์ ์ธก์
โ ๋์ผ ๋ ์ง์ ์ธก์ ๋ ๋ฆฌํ
์
์์๋ ๋ถ๊ตฌํ๊ณ N-day ๋ฆฌํ
์
์ ๋นํด ์์น๊ฐ ๋์ ์ ์์
โ ํน์ ๋ ์ง์ ๋ฐฉ๋ฌธํ์ง ์์๋๋ผ๋ ๋ถ์ ๊ธฐ๊ฐ ๋ด 1๋ฒ ์ด์ ๋ฐฉ๋ฌธํ๋ฉด, ํด๋น ๋ ์ง ๋ฆฌํ
์
์ ๋ถ์์ ํฌํจ ๋๊ธฐ ๋๋ฌธ
3๏ธโฃ Bracket ๋ฆฌํ
์
: ๋ถ์ ๊ธฐ๊ฐ์ N๊ฐ์ ๊ตฌ๊ฐ์ผ๋ก ์ชผ๊ฐ์ ๋ฆฌํ
์
์ ํ์ธํ ์ ์๋ ๋ฐฉ๋ฒ
1๋ฌ์ 1๋ฒ ๋๋ 1์ฃผ์ผ์ 1๋ฒ ๋ฑ ํน์ ์ฃผ๊ธฐ๋ก ์ฑ์ ์ฌ์ฉํ๋ ๊ฒฝ์ฐ, ํด๋น ์ฃผ๊ธฐ ์์์ 1๋ฒ ์ด์ ์ฌ๋ฐฉ๋ฌธํ๊ธฐ๋ง ํ๋ฉด ์ด๋ ๊ณง ์ ์๋ฏธํ ๋ฆฌํ
์
. N-Day ๋ฆฌํ
์
์ผ๋ก ์ด๋ค์ ๋ฆฌํ
์
์ ๋ถ์ํ๋ค๋ฉด ์ด๋ป๊ฒ ๋ ๊น์? ๋ถ๋ช
ํ ์ ์์ ์ธ ์ฃผ๊ธฐ๋ก ์ฑ์ ์ฌ์ฉํ๊ฑด๋ฐ, ๋ฑ ์ด๋ ๋ ์ง์ ์ฌ๋ฐฉ๋ฌธํ์ง ์์๊ธฐ ๋๋ฌธ์ ํน์ ์ฝํธํธ์ ์์กด์จ์ด ๋ฎ๋ค๊ณ ํ๊ฐ๋ ๊ฒ.
โ ์ ์ฉํ๊ฒ ์ฌ์ฉ๋ ์ ์๋ ๊ฒฝ์ฐ๋ ํ ์ธ ํ๋ก๋ชจ์
๋ฑ ๋ง์ผํ
์บ ํ์ธ ์งํ ํจ๊ณผ๋ฅผ ๋ถ์ํ๊ณ ์ ํ ๋
โ ์ด๋ฒคํธ ์คํ ๊ตฌ๊ฐ๊ณผ ๋ฏธ์คํ ๊ตฌ๊ฐ์ ๊ตฌ๋ถํด์ ๋ฆฌํ
์
์ ๋ณผ ๋์ ํด๋น
โ ํด๋น ๊ตฌ๊ฐ๋ค์ Bracket์ผ๋ก ์ค์ ํด์ ์ด๋ฒคํธ ์งํ๊ณผ ๋ฆฌํ
์
๋ณํ ๊ฐ์ ์๊ด๊ด๊ณ๋ฅผ ํ์ธ
๐ Insights
์์ ์ดํด๋ณธ 3๊ฐ์ง ๋ฆฌํ
์
์ธก์ ๋ฐฉ๋ฒ์ ํตํด ์ป์ ์ ์๋ ์ค์ํ ์ธ์ฌ์ดํธ๋ ๋ฌด์์ผ๊น์? ๋์ผํ ์๋ณธ ๋ฐ์ดํฐ๋ฅผ ๊ฐ์ง๊ณ ๋ ์ธก์ ํ๋ ๋ฐฉ๋ฒ์ด ์ด๋ ๋์ ๋ฐ๋ผ ๋ฆฌํ
์
์ด ๋์๋ณด์ผ ์๋, ์ ์ด๋ณด์ผ ์๋ ์๋ค๋ ๊ฒ์
๋๋ค.
(๐์ค์ํ ์ด์ ๊ฐ ๋ญ๊ฐ์?)
์ ๊ฐ ์์ง ๊ทธ๋ฐ ์ค๋ ฅ์ ์๋์ง๋ง, ๊ธฐํ - PM ๋ด๋น ๋ฉด์ ์ ๋ณผ ๋, ์ค์ํ๊ฒ ๋ณธ ๋ฐ์ดํฐ๋ ์งํ๊ฐ ์๋์ง ๊ผญ ๋ฌผ์ด๋ณด๋๋ฐ์. (1)๋ด๋นํ๋ ์๋น์ค์ ๋ง๋ ์งํ์ธ์ง (2)๊ทธ ์งํ๋ฅผ ์, ์ด๋ป๊ฒ ๋ค์ฌ๋ค๋ดค๋์ง ํ์ธํ๊ณ ์ถ์ ๋ง์ ๋๋ฌธ์
๋๋ค. ๋ณธ๋ฌธ ๋ง์ง๋ง ์ธ์ฌ์ดํธ์๋ ๋ด๊ฒจ์์ง๋ง, ๋ฐ์ดํฐ๋ฅผ ์ด๋ป๊ฒ ๋ค์ฌ๋ค๋ณด๋๋์ ๋ฐ๋ผ ํด์์ ์ ํ ๋ฌ๋ผ์ง ์ ์๊ธฐ์ ๋๋์ฑ!
๊ทธ๋ฐ๋ฐ, D+7 ๊ธฐ์ค ๋ฆฌํ
์
์ ์์ฃผ ๋ดค์ต๋๋ค. ๋ผ๋ ๋ต์, ๋ค์ ์์? ์ด์ ๊ฐ ๋ญ๊น์? ๋ผ๊ณ ๋๋ฌผ์ผ๋ฉด ๋๋ต์ ์ ๋ชปํ๋ ๋ถ๋ค์ด ์์์ด์. ์ผ๋ถ๋ ์ด์ ๋ถํฐ ๊ทธ๋ ๊ฒ ๋ฐ์ดํฐ๋ฅผ ๋ด์๊ณ ์ค๊ฐ์ ๋ค์ด์์ ๊ทธ ๋ฐ์ดํฐ๋ฅผ ๊ทธ๋๋ก ์ด์ด์ ๋ณด๊ฒ ๋์๋ค - ๋ผ๊ณ , ์ผ๋ถ๋ ์คํฐ๋์์ ๊ฐ์ฅ ํจ์จ์ ์ธ ๋ถ์ ๊ธฐ๊ฐ์ด๋ผ๋ ๊ฒฐ๋ก ์ ์ป์๋ค - ๋ผ๊ณ ๋ตํ๋๋ฐ์.
๋ณธ๋ฌธ์ ๋์จ ์์์ ๋ฌผ๋ก , OTT์ ๊ฐ์ ์๋น์ค๋ค์ ๊ฑฐ์ ๋งค์ผ ์ฌ์ฉํ ๊ฐ๋ฅ์ฑ์ด ๋๊ณ ์ค์ ๋ก ์์ฃผ ๋ค์ด์์ ์ฝํ
์ธ ๋ฅผ ์๋นํ๋๊ฒ ์ค์ํ ์งํ๊ฐ ๋ ์ ์๋๋ฐ์. ๋์ผํ ์ธ๊ทธ๋จผํธ๋ฅผ ๊ธฐ์ค์ผ๋ก ํ์ ๋ ์ํ์ฑ๋ ๋งค์ผ ์จ์ผ ํ ์ด์ ๊ฐ ์์๊น์? ์ํ ์๋งค ์๋น์ค๋์?
์ค์ํ ๊ฑด ์ฐ๋ฆฌ ์๋น์ค์ ํน์ฑ์ด๋ผ๊ณ ์๊ฐํด์. ์๋น์ค์ ์ฑ๊ฒฉ์ ๋ฐ๋ผ ์ฌ์ฉ์๋ค์ด ์ด๋ ๊ฐ๊ฒฉ์ผ๋ก ์ฐ๋์ง ๋ฑ์ ๋ํ ๋ถ์ ๊ธฐ์ค์ ์ก์ ์ ์๊ณ ๊ทธ์ ๋ฐ๋ผ ๋ ์์ฃผ ์ฐ๊ฒ ํ์! ์๋๋ฉด ์์ฃผ ๋ค์ด์ค์ง ์๋๋ผ๋ ๋ค์ด์ฌ ๋ ํน์ ์ ํ์ ๋ฐ์์ํฌ ์ ์๋๋ก ํ์! ๋ผ๋ ๋ชฉํ๋ฅผ ์ค์ ํ ์ ์๊ธฐ ๋๋ฌธ์
๋๋ค.
(๐ํจ๊ป ์ฝ์ด๋ณด์ธ์!)
โ ์ฐ๋ฆฌ ์๋น์ค์ ์ ์ ์ธ๊ทธ๋ฉํ
์ด์
ํ๊ธฐ :
https://news.publy.co/comments/10310
โ Azar์ ๊ณต์ ํ A/B test ์ด์ ์์คํ
ABzar :
https://news.publy.co/comments/9208