๐Ÿ“Š

์ƒ๊ด€๊ด€๊ณ„ โ€” ์‚ฐ์ ๋„๋กœ ์ฝ๋Š” ๋ฐ์ดํ„ฐ์˜ ๊ด€๊ณ„

๐ŸŒŠLv.5

๊ณต๋ถ€๋ฅผ ๋งŽ์ด ํ•˜๋ฉด ์„ฑ์ ์ด ์˜ค๋ฅผ๊นŒ? ํ‚ค๊ฐ€ ํฌ๋ฉด ๋ฐœ๋„ ํด๊นŒ? ์ด ๊ด€๊ณ„๋ฅผ ์  ํ•˜๋‚˜ํ•˜๋‚˜๋กœ ๊ทธ๋ฆผ์— ๊ทธ๋ ค์„œ ๋‹ต์„ ์ฐพ์„ ์ˆ˜ ์žˆ๋‹ค!

๐Ÿ’ก ์™œ ํ•„์š”ํ• ๊นŒ์š”?

๋„ทํ”Œ๋ฆญ์Šค๋Š” ์‚ฌ์šฉ์ž์˜ ์‹œ์ฒญ ํŒจํ„ด ๋ณ€์ˆ˜๋“ค ์‚ฌ์ด์˜ ์ƒ๊ด€๊ด€๊ณ„๋ฅผ ๋ถ„์„ํ•ด ์˜ํ™”๋ฅผ ์ถ”์ฒœํ•ฉ๋‹ˆ๋‹ค. ์˜์‚ฌ๋Š” ํก์—ฐ๋Ÿ‰๊ณผ ํ์•” ๋ฐœ์ƒ๋ฅ ์˜ ์ƒ๊ด€๊ด€๊ณ„๋ฅผ ๊ทผ๊ฑฐ๋กœ ํก์—ฐ ์œ„ํ—˜์„ ๊ฒฝ๊ณ ํ•ฉ๋‹ˆ๋‹ค. ํŽธ์˜์  ์ ์ฃผ๋Š” ๊ธฐ์˜จ๊ณผ ์Œ๋ฃŒ ํŒ๋งค๋Ÿ‰์˜ ์ƒ๊ด€๊ด€๊ณ„๋ฅผ ๋ณด๊ณ  ๋ฐœ์ฃผ๋Ÿ‰์„ ๊ฒฐ์ •ํ•ฉ๋‹ˆ๋‹ค.

๐Ÿ“Š๐ŸŒก๏ธ๐ŸŽฏ

๐Ÿ“œ ์—ญ์‚ฌ ์ด์•ผ๊ธฐ

๐Ÿ”ฌ

์นผ ํ”ผ์–ด์Šจ (Karl Pearson)

1880๋…„๋Œ€~1890๋…„๋Œ€ ยท ์˜๊ตญ ๋Ÿฐ๋˜

1880๋…„๋Œ€, ์ฐฐ์Šค ๋‹ค์œˆ์˜ ์‚ฌ์ดŒ ํ”„๋žœ์‹œ์Šค ๊ณจํ„ด(Francis Galton)์€ ๋ถ€๋ชจ ํ‚ค์™€ ์ž๋…€ ํ‚ค ์‚ฌ์ด์˜ ๊ด€๊ณ„๋ฅผ ์ˆ˜๋ฐฑ ๊ฐ€์กฑ์— ๊ฑธ์ณ ์ธก์ •ํ–ˆ์Šต๋‹ˆ๋‹ค. ๊ทธ๋Š” ํ‚ค ํฐ ๋ถ€๋ชจ์˜ ์ž๋…€๊ฐ€ ํ‚ค๊ฐ€ ํฌ์ง€๋งŒ, ์ง‘๋‹จ ํ‰๊ท ์— ๊ฐ€๊นŒ์›Œ์ง€๋Š” ๊ฒฝํ–ฅ์„ ๋ฐœ๊ฒฌํ•˜๊ณ  ์ด๋ฅผ 'ํ‰๊ท ์œผ๋กœ์˜ ํšŒ๊ท€(regression to mediocrity)'๋ผ๊ณ  ๋ถˆ๋ €์Šต๋‹ˆ๋‹ค. ์ด๊ฒƒ์ด ํšŒ๊ท€๋ถ„์„์˜ ์‹œ์ž‘์ด์—ˆ์Šต๋‹ˆ๋‹ค. 1895๋…„ ๊ณจํ„ด์˜ ์ œ์ž ์นผ ํ”ผ์–ด์Šจ์€ ์ด ์•„์ด๋””์–ด๋ฅผ ์ˆ˜ํ•™์ ์œผ๋กœ ์ •๋ฆฌํ•ด ์ƒ๊ด€๊ณ„์ˆ˜ ๊ณต์‹์„ ๋ฐœํ‘œํ–ˆ์Šต๋‹ˆ๋‹ค. rr ๊ฐ’์ด โˆ’1-1์—์„œ 11 ์‚ฌ์ด์˜ ๊ฐ’์„ ๊ฐ€์ง€๋ฉฐ, โˆฃrโˆฃ|r|์ด 11์— ๊ฐ€๊นŒ์šธ์ˆ˜๋ก ์ƒ๊ด€๊ด€๊ณ„๊ฐ€ ๊ฐ•ํ•˜๋‹ค๋Š” ์ฒด๊ณ„๋ฅผ ํ™•๋ฆฝํ–ˆ์Šต๋‹ˆ๋‹ค. ์˜ค๋Š˜๋‚  ์ด ๊ฐœ๋…์€ ๋„ทํ”Œ๋ฆญ์Šค ์ถ”์ฒœ ์•Œ๊ณ ๋ฆฌ์ฆ˜, ์˜ํ•™ ์ž„์ƒ ์—ฐ๊ตฌ, AI ๋ชจ๋ธ ํ‰๊ฐ€์— ํ•ต์‹ฌ์ ์œผ๋กœ ์‚ฌ์šฉ๋ฉ๋‹ˆ๋‹ค.

"ํ†ต๊ณ„๋Š” ์ƒ๋ฌผํ•™์  ๋ฌธ์ œ๋ฅผ ํ•ด๊ฒฐํ•˜๊ธฐ ์œ„ํ•œ ์ˆ˜ํ•™์˜ ๋ฌธ๋ฒ•์ด๋‹ค." โ€” ์นผ ํ”ผ์–ด์Šจ
๐Ÿคฉ ์ธํ„ฐ๋„ท์—๋Š” 'ํ—ˆ์œ„ ์ƒ๊ด€(spurious correlations)' ๋ชจ์Œ์ง‘์ด ์žˆ์Šต๋‹ˆ๋‹ค. ๋ฏธ๊ตญ ์ˆ˜์˜์žฅ ์ต์‚ฌ ์‚ฌ๊ณ  ์ˆ˜์™€ ๋‹ˆ์ฝœ๋ผ์Šค ์ผ€์ด์ง€ ์ถœ์—ฐ ์˜ํ™” ํŽธ์ˆ˜๊ฐ€ ๋งค์šฐ ๋†’์€ ์ƒ๊ด€๊ณ„์ˆ˜๋ฅผ ๋ณด์ž…๋‹ˆ๋‹ค. ๋ฌผ๋ก  ๊ทธ๊ฐ€ ์˜ํ™”๋ฅผ ์ฐ์–ด์„œ ์‚ฌ๋žŒ์ด ๋น ์ง€๋Š” ๊ฒŒ ์•„๋‹™๋‹ˆ๋‹ค!

๐Ÿ”ฌ ์ง์ ‘ ๋ฐœ๊ฒฌํ•˜๊ธฐ

๐Ÿ“ ๊ณต์‹ ์ดํ•ดํ•˜๊ธฐ

r = \frac{\sum_{i=1}^{n}(x_i - \bar{x})(y_i - \bar{y})}{\sqrt{\sum(x_i-\bar{x})^2 \cdot \sum(y_i-\bar{y})^2}}

ํ”ผ์–ด์Šจ ์ƒ๊ด€๊ณ„์ˆ˜ r์€ ๋‘ ๋ณ€์ˆ˜ x, y๊ฐ€ ํ•จ๊ป˜ ๋ณ€ํ•˜๋Š” ์ •๋„๋ฅผ -1์—์„œ 1 ์‚ฌ์ด ๊ฐ’์œผ๋กœ ๋‚˜ํƒ€๋ƒ…๋‹ˆ๋‹ค. r์ด 1์— ๊ฐ€๊นŒ์šธ์ˆ˜๋ก ๊ฐ•ํ•œ ์–‘์˜ ์ƒ๊ด€, -1์— ๊ฐ€๊นŒ์šธ์ˆ˜๋ก ๊ฐ•ํ•œ ์Œ์˜ ์ƒ๊ด€, 0์— ๊ฐ€๊นŒ์šธ์ˆ˜๋ก ๋ฌด ์ƒ๊ด€์ž…๋‹ˆ๋‹ค.

rr
ํ”ผ์–ด์Šจ ์ƒ๊ด€๊ณ„์ˆ˜ (-1 โ‰ค r โ‰ค 1)
x_i
i๋ฒˆ์งธ x ๋ฐ์ดํ„ฐ ๊ฐ’
y_i
i๋ฒˆ์งธ y ๋ฐ์ดํ„ฐ ๊ฐ’
\bar{x}
x์˜ ํ‰๊ท 
\bar{y}
y์˜ ํ‰๊ท 
nn
๋ฐ์ดํ„ฐ ๊ฐœ์ˆ˜
  1. 1
    ๊ฐ ๋ฐ์ดํ„ฐ ์ ์—์„œ x์˜ ํ‰๊ท (xฬ„)๊ณผ y์˜ ํ‰๊ท (ศณ)์„ ๋บ€ ํŽธ์ฐจ๋ฅผ ๊ตฌํ•œ๋‹ค
  2. 2
    ๊ฐ ์ ์˜ xํŽธ์ฐจ ร— yํŽธ์ฐจ๋ฅผ ๋ชจ๋‘ ๋”ํ•ด ๊ณต๋ถ„์‚ฐ(covariance)์„ ๊ณ„์‚ฐํ•œ๋‹ค
  3. 3
    x์˜ ํ‘œ์ค€ํŽธ์ฐจ์™€ y์˜ ํ‘œ์ค€ํŽธ์ฐจ๋ฅผ ๊ณฑํ•œ ๊ฐ’์œผ๋กœ ๋‚˜๋ˆ„์–ด -1~1 ๋ฒ”์œ„๋กœ ์ •๊ทœํ™”ํ•œ๋‹ค

๐Ÿ“ ํ€ด์ฆˆ๋กœ ํ™•์ธํ•˜๊ธฐ

1/5

์‚ฐ์ ๋„์—์„œ ์ ๋“ค์ด ์˜ค๋ฅธ์ชฝ ์œ„ ๋ฐฉํ–ฅ์œผ๋กœ ๋ชจ์—ฌ ์žˆ์„ ๋•Œ, ๋‘ ๋ณ€์ˆ˜์˜ ์ƒ๊ด€๊ด€๊ณ„๋Š”?

๋ฌดํ•œ ๋“œ๋ฆด ์—ฐ์Šต

๋žœ๋ค 20๋ฌธ์ œ ยท ์•ฝ 10๋ถ„

ํ’€์–ด๋ณด๊ธฐ โ†’

๐Ÿ“‹ ์ˆ˜๋Šฅ ๊ธฐ์ถœ ๋ฌธ์ œ

๐Ÿ“

์ด ๊ฐœ๋…์˜ ๊ธฐ์ถœ ๋ฌธ์ œ๋ฅผ ์ถ”๊ฐ€ ์ค‘์ด์—์š”

์ˆ˜๋Šฅ ๊ธฐ์ถœ ์ „์ฒด ๋ชฉ๋ก์—์„œ ๊ด€๋ จ ๋ฌธ์ œ๋ฅผ ์ฐพ์•„๋ณด์„ธ์š”.

๐Ÿ“‹ ์ˆ˜๋Šฅ ๊ธฐ์ถœ ์ „์ฒด ๋ณด๊ธฐ โ†’