MCP๋กœ ์—ฐ๊ฒฐ โ†’

๊ณ„์‚ฐ ์ž…๋ ฅ

๊ณต์‹

๊ด‘๊ณ 

๊ฒฐ๊ณผ

์ •๋ฐ€๋„
80%
์–‘์„ฑ์œผ๋กœ ์˜ˆ์ธกํ•œ ๊ฒƒ ์ค‘ ์ •๋‹ต ๋น„์œจ
์žฌํ˜„์œจ (๋ฏผ๊ฐ๋„) 88.89%
F1 ์ ์ˆ˜ 84.21%

์ด ๊ณ„์‚ฐ๊ธฐ์˜ ๊ธฐ๋Šฅ

์ด ๋„๊ตฌ๋Š” ์ด์ง„ ๋ถ„๋ฅ˜ ๋ชจ๋ธ์˜ ์„ฑ๋Šฅ์„ ํ‰๊ฐ€ํ•˜๊ธฐ ์œ„ํ•ด ์„ธ ๊ฐ€์ง€ ํ•ต์‹ฌ ์ง€ํ‘œ์ธ ์ •๋ฐ€๋„(precision), ์žฌํ˜„์œจ(recall), F1 ์ ์ˆ˜๋ฅผ ๊ณ„์‚ฐํ•ฉ๋‹ˆ๋‹ค. ํ˜ผ๋™ ํ–‰๋ ฌ(confusion matrix)์—์„œ ๋‚˜์˜จ ์›์‹œ ๊ฐœ์ˆ˜, ์ฆ‰ ์ฐธ ์–‘์„ฑ(TP), ๊ฑฐ์ง“ ์–‘์„ฑ(FP), ๊ฑฐ์ง“ ์Œ์„ฑ(FN)์„ ์ž…๋ ฅํ•˜๋ฉด ๊ฐ ์ง€ํ‘œ๋ฅผ ๋ฐฑ๋ถ„์œจ๋กœ ๋ณด์—ฌ์ค๋‹ˆ๋‹ค. ์ด ์ง€ํ‘œ๋“ค์€ ๋จธ์‹ ๋Ÿฌ๋‹, ์ •๋ณด ๊ฒ€์ƒ‰, ์˜๋ฃŒ ๊ฒ€์‚ฌ ๋“ฑ ํ•ญ๋ชฉ์„ ์–‘์„ฑ๊ณผ ์Œ์„ฑ์œผ๋กœ ๋ถ„๋ฅ˜ํ•˜๋Š” ๋ชจ๋“  ๋ถ„์•ผ์—์„œ ๋‘๋ฃจ ์“ฐ์ž…๋‹ˆ๋‹ค.

์‚ฌ์šฉ ๋ฐฉ๋ฒ•

์ฐธ ์–‘์„ฑ(TP, ์–‘์„ฑ์„ ์˜ฌ๋ฐ”๋ฅด๊ฒŒ ์˜ˆ์ธกํ•œ ๊ฒฝ์šฐ), ๊ฑฐ์ง“ ์–‘์„ฑ(FP, ์Œ์„ฑ์„ ์–‘์„ฑ์œผ๋กœ ์ž˜๋ชป ์˜ˆ์ธกํ•œ ๊ฒฝ์šฐ), ๊ฑฐ์ง“ ์Œ์„ฑ(FN, ๋ชจ๋ธ์ด ๋†“์นœ ์–‘์„ฑ)์˜ ๊ฐœ์ˆ˜๋ฅผ ์ž…๋ ฅํ•˜์„ธ์š”. ๊ณ„์‚ฐ ๋ฒ„ํŠผ์„ ๋ˆ„๋ฅด๋ฉด ์ •๋ฐ€๋„, ์žฌํ˜„์œจ, F1 ์ ์ˆ˜๊ฐ€ ํ‘œ์‹œ๋ฉ๋‹ˆ๋‹ค. ์ด ์ง€ํ‘œ๋“ค์„ ๊ตฌํ•˜๋Š” ๋ฐ๋Š” ์ฐธ ์Œ์„ฑ(TN)์ด ํ•„์š”ํ•˜์ง€ ์•Š์Šต๋‹ˆ๋‹ค.

๊ณต์‹ ์„ค๋ช…

$$\text{Precision} = \frac{\text{TP}}{\text{TP} + \text{FP}}$$๋Š” "๋‚ด๊ฐ€ ์–‘์„ฑ์ด๋ผ๊ณ  ํŒ๋‹จํ•œ ๊ฒƒ ์ค‘์—์„œ ์‹ค์ œ๋กœ ๋งž์€ ๋น„์œจ์€ ์–ผ๋งˆ์ธ๊ฐ€?"๋ผ๋Š” ์งˆ๋ฌธ์— ๋‹ตํ•ฉ๋‹ˆ๋‹ค. ์ •๋ฐ€๋„๊ฐ€ ๋†’์„์ˆ˜๋ก ์ž˜๋ชป๋œ ๊ฒฝ๋ณด(์˜คํƒ)๊ฐ€ ์ ์Šต๋‹ˆ๋‹ค.

$$\text{Recall} = \frac{\text{TP}}{\text{TP} + \text{FN}}$$๋Š” "์‹ค์ œ ์–‘์„ฑ ๊ฐ€์šด๋ฐ ๋‚ด๊ฐ€ ์ œ๋Œ€๋กœ ์žก์•„๋‚ธ ๋น„์œจ์€ ์–ผ๋งˆ์ธ๊ฐ€?"๋ผ๋Š” ์งˆ๋ฌธ์— ๋‹ตํ•ฉ๋‹ˆ๋‹ค. ์žฌํ˜„์œจ์ด ๋†’์„์ˆ˜๋ก ๋†“์น˜๋Š” ๊ฒฝ์šฐ๊ฐ€ ์ ์Šต๋‹ˆ๋‹ค.

F1 ์ ์ˆ˜๋Š” ๋‘ ์ง€ํ‘œ์˜ ์กฐํ™” ํ‰๊ท ์ž…๋‹ˆ๋‹ค. $$\text{F1} = 2 \cdot \frac{\text{Precision} \cdot \text{Recall}}{\text{Precision} + \text{Recall}}$$. ์ •๋ฐ€๋„์™€ ์žฌํ˜„์œจ์˜ ๊ท ํ˜•์„ ์žก์•„ ์ฃผ๋ฉฐ, ํด๋ž˜์Šค๊ฐ€ ๋ถˆ๊ท ํ˜•ํ•  ๋•Œ ํŠนํžˆ ์œ ์šฉํ•ฉ๋‹ˆ๋‹ค.

์ •๋ฐ€๋„๋ฅผ ์˜ˆ์ธก ๋Œ€๋น„ ๊ฒน์นจ์œผ๋กœ, ์žฌํ˜„์œจ์„ ์‹ค์ œ ๋Œ€๋น„ ๊ฒน์นจ์œผ๋กœ ๋‚˜ํƒ€๋‚ธ ๋ฒค ๋‹ค์ด์–ด๊ทธ๋žจ
์ •๋ฐ€๋„๋Š” ์˜ˆ์ธก๋œ ์–‘์„ฑ์—, ์žฌํ˜„์œจ์€ ์‹ค์ œ ์–‘์„ฑ์— ์ดˆ์ ์„ ๋งž์ถฅ๋‹ˆ๋‹ค.
2x2 ๊ฒฉ์ž์— TP, FP, FN, TN์„ ํ‘œ์‹œํ•œ ํ˜ผ๋™ ํ–‰๋ ฌ
ํ˜ผ๋™ ํ–‰๋ ฌ: ์ •๋ฐ€๋„์™€ ์žฌํ˜„์œจ์€ TP, FP, FN์œผ๋กœ ๊ณ„์‚ฐ๋ฉ๋‹ˆ๋‹ค.

๊ณ„์‚ฐ ์˜ˆ์‹œ

์ŠคํŒธ ํ•„ํ„ฐ๊ฐ€ ์ด๋ฉ”์ผ 100ํ†ต์„ ์ŠคํŒธ์œผ๋กœ ๋ถ„๋ฅ˜ํ–ˆ๋‹ค๊ณ  ๊ฐ€์ •ํ•ด ๋ด…์‹œ๋‹ค. ์ด ์ค‘ 80ํ†ต์€ ์‹ค์ œ ์ŠคํŒธ(TP)์ด๊ณ  20ํ†ต์€ ์ŠคํŒธ์ด ์•„๋‹™๋‹ˆ๋‹ค(FP). ๋˜ํ•œ ์‹ค์ œ ์ŠคํŒธ 10ํ†ต์„ ๋†“์ณค์Šต๋‹ˆ๋‹ค(FN). ์ •๋ฐ€๋„ $$= \frac{80}{80 + 20} = 0.80 = 80\%.$$ ์žฌํ˜„์œจ $$= \frac{80}{80 + 10} = 0.889 = 88.89\%.$$ F1 $$= 2 \cdot \frac{0.80 \cdot 0.889}{0.80 + 0.889} = 84.21\%.$$

์ž์ฃผ ๋ฌป๋Š” ์งˆ๋ฌธ

์ •๋ฐ€๋„์™€ ์žฌํ˜„์œจ ์ค‘ ๋ฌด์—‡์„ ์šฐ์„ ํ•ด์•ผ ํ•˜๋‚˜์š”? ๊ฑฐ์ง“ ์–‘์„ฑ์˜ ๋น„์šฉ์ด ํฐ ๊ฒฝ์šฐ(์˜ˆ: ์ •์ƒ ๋ฉ”์ผ์„ ์ŠคํŒธ์œผ๋กœ ์ฐจ๋‹จ)์—๋Š” ์ •๋ฐ€๋„๋ฅผ ์šฐ์„ ํ•˜์„ธ์š”. ์–‘์„ฑ์„ ๋†“์น˜๋Š” ๋น„์šฉ์ด ํฐ ๊ฒฝ์šฐ(์˜ˆ: ์•” ๊ฒ€์ง„)์—๋Š” ์žฌํ˜„์œจ์„ ์šฐ์„ ํ•˜์„ธ์š”.

F1 ์ ์ˆ˜๋Š” ์™œ ์“ฐ๋‚˜์š”? ๋ฐ์ดํ„ฐ๊ฐ€ ๋ถˆ๊ท ํ˜•ํ•˜๋ฉด ์ •ํ™•๋„(accuracy)๋งŒ์œผ๋กœ๋Š” ์˜คํ•ด๋ฅผ ๋ถ€๋ฅผ ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค. F1 ์ ์ˆ˜๋Š” ์ •๋ฐ€๋„์™€ ์žฌํ˜„์œจ์„ ํ•˜๋‚˜์˜ ๊ท ํ˜• ์žกํžŒ ์ˆ˜์น˜๋กœ ํ•ฉ์ณ ์ค๋‹ˆ๋‹ค.

๋ถ„๋ชจ๊ฐ€ 0์ด๋ฉด ์–ด๋–ป๊ฒŒ ๋˜๋‚˜์š”? TP+FP ๋˜๋Š” TP+FN์ด 0์ด๋ฉด ํ•ด๋‹น ์ง€ํ‘œ๋Š” ์ •์˜๋˜์ง€ ์•Š์Šต๋‹ˆ๋‹ค. ์ด ๊ณ„์‚ฐ๊ธฐ๋Š” ๊ทธ ๊ฒฝ์šฐ 0%๋กœ ํ‘œ์‹œํ•ฉ๋‹ˆ๋‹ค.

์ตœ์ข… ์—…๋ฐ์ดํŠธ: