
Outlier ์ค๋์ค ํ๋ก์ ํธ 2ํ: ์ผ์ธ ๋ น์ ํ ์คํฌ์ ๊ฐ์์ค๋ฌ์ด ์ ๋ช ํ๊ธฐ
Outlier ์ค๋์ค ํ๋ก์ ํธ 1ํ์์ 2ํ์ผ๋ก
Outlier์์ ์งํํ ์ฒซ ๋ฒ์งธ ์ค๋์ค ํ๋ก์ ํธ๋ ์ค๋ด ๋ น์ ์ดํฌํฐ(Attempter) ํ๋์ด์๋ค. AI ๋ชจ๋ธ ํธ๋ ์ด๋์ ์ํ ํ๊ตญ์ด ์์ฑ ํ๋กฌํํธ ์์ฑ์ด ์ฃผ๋ ์ ๋ฌด์๋ค. ์ฃผ์ด์ง ์ฟผ๋ฆฌ ํ์ ๊ณผ ํ ํฝ์ ๋ง์ถฐ 30์ด ์ด๋ด์ ์์ฐ์ค๋ฌ์ด ๋ฐํ๋ฅผ ๋ น์ํ๋ ๋ฐฉ์์ด์๋ค. ๋ฉ์ธ ํ ํฝ๊ณผ ์๋ธ ํ ํฝ์ ์กฐํ, ๊ทธ๋ฆฌ๊ณ ‘์’, ‘์’์ ๊ฐ์ ์์ฐ์ค๋ฌ์ด ์ถ์์(Filler words) ํ์ฉ์ด ํต์ฌ์ด์๋ค. 1ํ์ ๋ฌด์ฌํ ๋ง์น๊ณ ๊ณง๋ฐ๋ก ํ๋ก์ ํธ 2ํ์ธ ์ผ์ธ ๋ น์ ํ ์คํฌ์ ์ฐธ์ฌํ๋ค.
์ผ์ธ ๋ น์ ํ ์คํฌ์ ๋ฆฌ๋ทฐ์ด(Reviewer) ํ๋
2ํ์ ๋ ๋ฒจ 1~4 ๋จ๊ณ์ ์ ์ ํ ์์์ด ์กด์ฌํ๋ ์ผ์ธ ๊ณต๊ฐ์์ ๋ น์์ ์งํํด์ผ ํ๋ค. 1ํ๋ณด๋ค ๋ฐ์ ํ UI ๋๋ถ์ ํ ์คํฌ ์ํ์ด ํจ์ฌ ์์ํ๋ค. ํนํ Outlier์ ๊ฐ์ ์ ํ๊ตญ์ธ ์ปค๋ฎค๋ํฐ๊ฐ ํ์ฑํ๋์ด ์์ด PM ๋ฐ ์ฐธ๊ฐ์๋ค๊ณผ ํ๊ตญ์ด๋ก ์ํํ๊ฒ ์ํตํ ์ ์๋ค๋ ์ ์ด์๋ค.
1ํ์์์ ๋์ ๋ฆฌ๋ทฐ ์ ์ ๋๋ถ์ 2ํ์์๋ ๋ฆฌ๋ทฐ์ด(Reviewer) ์ญํ ๋ ๋ณํํ๊ฒ ๋์๋ค. ๋ฆฌ๋ทฐ์ด๋ ๋ค๋ฅธ ์ฐธ๊ฐ์๋ค์ด ์ ์ถํ ๊ณผ์ ๋ฅผ ํ๊ฐํ๋ ํฌ์ง์ ์ด๋ค.
- ํ๊ฐ ํญ๋ชฉ: ์ฟผ๋ฆฌ ํ์ ๋ฐ ํ ํฝ ์ผ์น ์ฌ๋ถ, ๋ฐํ์ ์์ฐ์ค๋ฌ์, ๋ฐฐ๊ฒฝ ์์ ํฌํจ ์ฌ๋ถ
- ์ฃผ์ ์ ๋ฌด: ์ ํด์ง ๋ฃจ๋ธ๋ฆญ(๊ธฐ์ค)์ ๋ฐ๋ฅธ ์ข ํฉ ํ๊ฐ ๋ฐ ํ๊ตญ์ด ํผ๋๋ฐฑ ์์ฑ
์ ๊ท ์ฐธ๊ฐ์๊ฐ ๋ง์๋ ๋งํผ ๋ฆฌ๋ทฐ์ด์ ๊ฐ์ด๋๊ฐ ํ๋ก์ ํธ ํ๋ฆฌํฐ์ ๊ฒฐ์ ์ ์ธ ์ํฅ์ ๋ฏธ์ณค๋ค.
๋ฆฌ๋ทฐ์ด(Reviewer) ํ๋์ด ๋ฐ์ดํฐ ๋ผ๋ฒจ๋ง ์ํ๊ณ์์ ๊ฐ๋ ์๋ฏธ
๋จ์ํ ๋ฐ์ดํฐ๋ฅผ ์์ฑํ๋ ‘์ดํฌํฐ’๋ฅผ ๋์ด ‘๋ฆฌ๋ทฐ์ด’๋ก ํ๋ํ๊ฒ ๋ ๊ฒ์, ํด๋น ํ๋ซํผ์ด ๋์ ํ๊ตญ์ด ์ดํด๋์ ๊ฐ์ด๋๋ผ์ธ ์ค์ ๋ฅ๋ ฅ์ ์ ๋ขฐํ๊ธฐ ์์ํ๋ค๋ ์ฆ๊ฑฐ์ด๊ธฐ๋ ํ๋ค.
AI ๋ชจ๋ธ ํ์ต์์ ๊ฐ์ฅ ์ํํ ๊ฒ์ ์๋ชป๋ ๋ฐ์ดํฐ๊ฐ ์ ๋ ฅ๋๋ ‘๊ฐ๋น์ง ์ธ, ๊ฐ๋น์ง ์์(Garbage In, Garbage Out)’ ํ์์ด๋ค. ์ผ์ธ ๋ น์ ํ๋ก์ ํธ์ฒ๋ผ ๋ณ์๊ฐ ๋ง์ ์์ ์ผ์๋ก ๋ฆฌ๋ทฐ์ด์ ์ญํ ์ ๋ง์คํด์ง๋ค. ๋ฐฐ๊ฒฝ ์์์ด ๊ฐ์ด๋๋ผ์ธ(๋ ๋ฒจ 1~4)์ ๋ฒ์ด๋์ง๋ ์์๋์ง, ํ๊ตญ์ด ํน์ ์ ๋์์ค๊ฐ ํ๋กฌํํธ์ ์๋์ ์ผ์นํ๋์ง๋ฅผ ๊ผผ๊ผผํ ํ๋ณํ๋ ๊ณผ์ ์ ์ธ๊ณต์ง๋ฅ์ด ๋ ์ธ๊ฐ๋ต๊ฒ ์ํตํ๋๋ก ๋ง๋๋ ์ต์ข ๊ฒ์ ๋จ๊ณ์ด๊ธฐ ๋๋ฌธ์ด๋ค.
์ด๋ฌํ ๋ฆฌ๋ทฐ ์ ๋ฌด๋ ์ผ๋ฐ ์์ ๋ณด๋ค ์ง์ค๋ ฅ์ ๋ ์ํ์ง๋ง, ๋ฐ์ดํฐ ๋ผ๋ฒจ๋ง ์ฐ์ ์ ํต์ฌ ๋ฉ์ปค๋์ฆ์ ๊น์ด ์ดํดํ ์ ์๋ ๊ท์คํ ๊ฒฝํ์ด์๋ค.
์๊ณ ์๋ ์ ๋ช , AI ๋ฐ์ดํฐ ๋ผ๋ฒจ๋ง์ ๋ช ์
์์กฐ๋กญ๋ ํ๋ ์ค ๊ฐ์์ค๋ฝ๊ฒ ํ๋ก์ ํธ์์ ์ ๋ช (Removal) ์ฒ๋ฆฌ๋์๋ค. ์ด๋ ๋น๋๋ฉด์ผ๋ก ์งํ๋๋ ๋ชจ๋ AI ๋ฐ์ดํฐ ๋ผ๋ฒจ๋ง ๋ถ์ ์ ๊ณ ์ง์ ์ธ ๋จ์ ์ด๋ค. ์ง์ ์ ์ธ ๋๋ฉด ์ํต์ด ์๊ธฐ์, ์ฌ์ํ ์คํด๋ ์ํต ๋ถ์ฌ๊ฐ ๋ฐ์ํ๋ฉด ๋ณ๋ค๋ฅธ ์๋ช ๊ธฐํ ์์ด ์ ๋ฌด๊ฐ ์ข ๋ฃ๋ ์ ์๋ค.
๋ด๊ฐ ์ถ์ธกํ๋ ์ ๋ช ์ฌ์ ๋ ‘์คํผ์ค ์์(Office Hour)’ ๋ฏธํ ๋ถ์ฐธ์ด๋ค. PM์ด ์ฃผ์ตํ ๋ฏธํ ์๊ฐ์๋ ์ ์ํ์ง ์์ ์ฑ, ๋์์ ์ฑํ ๋ฐฉ์ ์ง๋ฌธ์ ์ฌ๋ ธ๋ ๊ฒ์ด ํ๊ทผ์ด ๋ ๋ฏํ๋ค. “๋ฏธํ ๋ ์ ๋ค์ด์ค๊ณ ์ง๋ฌธ์ ํ๋ค”๋ ์ธ์์ ์ฃผ์์ ๊ฐ๋ฅ์ฑ์ด ํฌ๋ค.
Outlier ํ๋ ์ดํ ๋ฐ ๊ตํ
Outlier๋ ์๊ธ์ด ๋์์ง ์๊ณ ์ค์๊ฐ ์ํต์ด ๊ฐ๋ฅํด ๊ฝค ๊ด์ฐฎ์ ์์ต์ ์๊ฒจ์ค ํ๋ซํผ์ด์๋ค. ๋ค๋ง ๋ฐ๋ณต๋๋ ์์ ์ ์ง๋ฃจํจ๊ณผ ์ํต์ ๋ถํ์ค์ฑ์ ๊ฐ๋ดํด์ผ ํ ๋ถ๋ถ์ด๋ค. ์ด๋ฒ ๊ฒฝํ์ ํตํด ๋น๋๋ฉด ๋ถ์ ์ ๊ฒฐ์ฝ ๋ณธ์ (Main Job)์ ์์ญ์ ์นจ๋ฒํด์๋ ์ ๋๋ค๋ ๊ฒ์ ๋ค์ ํ๋ฒ ๊นจ๋ฌ์๋ค.
์๋ก์ด ์์: Alignerr์์์ ์ฐ๋ฝ
์ ๋ช ์ ์ต์ธํจ์ด ๊ฐ์๊ธฐ๋ ์ ์, ์๋ง์ ํ ์คํธ(Assessment)๋ฅผ ๊ฑฐ์น๋ฉฐ ๊ธฐ๋ค๋ ธ๋ Alignerr์์ ์ฐ๋ฝ์ด ์๋ค. Outlier์์์ ๊ฒฝํ์ ๋ฐํ ์ผ์ ์๋ก์ด ํ๋ซํผ์์๋ ์ด๋ค ๋ฐ์ดํฐ ๋ผ๋ฒจ๋ง ์ ๋ฌด๋ฅผ ์ํํ๊ฒ ๋ ์ง ๊ธฐ๋๊ฐ ๋๋ค.
๋ค์ ํฌ์คํ ์์๋ Alignerr์ ์งํ ๊ณผ์ ๊ณผ ๊ตฌ์ฒด์ ์ธ ์ ๋ฌด ๋ด์ฉ์ ๋ค๋ฃฐ ์์ ์ด๋ค.