Nexus AI agent 'ํ ์คํธ ์ผ์ด์ค ์์ฑ' ๊ธฐ๋ฅ์ ์ ๋ก๋๋ ๊ธฐํ์ ๋๋ ํ ์คํธ ๋์ ์ ํ๋ฆฌ์ผ์ด์ ์ ๋์์ ์ค๋ช ํ๋ ๋ฌธ์๋ฅผ ๊ธฐ๋ฐ์ผ๋ก ํ ์คํธ ์ผ์ด์ค๋ฅผ ์์ฑํฉ๋๋ค.
'์ฒจ๋ถ๋ ํ์ผ์์ ํ ์คํธ ์ผ์ด์ค๋ฅผ ์์ฑํด์ฃผ์ธ์'์ ๊ฐ์ด ๋งค์ฐ ๋จ์ํ ํ๋กฌํํธ๋ง์ผ๋ก๋ ์ด๋ ์ ๋ ํฌ๊ด์ ์ธ ํ ์คํธ ์ผ์ด์ค ์ธํธ๋ฅผ ๋ง๋ค ์ ์์ต๋๋ค.
๋ํ, ๊ตฌ์ฒด์ ์ธ ํ๋กฌํํธ๋ฅผ ์์ฑํ์ฌ ์์ฑ๋๋ ํ ์คํธ ์ผ์ด์ค์ ์ธ๋ถ์ฑ(granularity), ํฌ๊ด์ฑ(comprehensiveness) ๋ฐ ํ ์คํธ ๊ด์ ์ ์กฐ์ ํ ์ ์์ต๋๋ค.
์ด ๋ฌธ์๋ 'ํ ์คํธ ์ผ์ด์ค ์์ฑ' ๊ธฐ๋ฅ์ ๊ธฐ๋ณธ ์ฌ์ฉ๋ฒ๊ณผ ์ถ๋ ฅ ๊ฒฐ๊ณผ๋ฅผ ํ๋ํ๋ ๋ฐฉ๋ฒ์ ์๊ฐํฉ๋๋ค.
1.๊ธฐ๋ณธ ์ฌ์ฉ๋ฒ
์ ๋ ฅ์ผ๋ก ์ ํฉํ ๊ธฐํ์
ํ ์คํธ ์คํ ์์ง์ผ๋ก์ ๋ฅ์์ค(Nexus)๊ฐ ๊ฐ์ฅ ์ํ๋ ํ ์คํธ ์ ํ์ ์ฌ์ฉ์ ๊ด์ ์์์ ํ๋ฉด ํ ์คํธ(E2E ํ ์คํธ)์ ๋๋ค. ๋ฐ๋ผ์ ๋ฅ์์ค AI๊ฐ ์์ฑ์ ๋ฅ์ํ ํ ์คํธ ์ญ์ E2E ํ ์คํธ์ ๋๋ค.
E2E ํ ์คํธ๋ฅผ ๋ง๋๋ ๋ฐ ๊ฐ์ฅ ์ ์ฉํ ๋ฌธ์๋ ์ฌ์ฉ์ ๋์์ ์ค๋ช ํ๋ ๋ฌธ์์ ๋๋ค. ์ด๋ ๊ธฐ๋ณธ ์ค๊ณ์, ๊ฐ์ ์ค๊ณ์, ํ๋ฉด ์ค๊ณ์ ๋ฑ์ด ๋ ์ ์์ต๋๋ค. ๊ธฐ๋ฅ ์ถ๊ฐ ์ ์ฌ์ฉ์ ๋์์ ๊ธฐ์ ํ ํฐ์ผ ๊ด๋ฆฌ ์์คํ ์์ ํฐ์ผ์ด๋, ์ ๊ท ๊ธฐ๋ฅ ๊ฐ์๋ฅผ ์์ฝํ ๋ฉ๋ชจ ๋ฑ๋ ์ ํฉํ ์ ๋ ฅ์ ๋๋ค.
๋ฐ๋ฉด์, ์ฌ์ฉ์ ๋์์ด ์๋ ์์คํ ์ ๋ฉ์ปค๋์ฆ์ ์ด์ ์ ๋ง์ถ ์ ๋ณด(์: ์์ธ ์ค๊ณ์๋ ๋ฐ์ดํฐ๋ฒ ์ด์ค ๊ธฐํ์)๋ E2E ํ ์คํธ ์์ฑ ์ ๋ณด๋ก ์ ์ ํ์ง ์์ต๋๋ค. ๋ฐ๋ผ์ ์ด๋ฌํ ์ ๋ณด๋ฅผ ์ ๋ก๋ํ๋ฉด ์ถฉ๋ถํ ํ ์คํธ ์ผ์ด์ค๊ฐ ์ถ๋ ฅ๋์ง ์์ ๊ฐ๋ฅ์ฑ์ด ๋์ต๋๋ค.
๊ธฐ๋ณธ ์์ฑ ์๋ํ๊ธฐ
๋จผ์ ๊ฐ์ง๊ณ ์๋ ๊ธฐํ์ ๋ฌธ์๋ฅผ ์ ๋ก๋ํ๊ณ ํ ์คํธ ์ผ์ด์ค ์์ฑ์ ์๋ํด ๋ณด์ธ์.
์๋๋ฆฌ์ค ์ฐฝ์ ์ด๊ณ 'AI๋ก ์์ฑ' ๋ฒํผ์ ํด๋ฆญํ ํ, ํ์๋๋ ๋๋กญ๋ค์ด์์ 'ํ ์คํธ ์ผ์ด์ค ์์ฑ'์ ์ ํํ์ฌ 'AI ์์ด์ ํธ' ์ฐฝ์ ์คํํฉ๋๋ค.
'AI ์์ด์ ํธ' ์ฐฝ์ ๊ธฐํ์๋ฅผ ์ ๋ก๋ํ๊ณ , ํ๋กฌํํธ๋ก "์ฒจ๋ถํ ํ์ผ์์ ํ ์คํธ ์ผ์ด์ค๋ฅผ ์์ฑํด์ฃผ์ธ์"๋ฅผ ์ ๋ ฅํ ํ '์ ์ก ๋ฒํผ'์ ํด๋ฆญํฉ๋๋ค.
AI ์์ด์ ํธ๊ฐ ํ ์คํธ ์ผ์ด์ค๋ฅผ ์๋์ผ๋ก ์์ฑํ๋ฉฐ, CSV ํ์ผ์ด ๋ค์ด๋ก๋ ํด๋์ ์ ์ฅ๋ฉ๋๋ค.
์์ฑ ๊ฒฐ๊ณผ ํ๊ฐํ๊ธฐ
์์ฑ๋ ํ ์คํธ ์ผ์ด์ค๋ฅผ ๋ค์ ๊ด์ ์์ ํ๊ฐํด ๋ณด์ธ์.
์ ์ฒด์ ์ธ ์ธ๋ถ์ฑ (Granularity)
์์๋ณด๋ค ๋๋ฌด ์์ธํ์ง (์: ํ๋นํ์ง๋ง ๋๋ฌด ๋ฏธ์ธํ๊ฑฐ๋ ๊ณผ๋ํ๊ฒ ๋ง์์ง) ๋๋ ๋๋ฌด ๊ด๋ฒ์ํ์ง (์: ์ ์ ๊ฒฝ๋ก ์์ฃผ์ด๋ฉฐ ์ค์ ์/์์ธ ๊ฒฝ๋ก ํ ์คํธ๊ฐ ์ ์์ง).
์ ํ๋ (Accuracy)
ํ๊ฐ(Hallucination) ํ์์ด ์๋์ง (์: ์กด์ฌํ์ง ์๋ ๊ธฐ๋ฅ์ด๋ ๋ถํ์ํ ํ ์คํธ๊ฐ ์๋์ง).
์์ํ๋ ํ ์คํธ ๊ด์ ์ด ํฌ๊ด์ ์ผ๋ก ๋ค๋ฃจ์ด์ก๋์ง.
๊ทผ๊ฑฐ์ ์ถฉ๋ถ์ฑ/์ ์ฉ์ฑ (Sufficiency/Usefulness of Rationale)
ํด๋น ํ ์คํธ ์ผ์ด์ค๊ฐ ์ถ๋ ฅ๋ ๊ทผ๊ฑฐ๊ฐ ์ฌ๋ฐ๋ฅด๊ณ ํ๋นํ์ง.
์ด ๊ธฐ๋ณธ ์์ฑ ๊ฒฐ๊ณผ๋ฅผ ํ๊ฐํ ํ, ๋ค์ ๋จ๊ณ์์๋ ํ๋กฌํํธ๋ฅผ ์์ ํ์ฌ ์ํ๋ ํ ์คํธ ์ผ์ด์ค์ ๋ ์ ๋ง๋๋ก ์ถ๋ ฅ์ ํ๋ํด ๋๊ฐ๋๋ค.
2.์ธ๋ถ์ฑ ์กฐ์
๊ธฐ๋ณธ ์์ฑ์ ์๋ํ์ ๋ ์ถ๋ ฅ ๊ฒฐ๊ณผ๊ฐ ์์๊ณผ ๋ค๋ฅด๋ค๋ฉด, ๊ฐ์ฅ ํํ ์ฐจ์ด์ ์ ์ธ๋ถ์ฑ์ ์์ต๋๋ค.
์ธ๋ถ์ฑ์ ์ฐจ์ด์๋ ๋ค์๊ณผ ๊ฐ์ ๊ฒฝ์ฐ๊ฐ ํฌํจ๋ ์ ์์ต๋๋ค.
๊ณ ์์ค์ ์ฌ์ฉ์ ์ธ์ ํ ์คํธ(UAT) ์ ํ ์๋๋ฆฌ์ค๋ฅผ ๊ธฐ๋ํ์ง๋ง, ์์ธํ ๋จ์ ํ ์คํธ(UT) ๋๋ ํตํฉ ํ ์คํธ(IT) ์์ค์ ํ ์คํธ๊ฐ ๋์จ ๊ฒฝ์ฐ (ํน์ ๊ทธ ๋ฐ๋).
ํ๋์ ์๋๋ฆฌ์ค๊ฐ ์ ์ฒด ์ฌ์ฉ์ ์คํ ๋ฆฌ๋ฅผ ํฌ๊ดํ๋ ์๋๋ฆฌ์ค ํ ์คํธ๋ฅผ ์ํ์ง๋ง, ์๋๋ฆฌ์ค๋น ํ๋์ ๊ด์ ๋ง ํ์ธํ๋ ํ ์คํธ๊ฐ ๋์จ ๊ฒฝ์ฐ (ํน์ ๊ทธ ๋ฐ๋).
ํน์ ํญ๋ชฉ์ ๋ํด ์ ์ ๊ฒฝ๋ก ํ ์คํธ ์ผ์ด์ค๋ ์ถ๋ ฅ๋์์ง๋ง, ์ค์ ์ ๊ฒฝ๋ก๋ ์์ธ ๊ฒฝ๋ก๊ฐ ์ถฉ๋ถํ ๋ค๋ฃจ์ด์ง์ง ์์๊ฑฐ๋ ๋ถ์กฑํ ๊ฒฝ์ฐ (ํน์ ๊ทธ ๋ฐ๋).
๋ค์ ๋ ๊ฐ์ง ๋ฐฉ๋ฒ์ ์ฌ์ฉํ์ฌ ์ด๋ฅผ ์กฐ์ ํ ์ ์์ต๋๋ค.
ํ ์คํธ ์ผ์ด์ค ์ ์ง์
ํ๋กฌํํธ์ ์์ฑํด์ผ ํ ํ ์คํธ ์ผ์ด์ค์ ์๋ฅผ ๋ช ์์ ์ผ๋ก ์ง์ ํ๋ฉด, ์ด์ ๋ฐ๋ผ ํ ์คํธ ์ผ์ด์ค์ ์ธ๋ถ์ฑ๋ ์กฐ์ ๋ฉ๋๋ค.
์๋ฅผ ๋ค์ด, ๊ธฐ๋ณธ ์์ฑ ์ ๋๋ต 50๊ฐ ์ ๋์ ํ ์คํธ ์ผ์ด์ค๊ฐ ์์ฑ๋๋ ๊ฒฝ์ฐ๋ฅผ ๊ฐ์ ํด ๋ณด๊ฒ ์ต๋๋ค (๋ฐ๋ณต ์์ฑ ์ ๊ฐ์๊ฐ ์กฐ๊ธ์ฉ ๋ฌ๋ผ์ง๋ฏ๋ก ํ๊ท ์ด๋ผ๊ณ ๊ฐ์ ).
์ด๋ ๋ ์์ธํ ํ ์คํธ๋ฅผ ์์ฑํ๊ณ ์ถ๋ค๋ฉด ๋ค์๊ณผ ๊ฐ์ด ํ๋กฌํํธํ ์ ์์ต๋๋ค.
์ฒจ๋ถํ ํ์ผ์์ ํ
์คํธ ์ผ์ด์ค๋ฅผ ์์ฑํด์ฃผ์ธ์. ์ด๋, ์ต์ 150๊ฐ์ ํ
์คํธ ์ผ์ด์ค๊ฐ ํ์ํฉ๋๋ค.ํ๊ท ๋ณด๋ค ํจ์ฌ ํฐ ์ซ์๋ฅผ ์ง์ ํ์ฌ ์์ฑํ๋ฉด, AI๋ ๊ทธ๋งํผ ๋ ๋ฏธ์ธํ ์ธ๋ถ์ฑ๊ณผ ๋ ์์ธํ ๊ด์ ์ผ๋ก ํ ์คํธ๋ฅผ ์์ฑํ๋ ค๊ณ ์๋ํฉ๋๋ค. ์ด ๊ฒฝ์ฐ, ์์ฑ๋๋ ํ ์คํธ ์ผ์ด์ค ์ธํธ์ ์ ๋ฐ์ ์ธ ์ธ๋ถ์ฑ์ด ๋ฏธ์ธํด์ง๋๋ค.
์์ธ ์ง์
ํน์ ํญ๋ชฉ, ์๋ฅผ ๋ค์ด ํญ๋ชฉ A๊ฐ ํนํ ์ค์ํด์ ๋ ํฌ๊ด์ ์ธ ํ ์คํธ ์ผ์ด์ค๊ฐ ํ์ํ๋ค๋ฉด, ํด๋น ํญ๋ชฉ์ ๋ํ ์์ธํ ์ ๋ณด๋ฅผ ์ ๊ณตํ์ฌ ํ ์คํธ ์ผ์ด์ค์ ์ธ๋ถ์ฑ์ ์กฐ์ ํ ์ ์์ต๋๋ค.
๋ค์๊ณผ ๊ฐ์ ์์ธ ํ๋กฌํํธ๊ฐ ํจ๊ณผ์ ์ผ ์ ์์ต๋๋ค.
์ฒจ๋ถํ ํ์ผ์์ ํ
์คํธ ์ผ์ด์ค๋ฅผ ์์ฑํด์ฃผ์ธ์. ํญ๋ชฉ A์ ๋ํด์๋ ์ ์ ๊ฒฝ๋ก ์ธ์ ์๊ฐํ ์ ์๋ ๋ชจ๋ ์์ธ ๊ฒฝ๋ก๋ ํฌํจํด์ฃผ์ธ์.๋ค๋ง, ์ ํ๋กฌํํธ๊ฐ ๋ฐ๋์ ์์ ํ ํฌ๊ด์ ์ธ ํ ์คํธ ์ผ์ด์ค ์์ฑ์ ๋ณด์ฅํ์ง๋ ์์ต๋๋ค. ํ์ํ ๊ฒฝ์ฐ, ์ถ๋ ฅ๋ ํ ์คํธ ์ผ์ด์ค๋ฅผ ๊ธฐ๋ฐ์ผ๋ก ๋ค๋ฅธ ๊ธฐ๋ฒ(์: ์์ฒด ๊ฒ์ฌ(pairwise testing)๋ฅผ ํตํ ์ปค๋ฒ๋ฆฌ์ง ๋งคํธ๋ฆญ์ค ์์ฑ)์ ์ฌ์ฉํ์ฌ ํ ์คํธ ์ผ์ด์ค๋ฅผ ํ์ฅํด ๋ณผ ์ ์์ต๋๋ค.
3.์ ํ๋ ํฅ์
์ธ๋ถ์ฑ์ ๋ง์ถ๋๋ผ๋ ์ํ๋ ํ ์คํธ ์ผ์ด์ค๊ฐ ์ ํํ ์์ฑ๋์ง ์์ ์ ์์ต๋๋ค.
ํนํ, ์์ฑ AI ๊ณ ์ ์ ๋ฌธ์ ์ธ ํ๊ฐ (์: ์กด์ฌํ์ง ์๋ ๊ธฐ๋ฅ ์ถํ, ๋ถ๊ฐ๋ฅํ ์กฐํฉ ๋ฐ์)์ด๋ ํ์ํ ํ ์คํธ ์ผ์ด์ค ๋๋ฝ ๋ฑ์ ๋ฌธ์ ๋ฅผ ์ต์ ํด์ผ ํ ์ ์์ต๋๋ค. ์ด ๊ฒฝ์ฐ ๋ค์ ๋ฐฉ๋ฒ๋ค์ด ์ ์ฉํ ์ ์์ต๋๋ค.
๋ถ๊ฐ ์ ๋ณด ์ ๊ณต
๋จผ์ , ๋ค๋ฃจ์ด์ ธ์ผ ํ ๊ธฐ๋ฅ์ด๋ ํ ์คํธ ๊ด์ ๋ฑ ๊ณ ์์ค ์ ๋ณด๊ฐ ๋๋ฝ๋ ๊ฒฝ์ฐ, ์ฌ๋์ด ์ด๋ฅผ ๋ณด์ถฉํด ์ฃผ๋ฉด ํ์์ผ๋ก ์ถ๋ ฅ๋๋ ํ ์คํธ ์ผ์ด์ค์ ์ ํ๋๋ฅผ ๋์ผ ์ ์์ต๋๋ค.
์ฒจ๋ถ๋ ํ์ผ์ ์ ํ๋ฆฌ์ผ์ด์
A์ ๊ธฐํ์์
๋๋ค. ์ฌ๊ธฐ์๋ ๋ค์ ๊ธฐ๋ฅ๋ค์ด ํฌํจ๋์ด ์์ต๋๋ค:
- ๊ธฐ๋ฅ X
- ๊ธฐ๋ฅ Y
- ๊ธฐ๋ฅ Z.
์ด๋ฅผ ๊ณ ๋ คํ์ฌ ์ด ๊ธฐํ์๋ก๋ถํฐ ํ
์คํธ ์ผ์ด์ค๋ฅผ ์์ฑํด์ฃผ์ธ์.์์์์๋ ๊ธฐ๋ฅ X, Y, Z๋ฅผ ์ฌ์ฉํ์ง๋ง, ํ ์คํธ ๊ด์ ๊ณผ ๊ฐ์ ์ ๋ณด๋ฅผ ๋ณด์ถฉํ๊ฑฐ๋ ํด๋น ์ ๋ณด๊ฐ ํฌํจ๋ ๋ณ๋์ ํ์ผ์ ๊ธฐํ์์ ํจ๊ป ์ ๋ก๋ํ๋ ๊ฒ๋ ํจ๊ณผ์ ์ ๋๋ค.
ํ ์คํธ ์ผ์ด์ค ์์ฑ ๋์ ์ขํ๊ธฐ
์์ ๊ฐ์ด ๊ธฐ๋ฅ์ด๋ ํ ์คํธ ๊ด์ ๋ฑ์ ์ ๋ณด๋ฅผ ๋ณด์ถฉํ๋ฉด AI๊ฐ ๊ธฐํ์์ ๋ํ ์ดํด๋ฅผ ๋์ฌ ๋ ๋์ ํ ์คํธ ์ผ์ด์ค ์์ฑ์ ํ ์ ์๊ฒ ๋ฉ๋๋ค.
๊ทธ๋ฌ๋ ์ ๋ ฅ ํฌ๊ธฐ๊ฐ ์ปค์ง์๋ก AI๋ ์ฃผ์๋ ฅ์ด ๋ถ์ฐ๋์ด ํ ์คํธ ์ผ์ด์ค์ ๋ฐ๋๊ฐ ๋ฎ์์ง๋ ๊ฒฝํฅ์ด ์์ต๋๋ค. ์ด๋ฅผ ํผํ๊ธฐ ์ํด, ํ ์คํธ ์ผ์ด์ค์ ์์ฑ ๋์์ ์ขํ์ AI์ ์ฃผ์๋ ฅ์ ์ง์ค์ํค๋ฉด ๊ฒฐ๊ณผ์ ์ผ๋ก ์์ฑ๋๋ ํ ์คํธ ์ผ์ด์ค์ ์ ํ๋๋ฅผ ๋์ผ ์ ์์ต๋๋ค.
์ฒจ๋ถ๋ ํ์ผ์ ์ ํ๋ฆฌ์ผ์ด์
A์ ๊ธฐํ์์
๋๋ค. ์ด ๊ธฐํ์์ ํฌํจ๋ ๊ธฐ๋ฅ X์ ๋ํด ํ
์คํธ ์ผ์ด์ค๋ฅผ ์์ฑํด์ฃผ์ธ์.์ด ํ๋กฌํํธ๋ฅผ ์ฌ์ฉํ๋ฉด ๊ธฐ๋ฅ X, Y, Z ์ธ ๊ฐ์ง๊ฐ ์์ ๋ ๊ธฐ๋ฅ X์ ๋ํ ํ ์คํธ ์ผ์ด์ค๋ง ์์ฑ๋ฉ๋๋ค. ๋๋จธ์ง ๊ธฐ๋ฅ์ ๋ชจ๋ ์ปค๋ฒํ๋ ค๋ฉด ๋ณ๋์ ์ธ์ ์์ ๊ธฐ๋ฅ Y์ ๋ํ ํ ์คํธ ์ผ์ด์ค๋ฅผ, ๋ ๋ค๋ฅธ ์ธ์ ์์ ๊ธฐ๋ฅ Z์ ๋ํ ํ ์คํธ ์ผ์ด์ค๋ฅผ ์์ฑํ ํ ์ด๋ค์ ๋ณํฉํด์ผ ํฉ๋๋ค.
์ด๋ ์๊ณ ๊ฐ ๋ ๋ค์ง๋ง, ๋ชจ๋ ๊ธฐ๋ฅ์ ํ ์คํธ๋ฅผ ํ ๋ฒ์ ํ๋กฌํํธ๋ก ์์ฑํ๋ ๊ฒ๋ณด๋ค ๊ธฐ๋ฅ์ ์ขํ 3๋ฒ ์์ฑํ๊ณ ๋ณํฉํ๋ ๊ฒ์ด ๋ ์ข์ ํ ์คํธ ์ผ์ด์ค๋ฅผ ๋ง๋ค ๊ฐ๋ฅ์ฑ์ด ๋์ต๋๋ค.
์ ์ ์ฌํญ
์์ฑ ๊ฒฐ๊ณผ๋ ๋งค๋ฒ ๋ค๋ฆ ๋๋ค.
์์ฑ AI์ ํน์ฑ์ ๋์ผํ ์ ๋ ฅ์ด๋ผ๋ ๊ฒฐ๊ณผ๋ ๋งค๋ฒ ๋ค๋ฆ ๋๋ค. ์ฌ๋ฌ ๋ฒ ์๋ํ์ฌ ๊ฐ์ฅ ํ์ง์ด ๋์ ํ ์คํธ ์ผ์ด์ค๋ฅผ ์ ํํ์ธ์.
์ ๋ ฅ ํฌ๊ธฐ์ ์ ํ์ด ์์ต๋๋ค.
AI๊ฐ ํ ๋ฒ์ ์ฒ๋ฆฌํ ์ ์๋ ํ ์คํธ ์(ํ ํฐ ์)์๋ ์ ํ์ด ์์ต๋๋ค. ๋๊ท๋ชจ ๋ฌธ์๋ฅผ ์ฌ์ฉํ๋ ๊ฒฝ์ฐ, ๋์ ๋ฒ์๋ฅผ ์ขํ๋ ๋ฑ์ ๋ฐฉ๋ฒ์ ํ์ฉํ์ธ์.
๋ฌธ์์ ํ์ง์ด ๊ฒฐ๊ณผ์ ์ํฅ์ ๋ฏธ์นฉ๋๋ค.
์ ๋ ฅ ๋ฌธ์์ ํ์ง (์: ๊ตฌ์กฐํ๋๊ณ ์ ๋ฆฌ๋ "AI-Ready" ์ํ์ธ์ง ์ฌ๋ถ)์ด ๊ฒฐ๊ณผ์ ์ํฅ์ ๋ฏธ์นฉ๋๋ค.