요즘IT
10년 전 자격증 교재가 AI 테스트를 살렸다
1인 개발자가 AI QA 에이전트의 검증 기준을 10년 전 ISTQB 교재로 보완해 오류를 잡아낸 사례가 소개됐다.
사서의 짚기
검증 기준 없이 테스트까지 AI에 맡기면 전부 통과 판정이 나와도 실제 서비스에서는 오류가 쏟아질 수 있다는 사례가 핵심이다. 새 기준을 만드는 대신 10여 년 전 취득한 자격증 교재를 검증 근거로 재활용했다는 점이 흥미로워, AI QA 도입을 검토하는 1인 개발자나 소규모 팀에 실질적인 참고가 된다.
원문 발췌
1인 개발자가 만든 AI QA 에이전트는 테스트마다 모두 패스를 찍었지만, 정작 서비스 오픈 직전 오류가 쏟아졌습니다. 기준을 주지 않은 채 검증까지 AI에 맡긴 탓이었죠. 그 기준을 새로 만드는 대신, 10여 년 전 따 놓고 이력서 한 줄로만 남아 있던 테스팅 자격증(ISTQB) 교재를 다시 꺼내 AI에 던졌습니다. 그러자 AI는 훨씬 정교한 테스트 전략과 시나리오를 세우기 시작했습니다. AI가 강력해질수록 낡은 문서의 값이 오히려 오르는 이유와, 판단과 책임까지는 AI에 넘기지 말아야 하는 이유를 정리했습니다.