테스팅에 관한 모든것

AI 테스트를 하다 보면 이런 순간이 옵니다.“이거… 버그야? 아니면 원래 이런 거야?”같은 입력을 넣었는데 결과가 조금 다릅니다.다시 실행하면 또 다릅니다.보고하려고 하면 돌아오는 말은 한 문장 “AI라서 원래 그래요.” QA 입장에서는 제일 곤란한 상황이죠.틀렸다고 하기도 애매하고, 맞다고 하기도 애매하고.애매함이 반복됩니다.​그런데 이건 QA 역량 문제가 아닙니다.AI가 말을 안 듣는 것도 아닙니다.전제가 다르기 때문입니다. ​​​전통적 시스템 vs AI 시스템​ 기존 소프트웨어는 규칙 기반입니다. 사람이 로직을 짭니다 🧑‍💻입력 → 출력이 비교적 명확합니다 ✔왜 그런 결과가 나왔는지 추적 가능합니다 🔍​그래서 테스트도 명확합니다.요구사항이 있고,기대값이 있고,Pass / Fail이 ..