깨지기 쉬운 시험은 왜 생기는가?

코드가 아니라 코드 바깥의 것에 매여 있어서다. 실행할 때마다 달라지는 것을 시험이 붙들고 있으면 같은 코드에서도 결과가 갈린다.

흔한 뿌리가 넷이다. 실행 순서에 매인 것, 시각과 시간대에 매인 것, 무작위 값, 그리고 기다릴 시간을 초로 못 박아 둔 것이다.

기다리는 시간이 특히 잘 속인다. 내 노트북에서 2초면 끝나는 일이 빌드 서버에서는 안 끝난다. 시간이 아니라 조건이 찼는지를 기다려야 한다.

고치는 순서를 잘못 잡기도 쉽다. 재시도를 붙이는 것이 가장 빠른데 그러면 신호가 사라진다. 가끔 깨지는 시험이 진짜 버그를 가리키고 있을 때가 있다.