평가 도구를 제작할 때에는 학생이 성취한 정도를 제대로 발휘할 수 있도록 불필요한 요소를 최소화해야 결과의 신뢰도가 높아진다.
평가 도구를 제작할 때에는 학생들이 글을 읽고 문제를 푸는 데에 불리한 환경 요인을 배제함으로써 학생이 성취한 정도를 제대로 발휘할 수 있도록 해야 한다. 평가하려는 요소 이외에 학생이 문제를 푸는 데 방해가 되는 요인을 최소화해야 평가 결과의 타당도와 신뢰도를 높일 수 있다. 또한 성취수준은 학생들의 학습을 위한 노력에 대한 정당한 보상이므로, 문항의 배열이나 평가 도구 구조와 같은, 교수 학습과 관련 없는 요인에 의해 실제 성취 정도보다 더 낮은 수준으로 평가받지 않도록 유의해야 한다. 문항의 배열에 있어 고려할 사항을 제시하면 다음과 같다.