지필평가로도 가능한 것을 많은 예산이 드는 컴퓨터 기반으로 바꿀 수는 없다. 또한 평가의 개발에 있어 현장 적합도가 높은 방안이 필요하며, 지필평가로 평가할 수 없는 능력의 측정에 적용해야 한다.
컴퓨터 기반 평가로 어떤 내용을 평가하느냐의 문제는 지필평가에 비한 상대적 유용성과 직결되는 사항이다. 지필평가로도 가능한 내용을 고도의 기술과 많은 예산을 들여야 하는 컴퓨터 기반 평가에 의해 평가한다면 효율성이 떨어진다. 컴퓨터를 활용함으로써 지필평가로는 평가할 수 없었던 능력을 측정할 수 있다는 장점을 살려 역량 평가 방안으로 적용해야 한다. 컴퓨터를 활용한 역량 평가에 적합한 교과별 내용 규명, 이를 평가하기에 적합한 교과별 문항 유형과 형식 탐색, 교사가 활용할 수 있는 컴퓨터 프로그램 및 시스템 등을 개발 등 현장 적합도가 높은 방안 마련을 위한 여러 방면의 노력과 지원이 뒷받침되어야 성공적으로 컴퓨터 기반 평가를 도입․적용할 수 있다.