컴퓨터 기반 평가는 하이퍼텍스트, 색채, 동영상, 사운드, 그래프, 표 등을 마음껏 이용하고, 상호작용이 가능한 문항을 제작하여 복합적이며 다양한 능력의 측정이 가능하다. 따라서 PISA의 국제 평가에서와 같이 복합적인 문제 상황에서 인지적·사회적 역량을 평가하기 위해서는 컴퓨터를 활용한 방식이 적절하다. 따라서 역량 중심의 교육과정에 필요한 다양한 능력을 평가하기 위해 교육 현장의 도입이 필요하다.
정보통신기술의 발전으로 생활 및 직업 환경이 변화하고 교육환경을 비롯한 교육 내용과 방법 등 전반적인 변화가 진행되고 있으므로, 컴퓨터를 기반으로 한 평가 환경의 전환이 선행되어야 미래 사회에 요구되는 다양한 능력과 특성을 평가할 수 있게 된다. PISA에서 컴퓨터 기반 평가의 시행은 실생활 환경에서 컴퓨터의 중요성이 점점 더 증대하여 다양한 정보통신기기를 활용한 학습 활동의 변화가 평가에 반영된 것이다. Ⅱ부터 Ⅳ장에 예시된 CBAPS, CBAM, DRA 문항에서 보듯이 컴퓨터 기반 평가에서는 지필평가와 달리 하이퍼텍스트, 다채로운 색채의 이미지, 동영상, 사운드, 그래프와 표 등을 자유롭게 이용하고, 특히 상호작용이 가능한 문항을 제작할 수 있으므로 복합적이면서 다양한 능력을 측정할 수 있다. OECD는 이러한 특징을 살려 컴퓨터 기반 평가를 PISA에 적극적으로 적용하 여학생들의 실생활 소양과 문제해결력, 의사소통능력 등 21세기 역량을 평가한다. PISA의 국제 평가 사례에서 인지적․사회적 역량이 요구되는 복합적인 문제 해결 능력의 평가에는 컴퓨터를 활용한 평가 방식이 적절한 방법으로 판단된다. 역량 중심의 교육과정에 따라 새로운 교육 내용이 설정되면 이에 적합하도록 평가 방법을 개편할 필요가 있는데, 컴퓨터 기반 평가는 역량 중심의 교육과정에서 강조하는 다양한 능력을 평가하는 데 유용하게 적용할 수 있는 방법이다. 따라서 미래 교육 내용과 교육 환경의 변화를 고려할 때 컴퓨터 기반 평가는 우리나라 교육 현장에 도입해야 할 주요한 과제이다.