21세기 지식정보화 사회에서는 지식과 정보의 생산과 전달이 대부분 컴퓨터 환경에서 이루어지면서 사회 구성원들에 요구되는 능력이나 역량, 그리고 이를 교육하는 방법과 교육에 필요한 도구나 매체 등은 변화하게 되는데, PISA에서는 이러한 변화를 반영하여 3주기인 PISA 2006부터 컴퓨터 기반 평가를 도입해 왔다. PISA에서 컴퓨터 기반 평가의 부분적 도입을 거쳐 PISA 2015에 전면적으로 적용하는 배경은 PISA의 취지와 초점에서 찾을 수 있다. PISA는 만 15세 학생들이 향후 사회에 진출하였을 때 사회 구성원으로서 성공적인 삶을 영위할 준비가 되었는지를 파악하기 위한 목적으로 시행되므로, 실생활 문제를 해결하는 능력을 중시하는 역량 평가이다. 그러므로 미래 사회에서 요구하는 인재상의 변화는 PISA에 고스란히 반영되어, 평가의 내용(평가틀)을 변경하거나 새로운 영역을 추가하거나 이를 평가하기에 적합한 환경이나 방법을 적용하는 등의 모습으로 나타난다. 이와 같은 PISA의 변화는 21세기 역량을 강조하는 교육 패러다임의 전환기에 있는 우리나라의 교육평가 분야에 시사하는 바가 크다. 일상생활에서 빈번히 접할 뿐만 아니라 교수학습 장면에서 활용도가 증가하는 컴퓨터를 평가 상황에 활용하여 맥락의 실제성을 더 높일 뿐 아니라 컴퓨터 기반 평가를 통해 지필평가로는 측정하기 어려웠던 주요한 능력을 평가하여 평가의 내용 범위를 넓히고 다양화할 수 있다. 다양한 영역 및 능력을 평가하는 적절한 방식의 연구와 컴퓨터 기반 평가의 도입을 적극적으로 고려해 볼 필요가 있다.
대부분의 지식 정보의 생산이 컴퓨터 환경에서 이뤄지면서 이는 현대 사회에 중요한 생활 능력으로 평가된다. PISA는 이러한 변화를 반영하여 컴퓨터 기반의 생활 능력 평가를 담당한다. 세월에 따라 쌓인 PISA의 정보는 미래 교육 분야에 좋은 지표이며 지필 평가로는 측정하기 어려웠던 주요 능력들을 평가할 수 있다는 점에서 시사하는 바가 크다.