또한 학업성취도 평가는 학생들의 고등사고력 측정을 위하여 서답형 문항을 출제한다는 특징도 지닌다. 주어진 답지에서 정답을 선택하는 선택형 문항보다 학생들이 직접 답을 기입하는 서답형 문항이 학생들의 사고력 증진에 도움을 준다는 것은 논의의 여지가 없다. 그러나 국가수준 평가로서 채점의 공정성과 신뢰성을 확보해야 하고, 전수 학생을 대상으로 한 채점 시간과 비용을 고려해야 하므로 학업성취도 평가의 서답형 문항에서는 답안 길이가 짧고 응답 제한성이 높은 단답형 문항 비중이 높은 편이다. 또한 전체 문항에서 서답형 문항 비율이 20% 정도로 서답형 문항 비율이 30~60%인 국외 학업성취도 평가에 비해 낮은 편이다. 따라서 서답형 문항의 양적, 질적 확대를 위해서는 채점의 신뢰성과 효율성을 확보해 나가는 노력이 요구된다.
학업성취도 평가는 학생들의 사고력 향상을 위해 서답형 문항을 출제하는데 채점의 공정성과 신뢰성, 채점 시간과 비용 문제로 대부분 단답형 문항이다.  이를 해결하기 위해서는 채점의 신뢰성과 효율성이 확보되어야 한다.