Les tests standardisés, qui sont des examens académiques administrés à de grands groupes de personnes, sont décrits comme « standardisés » en grande partie parce que le test de chaque individu est noté de la même manière. Dans de nombreux cas, ces tests sont notés par machine, les candidats remplissant les réponses sur des «feuilles à bulles» qui sont passées sur un ordinateur pour la notation. Dans d’autres cas, comme les examens d’écriture standardisés, un correcteur humain est nécessaire, car les ordinateurs ne sont pas encore capables d’analyser les compétences en écriture. Dans cette situation, de nombreux niveleurs sont souvent réunis pour gérer le travail, et un test peut être lu par plusieurs personnes pour aider à garantir l’objectivité. Cependant, il est presque impossible d’éliminer la subjectivité ou d’arriver à un consensus sur le processus de notation lorsque des humains sont impliqués, et en tant que tel, la pratique consistant à faire noter des examens standardisés par des humains est quelque peu controversée.
Cette normalisation dans la notation des tests standardisés est très importante, car ces tests sont souvent très compétitifs. Les tests standardisés sont, par exemple, examinés et comparés dans la détermination des admissions dans les collèges, les facultés de droit, les facultés de médecine et les études supérieures. La conformité dans la notation des tests standardisés est absolument essentielle afin de garantir que ces déterminations sont faites de manière équitable et qu’un individu n’est pas choisi plutôt qu’un autre simplement à cause d’un parti pris ou d’une erreur dans le processus de notation.
Les machines peuvent être utilisées pour noter des tests standardisés composés de questions à choix multiples ou vrai-faux. De nombreux tests standardisés sont donc composés de tels types de questions, car la notation automatique a un taux d’erreur relativement faible et est exempte de biais. De plus, le processus de classement des tests standardisés peut être achevé avec une grande rapidité lorsque tous les tests peuvent être introduits dans une machine. Ceci est très important pour les tests qui sont administrés dans tout un pays, car la charge de travail peut être beaucoup trop importante pour que les évaluateurs humains puissent la gérer efficacement. Ces tests sont généralement administrés sur des “feuilles à bulles”, sur lesquelles les candidats remplissent une “bulle” étiquetée sur la page de réponses afin de sélectionner leurs réponses.
Cependant, toutes les compétences ne peuvent pas être testées à l’aide de feuilles à bulles. Les compétences en rédaction et la capacité d’analyser et de répondre aux problèmes avec compétence et profondeur nécessitent souvent une écriture ou des calculs détaillés qui ne peuvent pas être examinés par un ordinateur. La notation des tests standardisés avec des éléments écrits nécessite la présence d’un correcteur humain pour lire et porter des jugements sur le travail du candidat. Dans certains cas, plusieurs correcteurs relisent chaque travail écrit et comparent les scores afin d’accorder un certain niveau d’objectivité au processus de notation. Dans d’autres cas, ce n’est pas possible.
L’utilisation de l’intervention humaine dans la notation des tests standardisés est quelque peu controversée. Les personnes ayant différents niveaux d’expertise et des opinions différentes sont souvent incapables de parvenir à un consensus sur la façon dont le travail écrit doit être noté. Les tentatives pour remédier à ces problèmes comprennent l’embauche de correcteurs uniquement dans les domaines pertinents et l’obligation pour les correcteurs de suivre une formation approfondie. Les préjugés, cependant, ne peuvent pas être complètement éliminés en une seule session de formation, et il a été démontré que différents correcteurs notent les mêmes écrits de manière très différente. D’autres facteurs tels que le salaire des correcteurs et l’expérience d’un correcteur donné peuvent également biaiser le processus de notation des tests standardisés.