Explorer les agents en éducation, avec soin

L'éducation attire des propositions d'agents plus rapidement que presque tout autre secteur, et pour des raisons compréhensibles : d'énormes volumes de travail administratif répétitif, un manque chronique d'attention individuelle et un matériel composé en grande partie de texte.

C'est également un secteur dans lequel les erreurs se cumulent d'une manière difficile à voir, car la personne concernée n'est souvent pas en mesure de s'en apercevoir.

Où appartient la frontière

Notre position est que les agents de l’éducation doivent s’occuper de la préparation et non de l’évaluation.

Préparer du matériel, récupérer des sources pertinentes, rédiger des commentaires à soumettre à un éducateur, rassembler des résumés administratifs : cela enlève des heures à une semaine et le mode d'échec est une personne qui corrige un brouillon.

Décider d'une note, juger si une soumission est originale ou prendre une décision qui affecte la progression d'un élève : ce sont des décisions où le mode d'échec est une conséquence pour quelqu'un avec des recours limités, et elles nécessitent une personne responsable.

Il ne s'agit pas d'une limitation technique. Il s’agit d’une vision de la place que doit prendre la responsabilité, et nous la conserverions même si les systèmes étaient meilleurs.

Ce que nous étudions réellement

Comment les agents changent la semaine d'un éducateur, mesuré plutôt qu'estimé. Il ne s'agit pas de savoir quelles tâches sont théoriquement automatisables, mais lesquelles ont été transférées, ce qui est revenu et dans quelle mesure elles ont dû être retravaillées.

Comment se comporte la récupération dans toutes les langues dans le matériel éducatif, et c'est là que nous voyons la preuve la plus claire que les chiffres globaux de qualité cachent les cas les plus importants.

Où se trouvent les lacunes du corpus. A great deal of what makes teaching work is not written down anywhere, and an agent asked about it returns the closest adjacent thing with a citation attached.

L'échec qui nous inquiète

Ce n’est pas une mauvaise réponse que quelqu’un capte. Une réponse fluide et bien fournie, construite sur du matériel obsolète ou subtilement inapplicable, livrée à quelqu'un sans le contexte pour le remettre en question.

Un agent qui marque sa propre incertitude est ici moins impressionnant et considérablement plus sûr qu'un agent qui produit toujours quelque chose de confiant.

Ce que nous conseillerions à une institution

Commencez par la préparation administrative, pas par tout ce qui touche à l'évaluation. Donnez-lui un propriétaire nommé. Rédigez des critères d’évaluation à partir de cas réels passés. Conservez la piste d’audit, car cela vous sera demandé.

Et traitez la résidence des données comme la première question plutôt que la dernière, en particulier lorsqu'il s'agit de dossiers d'étudiants.

Suivant

Yaju Labs couvre le programme de recherche et l'Open Development Community est libre d'adhérer. Les subventions Catalyst soutiennent des projets de création d'infrastructures d'agents, les candidatures étant ouvertes en septembre 2027.