La capacité de développer et d’appliquer des instruments dans le cadre de ce qu’on appelle «l’évaluation authentique» a été développée par les professeurs de ce centre pendant de nombreuses années., tous spécialistes de la langue spécifique dans laquelle ils travaillent et sur laquelle ils mènent leurs recherches. Dans cette affaire, nous défendons deux points principaux. Premièrement, que comme d’autres processus éducatifs, les processus d’évaluation et de certification subissent la même transformation numérique qui imprègne tous les aspects de la société contemporaine. Afin de maintenir la pertinence, la légitimité et la validité des processus d’évaluation, l’USP et des organismes tels que le Centre de langues doivent continuellement rechercher et développer des modalités différentes et nouvelles. En ce sens, en ce moment, les coordonnateurs des domaines linguistiques du CIL-FFLCH/USP se consacrent à la résolution de problèmes techniques sans perdre de vue la dimension pédagogique, constitutive d’un processus d’évaluation. Le deuxième point que nous soulignons est que la capacité de concevoir et d’opérationnaliser les étapes de l’évaluation est une fonction essentielle, presque déterminante, d’une université. Cette capacité ne doit pas être externalisée, mais plutôt développée, avec des équipes pluridisciplinaires, en tenant compte des valeurs disciplinaires et pédagogiques d’un établissement public d’enseignement. L’une des fonctions du Centre interdépartemental des langues est de fournir ce service aux programmes de troisième cycle de notre université – comme il l’a fait à travers le partenariat consolidé avec eux au fil des ans – et cette disposition, comme il se doit, est organiquement associée à l’enseignement trépied -recherche-extension.
L’évaluation des compétences linguistiques-discursives en lecture de textes académiques fait partie d’un processus éducatif. Dans l’environnement numérique et en ligne, ainsi qu’en termes d’enseignement-apprentissage ou d’évaluation en général, il existe une pression intense pour concevoir des instruments d’évaluation. Pour le Centro Interdepartamental de Idiomas, il y a des avantages évidents à appliquer des tests en ligne, car, entre autres raisons, cela permet aux candidats qui ne vivent pas dans la ville de São Paulo de participer à la première étape de sélection pour les études de troisième cycle sans en supporter les frais de tout déplacement. Ce constat montre bien qu’il s’agit d’un mouvement d’inclusion. Cependant, en plus des avantages, il faut considérer les risques.
Sans un processus d’examen minutieux et délibéré, la transformation vers des processus d’évaluation en ligne menace la validité et l’intégrité de l’évaluation. Nous vivons dans un monde où chacun a accès à des systèmes d’IA générative comme ChatGPT, avec une compétence linguistique au sens étroit, mais qui produisent des textes difficiles à distinguer de ceux qui ont été créés par des humains. Google Lens est une application qui peut transcrire et traduire une grande variété d’images textuelles. Le plagiat ou la commande de textes à des tiers sont des pratiques auxquelles les systèmes éducatifs sont confrontés depuis longtemps.
Une façon tentante mais peu judicieuse de gérer la complexité de la transformation numérique consiste à déléguer des tâches à des tiers. La compétence technique dans les processus numériques est généralement déléguée à d’autres, considérés comme des références fortes, hors du cadre universitaire, à embaucher. Dans ce raisonnement, l’université abrite principalement des universitaires, qui peuvent se concentrer sur la partie la plus disciplinaire, tandis que des services techniques peuvent être proposés par ces autres, y compris avec des gains d’efficacité, offrant ces services à l’échelle et de manière standardisée. Nous ne partageons pas ce point de vue, que nous jugeons superficiel et efficace. Nous croyons que pour innover dans le domaine de l’éducation, en respectant les valeurs de l’université publique, il est nécessaire d’intégrer la tradition et la force données par la recherche académique, la pratique professionnelle et la compétence technique et technologique au sein d’une seule équipe multidisciplinaire.
Pour dépasser le sens commun, objectif qui est ou devrait être à l’horizon du travail d’une université publique, il est nécessaire d’analyser plus systématiquement les concepts. Un processus d’évaluation valide nécessite l’intégration de trois compétences distinctes. Premièrement, la compétence disciplinaire qui, dans le cas du Centre de langues, est l’expertise linguistique-discursive. Deuxièmement, la compétence technique dans l’évaluation : adapter la difficulté et le pouvoir de discrimination des tâches au public cible, veiller à la sécurité et à l’accessibilité du test et rapporter les résultats de manière adéquate – entre autres. Troisièmement, la compétence administrative et opérationnelle. L’ensemble de ce processus doit être intégré aux systèmes et à l’infrastructure de l’institution de certification.
Selon nous, il n’est pas possible de réaliser des évaluations numériques de qualité, toujours dans le cadre de processus éducatifs, sans l’articulation de ces trois compétences. L’innovation, entendue comme la matérialisation du potentiel apporté par les technologies numériques, nécessite un échange constant d’idées entre plusieurs spécialistes, chacun avec ses connaissances locales, situées et inscrites dans une tradition historique.
Il y a de grands risques à croire au « solutionnisme technique », c’est-à-dire à adopter des solutions techniques à des problèmes qui, en fait, nécessitent une réponse flexible aux changements du scénario actuel. Il faut donc reconnaître qu’il n’existe pas d’outil anti-fraude parfait, tout comme il n’est pas possible d’admettre la simple transposition des pratiques développées pour le face-à-face à l’environnement en ligne. Par exemple, l’utilisation d’IA qui analyse l’image de la webcam ou d’autres indicateurs biométriques lors d’un test traditionnel, en plus de ne pas résoudre le problème de sécurité, est éthiquement discutable en raison du potentiel de biais et de l’efficacité différente de ces algorithmes pour différents groupes de candidats. .
Plutôt que de forcer les anciennes pratiques dans les environnements en ligne, une attitude plus durable, conforme à notre excellence académique, consiste à examiner comment adapter nos pratiques pour tirer parti du potentiel de l’environnement en ligne, sans perdre de vue nos valeurs fondamentales. Ainsi, au lieu d’essayer d’empêcher artificiellement l’utilisation des ressources pendant le test, il serait préférable de repenser la conception du test afin qu’il reflète authentiquement le futur environnement d’étude et de recherche ou de travail.
Le Centre Interdépartemental des Langues FFLCH/USP est bien placé pour s’atteler à cette tâche. En plus d’avoir une longue tradition dans l’évaluation des compétences linguistiques-discursives, il entretient une relation étroite avec les programmes de troisième cycle de l’USP. Pendant la période pandémique, le centre a développé un protocole d’application de test en ligne, en utilisant la plateforme de cours en ligne Moodle Extension, un système maintenu, dans la propre infrastructure de l’USP, par STI et PRCEU. Nous pensons qu’avec le soutien institutionnel approprié, le Centre interdépartemental des langues continuera à développer des pratiques innovantes qui répondront aux exigences des programmes de troisième cycle, en évaluant les candidats pour leur compétence authentique et contextualisée, en répondant à l’importance de cette étape dans les processus respectifs. sélectif.
________________
(Opinions exprimées dans des articles publiés dans le Revue USP sont de la seule responsabilité de leurs auteurs et ne reflètent pas les opinions du véhicule ou les positions institutionnelles de l’Université de São Paulo. Accédez à nos paramètres éditoriaux pour les articles d’opinion ici.)
