Connect with us

Technologie

TikTok en péril, A-level et Scottish Highers algo fiascos – Computer Weekly Downtime Upload podcast

Published

on


Dans l’épisode de cette semaine de l’ordinateur hebdomadaire Downtime Upload podcast, Caroline Donnelly, Clare McDonald et Brian McKenna discuter de la fortune de TikTok, les résultats de niveau A, et les controverses algorithme assaillir ceux et Scottish Highers.

Caroline donne le coup d’envoi du podcast en racontant les récentes fortunes de TikTok, la plate-forme de publication vidéo et de réseau que le président américain Donald Trump considère comme un bras du Parti communiste chinois.

Caroline est elle-même une passionnée de TikTok et aime surtout regarder des vidéos de  » bon chien « . Elle s’oppose également à ce que l’application soit décrite comme étant pour la génération Z, et non les millennials. Et il a été un havre de verrouillage de la dystopie couronne doom-scrolling de Twitter, dit-elle. Et il a été téléchargé deux milliards de fois.

Mais le site est menacé aux États-Unis, où le gouvernement voit le service, qui appartient à la société chinoise ByteDance, comme un cheval de Troie qui brise la vie privée, contrôlé par le Parti communiste chinois, peut-être au moins permettre le chantage et l’espionnage d’entreprise.

Comme le détaille Ryan Priest dans la chronique Downtime de CW, l’historien écossais Niall Ferguson a également une vision agri du service, le décrivant comme « pas seulement la vengeance de la Chine pour le siècle d’humiliation entre les guerres de l’opium et la révolution de Mao. C’est l’opium – un fentanyl numérique, pour que nos enfants soient excités par l’imperium chinois à venir ». Des trucs lourds.

Le salut de TikTok aux États-Unis pourrait prendre la forme d’une acquisition par Microsoft ou Twitter, sinon il pourrait s’assombrir le 20 septembre, ses jours de synchronisation des lèvres et ses utilisateurs contraints de migrer vers Instagram.

De ce côté-ci de l’étang, les choses semblent moins sombres pour TikTok, qui ouvrira son premier centre de données européen en Irlande en 2022, alors qu’il cherche à obtenir la faveur des observateurs européens de la protection des données.

Bien qu’il s’agit d’une période intéressante et potentiellement sombre pour TikTok et ses dévots de la génération Z (et plus âgés), la semaine dernière a été une très grande semaine en effet pour les jeunes adultes en Angleterre, au Pays de Galles et en Irlande du Nord: les résultats de niveau A ont été annoncés le jeudi 13 août – résultats sans examens, mais avec une « ormalisatio » algorithmique supplémentaire.

(Le podcast a été enregistré le vendredi 14 août).

Clare a suivi de près la répartition entre les sexes pour les niveaux A, en particulier en ce qui concerne l’informatique. Cette année, il y avait 10 629 candidats masculins et 1 797 candidates à l’informatique, ce qui est décevant.

Cependant, en 2018, il y avait 1 475 candidates, ce qui a augmenté et, proportionnellement, 11 % des candidates ont obtenu des notes A*, comparativement à 7,5 % des hommes. En outre, les étudiants en informatique semblent avoir été moins affectés par l’algorithme Ofqual que les étudiants de niveau A en général.

L’équipe de podcasts a ensuite parlé de la controverse entourant le modèle statistique appliqué aux évaluations des enseignants (puis, plus tard dans le podcast, le modèle appliqué par la Scottish Qualifications Authority to Highers, Advanced Highers et National 5s).

Pour une référence pratique, ce texte, extrait du rapport intérimaire de l’Ofqual sur le balayage complet des examens de l’Angleterre, du Pays de Galles et de l’Irlande du Nord, décrit le modèle Ofqual :

« Notre modèle préféré – connu sous le nom de modèle de performance directe au centre (DCP) – fonctionne en prédisant la répartition des notes pour chaque école ou collège. Cette prédiction est fondée sur le rendement historique de l’école ou du collège dans cette matière en tenant compte de tout changement dans l’obtention antérieure des candidats entrant cette année par rapport aux années précédentes. Cela a été peaufiné pour tenir compte de questions connues telles que les centres avec de petites cohortes d’étudiants, des matières à petite entrée et des matières à plusieurs niveaux. Des décisions ont également été prises sur le nombre d’années de données historiques incluses dans le modèle.

« Les détails de ces décisions sont énoncés dans ce rapport et sont formalisés dans les règlements que nous avons mis en place pour l’été 2020. Là où les écoles et les collèges avaient une cohorte relativement faible pour une matière – moins de 15 élèves en examinant l’entrée actuelle et les données historiques – le modèle de normalisation a mis plus de poids sur les CAG [Centre Assessment Grades]. Étant donné que les petits groupes d’enseignement sont plus fréquents pour les AS et les A-level que pour le GCSE, et étant donné que les CAG ont tendance à être optimistes, cela signifie que les résultats dans certaines matières de niveau AS et A sont beaucoup plus élevés cette année. Cependant, il n’existe aucun modèle statistique qui puisse prédire de façon fiable les notes pour des groupes d’élèves en particulier. Nous avons donc utilisé les preuves les plus fiables disponibles, c’est-à-faire des CAG.

Un Gardien éditorial a résumé une critique possible de cette approach, qui visait essentiellement, brian commentaires, à supprimer l’inflation de grade:

« En établissant un critère de rendement scolaire antérieur aux résultats de niveau A et gcse de cette année, Ofqual a lié la fortune des élèves individuels aux inégalités préexistantes de résultats. Essayer ainsi d’imposer une répartition standard des résultats, que les élèves sont impuissants à affecter, est injuste.

Clare commente dans la discussion qu’une option de passer un examen à l’automne serait stressante en effet, dans les circonstances de cette année.

Brian ramène ensuite l’équipe au début du mois d’août, lorsque les résultats des Scottish Highers, Advanced Highers et National 5 (l’équivalent de GCSEs) ont été annoncés. C’était la « première fois que l’histoire » pour le reste du Royaume-Uni « deuxième fois comme farce ».

Encore une fois, les résultats déclarés sont le résultat d’une combinaison d’évaluations des enseignants et de l’application d’un modèle statistique aux données sur les résultats scolaires des années précédentes. Le texte suivant résume le modèle choisi par la SQA :

« En termes simples, l’optimisation mathématique (plus populairement appelée « optimisation ») est une famille de techniques utilisées pour identifier la meilleure solution possible pour répondre à un objet déclaré selon une ou plusieurs contraintes définies. Fondamentalement, l’optimisation a été choisie comme technique privilégiée pour ajuster les estimations, car elle teste toutes les solutions possibles simultanément, afin d’identifier la valeur « eilleur disponible » pour une fonction objective – compte tenu d’un ensemble de contraintes, d’une manière robuste et efficace.

« En outre, les techniques d’optimisation sont testées et éprouvées, tant dans l’industrie que dans la littérature, et fournissent donc une approche crédible pour entreprendre les ajustements nécessaires pour soutenir l’attribution de cette année. L’approche d’optimisation appliquée était basée sur un programme linéaire mixte dans un cadre réseau pour s’assurer que la relativité des bandes raffinées sur un parcours tel qu’estimé par un centre était toujours maintenue. Lorsque l’ajustement était nécessaire, la fonction objective principale du processus d’optimisation était de réduire au minimum le nombre de candidats déplacés entre les grades pour répondre aux contraintes du centre pour chaque grade et le taux A-C. »

Il s’agit du rapport technique de la SQA National Qualifications 2020 Awarding – Methodology Report.

Brian parle à l’équipe à travers le récit de l’affaire écossaise, où le gouvernement écossais a décidé de revenir à l’évaluation des enseignants. La première ministre Nicola Sturgeon s’est excusée et a déclaré que l’erreur avait été de trop se concentrer sur le système global, et pas assez sur les élèves individuels.

L’un des résultats les plus accablants de l’application du modèle statistique, dit Brian, est que le plus démuni un cinquième des étudiants écossais ont vu leur taux de réussite baisser de 15%, tandis que le cinquième le plus riche a vu le leur augmenter de 7%.

Brian exprime son propre point de vue selon le fait que les deux gouvernements auraient dû être moins accrochés à l’inflation de grade cette année, étant donné le stress que toute la société a subi en raison de la pandémie de Covide-19. En l’état, en imposant ces modèles statistiques – aussi bons soient-ils ou non en termes techniques – ils n’ont fait que créer des tiges pour leur propre dos.

Quelle que soit la vérité, cette histoire continuera à se dérouler, surtout compte tenu de la publication imminente des résultats du GCSE la semaine prochaine.

Postscript. Dans un revirement spectaculaire, le gouvernement a décidé, en fin d’après-midi du lundi 17 août, que les élèves de niveau A et gcse en Angleterre recevront des notes estimées par les enseignants.

Podcast musique avec l’aimable autorisation de Joseph McDade

Click to comment

Leave a Reply

Votre adresse de messagerie ne sera pas publiée. Les champs obligatoires sont indiqués avec *

Tendance