Comment le Minnesota Star Tribune a utilisé l'IA pour renforcer ses reportages sur le cuir de chaussures en arrière-plan d'un tireur de masse

Le 27 août, vers 8 h 30, quelqu'un a commencé à tirer des balles à travers les vitraux de l'église catholique de l'Annonciation à Minneapolis. Après avoir tué deux enfants et blessé 21 autres, Robin Westman est décédé des suites d'une blessure par balle qu'il s'était infligée.

Alors que beaucoup de nos journalistes se précipitaient sur les lieux, d’autres se sont lancés dans des recherches sur le tireur. Lorsque le nom de Westman a fait surface, nous avons procédé au blocage et à la lutte journalistique habituels. Nous avons examiné les dossiers judiciaires demandés aux appels de la police pour se rendre à son domicile et analysé les réseaux sociaux.

On a ensuite retrouvé une série de vidéos diffusées le matin du tournage.

Les vidéos étaient chaotiques, violentes et parfois incohérentes, divagations d'une personne des forces de l'ordre identifiée plus tard comme étant Westman. Mais il y avait une autre difficulté pour nos journalistes : les vidéos montraient des centaines de pages d'un texte dans une autre langue qui devait être déchiffré dans les délais. Heureusement, nous disposons d'un atout essentiel dans notre laboratoire d'IA qui expérimente l'utilisation de la technologie de l'intelligence artificielle pour aider notre journalisme.

Les dernières nouvelles sont l'un de ces domaines où le temps presse vraiment et c'est là que la technologie peut vraiment intervenir et aider, a déclaré Dana Chiueh, alors ingénieur en innovation en matière d'information au Star Tribune.

Alors que beaucoup de nos journalistes essayaient de traiter les commentaires et les actions se déroulant dans la vidéo, Chiueh a pris des captures d'écran des pages du journal et a téléchargé les données dans ChatGPT. Sa première demande était d'identifier la langue. Réponse d'IA : Faux Cyrillic, une typographie russe qui traduit directement les mots anglais.

vicky swayze

L’étape suivante consistait à voir si l’IA pouvait traduire les mots sur la page. Ce n’était pas une tâche facile. Initialement, Chiueh a mis la vidéo en pause, a capturé chaque page, puis a téléchargé les captures d'écran dans ChatGPT. (Elle a ensuite écrit un script informatique qui extrayait les données lorsque les pages se tournaient.)

La traduction d’AI montrait des écrits glorifiant des meurtriers de masse obsédés par les fusillades dans les écoles comme Sandy Hook et Columbine et obsédés par les armes à feu.

J'essaie d'utiliser ChatGPT pour décoder certaines des entrées manuscrites cryptées en cyrillique que quelqu'un du nom du tireur a téléchargées il y a quelques heures. Chiueh m'a envoyé un message environ trois heures après la fusillade. Y a-t-il quelqu'un avec qui je peux collaborer sur ce sujet ou à qui parler de la constitution d'un dossier à ce sujet ?

La réponse a été un oui sans équivoque.

Mais nous devions nous assurer que nous pouvions faire confiance et vérifier les traductions de l’IA.

« Je peux voir à quel point cela aide énormément »

Je fais partie des nombreux journalistes qui considèrent l’IA avec une certaine appréhension. Lorsque l’IA est devenue très populaire en 2023, j’ai averti mes anciens collègues que nous devions l’éviter pour garantir la confiance du public.

Ces points de vue ont changé après avoir assisté à la Conférence NICAR au printemps 2024. Alors que plusieurs sessions étaient axées sur les gee-whiz ! aspects de la technologie, des discussions ont également eu lieu sur l'éthique. Il est devenu évident que de nombreux journalistes utilisaient l’IA pour effectuer des tâches journalistiques banales, telles que rédiger des demandes d’enregistrement, vérifier le code et résumer les recherches clés à partir d’une multitude de documents.

Les principaux avertissements consistaient à traiter l'IA avec scepticisme, car elle peut halluciner si des humains vérifient quoi que ce soit avant sa publication et évitent de saisir des données sensibles ou personnelles dans le système. Le Star Tribune et d’autres salles de rédaction disposent également de comptes d’entreprise qui garantissent que l’IA ne sera pas formée sur notre travail et bloquent nos requêtes par rapport aux autres.

Après le tournage, l’IA nous a permis de traduire rapidement des centaines de pages de travail. Mais nous savions aussi que nous avions besoin de traducteurs humains pour le vérifier.

Alors que Chiueh alimentait le contenu de l'IA pour la traduction, le journaliste de Star Tribune, Victor Stefanescu, a contacté des experts qui ont pu confirmer les traductions. Giulia Dossi, professeure invitée de langue russe et d'études régionales au Collège Saint-Olaf, et Anna Pearce, professeur de russe comme langue étrangère qui travaillait auparavant à Saint-Olaf, ont gracieusement accepté de nous aider avec la traduction.

Mais nous avons aussi dû établir des priorités. Au lieu de demander aux traducteurs de réviser des centaines de pages de documents du début à la fin, nous avons choisi d'extraire les passages traduits par l'IA qui seraient utilisés dans nos premiers rapports et d'envoyer les lots à nos sources humaines.

susan alice buffett

Après une lecture rapide, c'était une traduction largement précise que Stefanescu nous a envoyée sur Slack après l'envoi du premier lot de traductions.

Pendant que lui et Chiueh obtenaient la confirmation, d’autres journalistes étaient chargés du reportage et de l’écriture.

Mon premier rougissement en tant que journaliste a été que je ne fais confiance à rien de ce que l'IA crache, a déclaré Walker Orenstein qui a écrit un article sur les vidéos du tireur. Mais en continuant à le lire, je me disais : OK, je peux voir à quel point cela aide énormément.

Orenstein a donné la priorité aux écrits dont il avait besoin de confirmation pour son premier histoire je l'ai donné au traducteur et j'ai attendu la vérification.

Dans de nombreux cas, la traduction de l’IA était plutôt bonne et proche. Dans certains cas, c'était moins bien, dit-il.

Nous avons rapidement appris que certaines traductions de l’IA étaient incorrectes. Dans un cas, il était dit que Westman avait écrit que je n'avais jamais eu de père, ni d'ami proche, ni de famille.

Cela aurait pu être une découverte importante qui décrivait une vie familiale difficile. Mais nos traducteurs humains ont corrigé la transcription et ont déclaré que Westman avait écrit que je n'avais jamais eu la mort d'un ami proche ou d'un membre de la famille.

C'était une différence majeure étant donné que le tireur s'est excusé auprès de ses parents dans les journaux et leur a exprimé son amour et sa gratitude.

(Capture d'écran/Minnesota Star Tribune)

Il y a une raison pour laquelle l’IA fait ces erreurs. En plus des hallucinations, il s’agissait de traduire des captures d’écran d’une vidéo contenant un texte manuscrit dans une langue étrangère.

Les traducteurs humains constituaient un soutien essentiel.

Il était vraiment important d'avoir ce traducteur humain, comme l'a déclaré Orenstein, un expert travaillant avec nous.

Pendant ce temps, Jeff Meitrodt, journaliste d'investigation du Star Tribune, a été chargé d'écrire un article sur ce que nous savions du tireur. Le rôle de Meitrodt était de révéler la biographie du tireur où elle fréquentait l’école, sa famille et son emploi. Puisque nous avons déjà publié un article sur le soi-disant manifeste du tireur, l’histoire de Meitrodt s’est concentrée sur les parties de la vie de Westman que nous avons pu reconstituer en 12 heures. Il comprenait également des reportages à partir de passages de journaux.

Les deux articles ont été publiés le jour du tournage. Nous sommes ensuite passés des reportages d’actualité à l’utilisation de l’IA pour en savoir plus sur la vie de Westman.

« Cela prendrait probablement des semaines pour tout parcourir »

Nous avons rapidement compris qu'il faudrait beaucoup plus de travail pour saisir les écritures de journal restantes dans l'IA.

Nous avons chargé trois autres journalistes Emmy Martin Matt DeLong et Brian Prichard d'aider Chiueh dans le travail sur l'IA. C'était un processus qui prenait beaucoup de temps. L’IA générait parfois des mots incorrects ou en double parce qu’elle ne pouvait pas lire l’écriture manuscrite. Nous avons corrigé ces refus en téléchargeant une meilleure image et en indiquant à l'IA qu'elle était mal traduite.

L'IA a également rejeté les candidatures car elles contenaient des propos violents, haineux et racistes, ce qui nécessitait une solution de contournement. Par exemple, nous avons dû indiquer à l'IA que les écrits provenaient d'une amie qui avait besoin de commentaires sur ses écrits fictifs. L’IA a accepté ces invites.

Au total, les traductions totalisaient près de 200 pages comprenant plus de 150 000 mots cyrilliques et anglais.

Même avec un excellent traducteur, cela prendrait probablement des semaines pour parcourir tout ce que Chiueh a dit.

keith powers parents

Les résultats ont fourni de nombreuses pistes, notamment les noms d'amis, de famille et de collègues. Il révélait les visites de Westman dans des armureries et des champs de tir locaux. Il a également décrit d'autres sites possibles, ses plans et ses efforts pour rester indétectables.

De nombreux contacts de Westman, y compris les membres de sa famille, ont refusé de commenter. Mais des entretiens avec plus de 50 personnes, un examen des dossiers judiciaires et une toile de médias sociaux nous ont aidés à raconter l'histoire d'un Robin Westman que le public connaissait.

L’IA et les traductions humaines nous ont permis de comprendre les pensées violentes, sombres et racistes d’une personne qui tirait plus de 100 balles sur une église pleine d’enfants et de personnes âgées.

Orenstein était l'auteur principal d'un profil complet qui a été publié trois jours après la fusillade. Il a fait un travail fantastique en mariant les faits rassemblés par plus d’une douzaine de journalistes avec des écrits de journaux traduits par l’IA et vérifiés par des traducteurs humains.

Je pensais que c'était un excellent cas d'utilisation pour AI Orenstein, a déclaré.

Les traductions permettent au Star Tribune de continuer à approfondir d'autres fils d'histoire possibles liés au tournage. Mais ce sera sans Chiueh. Elle a quitté le Star Tribune pour un poste chez ProPublica. Mais l’expérience globale nous a permis de réfléchir à la manière dont la rédaction peut utiliser l’IA pour soutenir notre journalisme.