Skip to Content
logologo
AI Incident Database
Open TwitterOpen RSS FeedOpen FacebookOpen LinkedInOpen GitHub
Open Menu
Découvrir
Envoyer
  • Bienvenue sur AIID
  • Découvrir les incidents
  • Vue spatiale
  • Vue de tableau
  • Vue de liste
  • Entités
  • Taxonomies
  • Soumettre des rapports d'incident
  • Classement des reporters
  • Blog
  • Résumé de l’Actualité sur l’IA
  • Contrôle des risques
  • Incident au hasard
  • S'inscrire
Fermer
Découvrir
Envoyer
  • Bienvenue sur AIID
  • Découvrir les incidents
  • Vue spatiale
  • Vue de tableau
  • Vue de liste
  • Entités
  • Taxonomies
  • Soumettre des rapports d'incident
  • Classement des reporters
  • Blog
  • Résumé de l’Actualité sur l’IA
  • Contrôle des risques
  • Incident au hasard
  • S'inscrire
Fermer

Incident 848: High School Student in Córdoba, Argentina Accused of Using AI to Generate Explicit Images of Classmates

Description: An 18-year-old Argentine student at the pre-university institute of Manuel Belgrano of Córdoba allegedly used AI tools to generate explicit fake images of at least 22 female classmates by combining their faces with other bodies. These images, posted on pornography websites, included the victims' names, leading to harassment and significant psychological harm. Legal authorities charged the student with serious injuries aggravated by gender violence.
Editor Notes: Reconstructing the timeline of events: (1) Mid-2024: Two female students at the Manuel Belgrano Institute began receiving suspicious Instagram messages from men aged 40–50. (2) July 2024: Victims discovered explicit AI-generated images of themselves on pornographic websites, featuring their names and altered appearances. (3) August 2024: Families of victims reported the student to authorities, who launched an investigation and conducted a search of the accused's home. (4) October 18, 2024: Charges were filed against the accused for gender-based violence and psychological harm; legal experts advocated for updated laws addressing AI misuse. This fourth date is being marked as the incident date, even though the initial events are reported to have begun sometime in the middle of 2024.

Outils

Nouveau rapportNouveau rapportNouvelle RéponseNouvelle RéponseDécouvrirDécouvrirVoir l'historiqueVoir l'historique

Entités

Voir toutes les entités
Alleged: Unknown deepfake technology creators developed an AI system deployed by Unnamed 18-year-old Manuel Belgrano male student, which harmed Unnamed Manuel Belgrano female students.

Statistiques d'incidents

ID
848
Nombre de rapports
1
Date de l'incident
2024-10-18
Editeurs
Applied Taxonomies
MIT

Classifications de taxonomie MIT

Machine-Classified
Détails de la taxonomie

Risk Subdomain

A further 23 subdomains create an accessible and understandable classification of hazards and harms associated with AI
 

4.3. Fraud, scams, and targeted manipulation

Risk Domain

The Domain Taxonomy of AI Risks classifies risks into seven AI risk domains: (1) Discrimination & toxicity, (2) Privacy & security, (3) Misinformation, (4) Malicious actors & misuse, (5) Human-computer interaction, (6) Socioeconomic & environmental harms, and (7) AI system safety, failures & limitations.
 
  1. Malicious Actors & Misuse

Entity

Which, if any, entity is presented as the main cause of the risk
 

Human

Timing

The stage in the AI lifecycle at which the risk is presented as occurring
 

Post-deployment

Intent

Whether the risk is presented as occurring as an expected or unexpected outcome from pursuing a goal
 

Intentional

Rapports d'incidents

Chronologie du rapport

+1
Résolution inédite contre un garçon de 18 ans qui, grâce à l'IA, a créé de fausses photos pornographiques de plus de 20 étudiants
Résolution inédite contre un garçon de 18 ans qui, grâce à l'IA, a créé de fausses photos pornographiques de plus de 20 étudiants

Résolution inédite contre un garçon de 18 ans qui, grâce à l'IA, a créé de fausses photos pornographiques de plus de 20 étudiants

clarin.com

Résolution inédite contre un garçon de 18 ans qui, grâce à l'IA, a créé de fausses photos pornographiques de plus de 20 étudiants
clarin.com · 2024
Traduit par IA

Il a 18 ans et fréquente l'institut préuniversitaire Manuel Belgrano de Cordoue. Il y a quelques mois, deux jeunes filles de 17 ans, qui ne sont pas dans la même classe et avec qui elles n'ont même pas eu de contact, ont commencé à recevoir…

Variantes

Une "Variante" est un incident qui partage les mêmes facteurs de causalité, produit des dommages similaires et implique les mêmes systèmes intelligents qu'un incident d'IA connu. Plutôt que d'indexer les variantes comme des incidents entièrement distincts, nous listons les variations d'incidents sous le premier incident similaire soumis à la base de données. Contrairement aux autres types de soumission à la base de données des incidents, les variantes ne sont pas tenues d'avoir des rapports en preuve externes à la base de données des incidents. En savoir plus sur le document de recherche.

Incidents similaires

Par similarité textuelle

Did our AI mess up? Flag the unrelated incidents

Algorithm Assessing Risk Faced by Victims of Gender Violence Misclassified Low-Risk Cases, Allegedly Leading to Homicide of Women and Children in Spain

In Spain, the VioGén algorithm attempts to forecast gender violence

Jul 2007 · 7 rapports
Argentinian City Government Deployed Teenage-Pregnancy Predictive Algorithm Using Invasive Demographic Data

The Case of the Creepy Algorithm That ‘Predicted’ Teen Pregnancy

Apr 2018 · 4 rapports
Student-Developed Facial Recognition App Raised Ethical Concerns

AI Incident Database Incidents Converted to Issues

Oct 2021 · 1 rapport
Incident précédentProchain incident

Incidents similaires

Par similarité textuelle

Did our AI mess up? Flag the unrelated incidents

Algorithm Assessing Risk Faced by Victims of Gender Violence Misclassified Low-Risk Cases, Allegedly Leading to Homicide of Women and Children in Spain

In Spain, the VioGén algorithm attempts to forecast gender violence

Jul 2007 · 7 rapports
Argentinian City Government Deployed Teenage-Pregnancy Predictive Algorithm Using Invasive Demographic Data

The Case of the Creepy Algorithm That ‘Predicted’ Teen Pregnancy

Apr 2018 · 4 rapports
Student-Developed Facial Recognition App Raised Ethical Concerns

AI Incident Database Incidents Converted to Issues

Oct 2021 · 1 rapport

Recherche

  • Définition d'un « incident d'IA »
  • Définir une « réponse aux incidents d'IA »
  • Feuille de route de la base de données
  • Travaux connexes
  • Télécharger la base de données complète

Projet et communauté

  • À propos de
  • Contacter et suivre
  • Applications et résumés
  • Guide de l'éditeur

Incidents

  • Tous les incidents sous forme de liste
  • Incidents signalés
  • File d'attente de soumission
  • Affichage des classifications
  • Taxonomies

2023 - AI Incident Database

  • Conditions d'utilisation
  • Politique de confidentialité
  • Open twitterOpen githubOpen rssOpen facebookOpen linkedin
  • 30ebe76