S09-02 11

Deepfake porn, la Inteligencia Artificial da nueva cara al ciberacoso escolar

Compartir en TWITTER/FACEBOOK/LINKEDIN

Deja tu comentario

Participa en esta ponencia enviádole tu pregunta o comentario a los autores

Añadir comentario

Firmantes

profile avatar
Luis Antonio Lucio LópezUniversidad Autónoma de Nuevo León

Enfoque

Introducción

En 2017 el filósofo español Aníbal Monasterio Astobiza urgió a monitorizar y cuantificar el impacto moral de los algoritmos en la vida de las personas, advirtiendo que son una suerte de caja de pandora cuyas actuaciones pueden ser catastróficas. Hoy a ocho años después (2024) la historia reciente le concede la razón. La Inteligencia Artificial, con sus algoritmos de aprendizaje profundo, es utilizada como instrumento de violencia psicológica en el ámbito escolar, donde cientos de alumnas, son víctimas de deepfake porn, luego de que sus propios compañeros han generado fotografías y videos pornográficos con aplicaciones que han permitido transformaciones no autorizadas, con el propósito de causarles daño.

El fenómeno malicioso se había circunscrito al ámbito de las celebridades, pero hoy traspasa los muros de los centros educativos, diezmando una población mayormente de menores, que sufren desasosiego al ver destruida su reputación y transitando por caminos de angustia, insomnio, desnutrición, fobia social, ideaciones suicidas afectando su salud mental.

España, México y Estados Unidos son los puntos neurálgicos en la eclosión de estos ataques de ciberviolencia, pero seguramente surgirán en otras partes del mundo, donde la Inteligencia Artificial haga su arribo.

Objetivos

Determinar la incidencia de deepfake porn en el ámbito escolar, toda vez que se ha generalizado el uso de chatbot y otras aplicaciones que permiten al usuario trasformar utilizar voz, fotografías y vídeos de personas para usarlas o no con fines perversos.

Metodología

Se realizó un estudio exploratorio, descriptivo y longitudinal revisando las publicaciones de periódicos en línea con el fin de encontrar denuncias publicadas en esos medios, donde se diera a conocer casos de deepfake porn, donde las víctimas fueran alumnas, alumnos o miembros de la planta docente.

Resultados

España

Encontramos informaciones relacionadas con el caso de 22 alumnas de una escuela secundaria de Almendralejo, España, a quienes sus propios compañeros les robaron fotografías de sus redes sociales y las trasformaron en imágenes donde aparecían  desnudas.

México

La Fiscalía General de Justicia de la Ciudad de México informó la detención de un alumno del Instituto Politécnico Nacional, que transformó 20 mil fotografías que vendía en a otros estudiantes a través de grupo privados de Telegram. Ocho de las victimas eran alumnas de ese centro universitario.

Estados Unidos

Una estudiante de Nueva Jersey denunció que fotografías de su persona y de otras 19 compañeras fueron saqueadas de sus perfiles de sus redes sociales y transformadas haciéndolas aparecer desnudas, por compañeros de su escuela secundaria que las distribuyeron en las redes sociales.

En Pensilvania una madre de familia fue detenida por la Policía acusada de manipular fotos y videos de antiguas compañeras de secundaria de su hija, con el propósito de hacerlas abandonar un equipo de animación.

Conclusiones

La Inteligencia Artificial se ha convertido en una amenaza para la salud física y mental de menores de edad, al caer en manos de estudiantes que trasforman fotografías y vídeos en material pornográfico, para dañar psicológicamente a sus compañeros, en el uso de chatbot y otras aplicaciones donde los algoritmos son utilizados maliciosamente.

Preguntas y comentarios al autor/es

    • profile avatar

      Juan Antonio Perteguer Muñoz

      Comentó el 12/04/2024 a las 23:11:58

      Estimado Luis, el tema que aborda es duro pero lamentablemente puede llegar a ocurrir si no se brinda una adecuada educación y una sana supervisión. Una pregunta, ¿al estudiar el tema ha encontrado buenas prácticas para evitar el mal uso de la IA y las redes sociales?
      Un saludo,
      Juan Antonio Perteguer Muñoz
      Doctorando Universidad Politécnica de Madrid

    • profile avatar

      Mayer Cabrera-Flores

      Comentó el 12/04/2024 a las 21:21:16

      Muchas felicidades, los impactos de esta problemática justifica de manera muy sólida la pertinencia y relevancia de la investigación. Considero que el abordar esta problemática desde la perspectiva de la formación en ética y valores enfocada en entornos digitales, y las propuestas de marcos regulatorios más estrictos y ágiles en sus respuestas pudiera inhibir los impactos. Dado lo anterior, tienen considerado profundizar en el estudio ético y regulatorio de este fenómeno? Y han considerado realizar estudios de corte cualitativo para analizar los impactos sobre las víctimas?

    • profile avatar

      Víctor Gustavo Gómez Rodríguez

      Comentó el 12/04/2024 a las 18:18:34

      Buenos días Luis, felicitaciones por su trabajo
      Una pregunta ustedes Determinaron la incidencia de deepfake porn en el ámbito escolar, han pensado en alguna estrategia para accionar en este sentido desde su institución?

    • profile avatar

      Javier Nicolás González

      Comentó el 12/04/2024 a las 17:13:35

      Don Luis, sería muy oportuno tener cifras del nivel del problema global del Deepfake porn y las medidas más exitosas aplicadas en algunos lugares para protegerse o cómo responder ante él. Gracias.

    • profile avatar

      Pablo Álamo Hernández

      Comentó el 12/04/2024 a las 02:11:59

      Don Luis, ¿nos puede recomendar un libro o podcast divulgativos sobre el tema de su investigación con el fin de multiplicar su llamada de atención?
      ¡Gracias!

    • profile avatar

      Alicia Leon-Pozo

      Comentó el 11/04/2024 a las 20:04:19

      Te felicito por el excelente trabajo, considero que es muy pertinente. Qué me podrías decir del papel de centros educativos y las autoridades ¿cómo podrían abordar de manera efectiva el problema del deepfake porn y la ciberviolencia en el entorno escolar, considerando la proliferación de herramientas tecnológicas que facilitan estas prácticas maliciosas?

    • profile avatar

      Víctor Gustavo Gómez Rodríguez

      Comentó el 11/04/2024 a las 17:09:55

      Buenos días Dr- Luís A, saludos y expresar mis respeto por su trabajo.
      Comentar que en este siglo con el auge de la IA se corren riesgos incalculables y sobre todo debemos estar preparado para enfrentar este reto, corresponde a las Universidades como centro rector pedagógico, preparar al claustro y al colectivo de estudiante para su uso correcto y más que desmentir fenómenos como esto, pues desde ahí comienza la red de distribución de falsa información, y dejar que esta perezca por su propio peso, pues en el contexto donde se den estas irregularidades los colegas conocen los valores éticos de sus compañeros.
      Por eso méritos a su trabajo para brindar una información tan importante como esta.
      ÉXITOS

    • profile avatar

      Pablo Álamo Hernández

      Comentó el 11/04/2024 a las 05:50:10

      Apreciado Doctor Luis Antonio,

      Enhorabuena por su trabajo de denuncia y motivación a poner freno a un tema tan grave como es el uso de la I.A. para acosar a menores de edad.

      Junto a su valioso estudio informativo y descriptivo, es urgente continuar su investigación con un estudio exploratorio de posibles soluciones para proteger la salud física y mental de los mayores más allá del mal uso de la tecnología que nunca se podrá evitar del todo.

      Le invito a afrontar esta investigación haciendo uso de un marco teórico validado para que su investigación tenga un alcance de alto impacto.

      ¡Muchas gracias por su valioso aporte!

      Pablo Álamo

    • profile avatar

      Sylvia Pérez

      Comentó el 11/04/2024 a las 02:07:53

      Luis Antonio tu ponencia es una llamada de atención para reflexionar sobre la indolencia humana y la ausencia de valores en centros escolares. ¿Que medidas o acciones se deben tomar para evitar este uso de la IA?


Deja tu comentario

Lo siento, debes estar conectado para publicar un comentario.

Organizan

Egregius congresos

Colaboran

Configuración de Cookies

Utilizamos cookies para mejorar su experiencia y las funcionalidades de esta web. Ver política de cookies

Revisar