Home
>
Sabueso
>
Te Explico
>
DeepFakes y desinformación: el reto de detectar audios ‘falsos’ en un proceso electoral
DeepFakes y desinformación: el reto de detectar audios ‘falsos’ en un proceso electoral
Imagen de Thomas Breher en Pixabay
10 minutos de lectura

DeepFakes y desinformación: el reto de detectar audios ‘falsos’ en un proceso electoral

Identificar audios falsos no es sencillo, la tecnología aún no da soluciones definitivas y es necesario evaluar el contexto en que se distribuye el material y si hay intención de desinformar
26 de noviembre, 2023
Por: Samedi Aguirre
@ 

¿Qué tienen en común el cantante Bad Bunny, la activista Gretta Thunberg y el presidente de Rusia Vladimir Putin? Todas escucharon su propia voz en una grabación que nunca hicieron, resultado de una clonación con Inteligencia Artificial (IA). 

Eso fue lo que argumentó Martí Batres, jefe de Gobierno de la Ciudad de México,  luego de que se le atribuyó un audio en el que supuestamente se dieron instrucciones para manipular el proceso interno de Morena, para definir la candidatura del partido guinda en la capital del país. “Está producido con inteligencia artificial. No es real”, dijo Batres. 

En ese caso no se pudo determinar con certeza si el audio fue efectivamente creado con IA. Herramientas como AI Voice Detector no dieron un resultado concluyente, pues al analizar diferentes fragmentos del mismo audio el porcentaje de probabilidad de que fuera hecho con IA variaba desde un 26% hasta casi un 70%.

Captura AI Voice Detector
Captura AI Voice Detector

Para probar la herramienta grabamos un breve audio con nuestra voz natural. Nosotras estábamos seguras de su autenticidad, pero para la herramienta había un 55% de probabilidad de que fuera hecho con IA. 

Pese a la evolución de las tecnologías de detección “siempre va a haber un componente de tasa de error”, advierte  Manel Terraza, quien es CEO y fundador de loccus, una startup dedicada a la detección de voces sintéticas. 

Algunos especialistas en audio señalaban que aspectos como la pronunciación, la entonación y las pausas para respirar eran muestra de que el audio que se atribuyó a Batres no fue hecho con IA; pero para otras personas esos mismos elementos eran prueba de que el audio fue creado con tecnología y no pronunciado por el jefe de gobierno. 

De hecho, las autoridades de la Ciudad de México dedicaron varios minutos de una conferencia de prensa para demostrar lo sencillo que es recrear un audio con tecnología por menos de “200 pesos al mes”. Este mismo ejercicio fue replicado por usuarios de X, antes Twitter, que una y otra vez crearon audios donde una voz similar a la de Batres confiesa cosas, en algunos ejemplo con acento extranjero

Pese a ello, su difusión en redes sociales volcó la conversación en torno a la posible división dentro del mismo partido, todo ello días antes de que concluyera este proceso preelectoral. 

El audio de Batres también hizo evidente que el mal uso de la inteligencia artificial en procesos electorales puede dar lugar a la desinformación y la manipulación del discurso público. Algo que en otros países como Venezuela, Colombia y Estados Unidos  ya han experimentado en sus más recientes elecciones. 

En este sentido, verificadores como Cazadores de FakeNews en Venezuela o Colombia Check ya han descrito que determinar si un audio es real o falso no es tan sencillo y requiere de la combinación de elementos tecnológicos, pero sobre todo de la observación del contexto en el que se comparte. 

Es decir, además de emplear análisis con herramientas de detección, buscar detalles en el sonido y pedir el apoyo de especialistas en la materia; además, es necesario identificar qué narrativa reproduce, quién comenzó la difusión del material y a quién beneficia que se haga viral. 

¿Qué es la inteligencia artificial? 

La inteligencia artificial o IA puede definirse como un área de la informática “que lo que busca es crear sistemas que puedan realizar actividades que generalmente solo eran atribuidas a los humanos, pero que ahora se pueden hacer a través de estos sistemas”, según nos dijo Paul Aguilar coordinador de seguridad digital en socialTIC, una organización sin fines de lucro que se dedicada a la investigación y formación de la tecnología digital para fines sociales.

Existen diferentes tipos de IA, pero la que se utiliza para crear contenido como fotos, imágenes, texto o audio es la inteligencia artificial generativa. Esta tecnología permite crear este tipo de contenido con modelos que le permiten aprender o copiar un conjunto de datos de un contenido creado por personas. Es decir, la IA copia o imita algo que un ser humano ya había hecho. Hablar, por ejemplo. 

Los audios deepfakes son precisamente audios muy similares o idénticos a la voz de una persona y que se pueden generar porque se entrenó un sistema de inteligencia artificial para clonar o aprender la voz de una persona.

Entonces, en palabras de Paul Aguilar, cuando hablamos de inteligencia artificial y de audios deepfakes nos referimos a “sistemas que aprenden a imitar la voz de una persona para poder generar audios a partir de de esta imitación”.

¿Cómo se hace un audio falso?

Lo primero que tenemos que saber es que se puede usar IA para crear audios desde cero, o para modificar audios reales, según explicó a El Sabueso Manel Terraza.

Él explica que para clonar una voz, sin consentimiento, basta con tomar muestras de audios de la persona y pasarlos por un software capaz de imitar la voz y decir lo que se le pida.  

“Este es el problema principal de riesgo en el mundo de la desinformación porque cualquiera puede ir y tomar el audio de un video de un político y hacer un clon de una voz”, advierte Terraza, quien agrega que existen modelos de IA con los que se puede hacer pasar la voz de una persona como si fuera de otra en tiempo real. Es decir, puede clonarse una voz mientras se sostiene una conversación. 

Tal y como le sucedió en 2019 al director de una empresa de energía en Reino Unido. El ejecutivo recibió una llamada de quien pensó era un directivo de la misma compañía que le pidió transferir 243 mil dólares, se hizo la transferencia según lo indicado pero resultó ser un plan para estafar a la empresa mediante el uso de IA.  

De hecho, Terraza señala que hoy en día hay muchas herramientas para clonar voz sin necesidad de tener ningún tipo de habilidad técnica. “Tan fácil como entramos en Facebook. Y esa facilidad es el punto principal por el cual existe un riesgo tan grande de que se use de forma fraudulenta”, señala.

O tan sencillo como navegar por TikTok, donde creadores de contenido muestran una y otra vez cómo crear audios con Inteligencia artificial y hasta un paso a paso de cómo el creador de FlowGPT clona las voces de los artistas como Bad Bunny para crear álbumes completos con Inteligencia Artificial. 

Nosotros, por ejemplo, encontramos una app que invita a los usuarios a crear audios para imitar a sus personajes favoritos por tarifas desde 120 pesos (7 dólares) al mes. En algunos de esos modelos se puede solicitar que la voz reproduzca una emoción como felicidad o enojo, e incluso se cuenta con todo un catálogo que va desde caricaturas hasta youtubers.

Eleven Labs por su parte tiene una herramienta para generar audios de cualquier texto que se le indique, usando un enorme catálogo de voces que incluye una “dulce joven británica”, un “hombre autoritario de mediana edad” y una “mujer entusiasta con acento hindú”. Esta tecnología también puede clonar voces y traducirlas.

¿Cómo identificar deepfakes?

Paul Aguilar señala que el nivel de precisión, o de qué tan idénticos o similares son estos audios, va a depender del tipo de tecnología con el que se creó. Por lo que, en algunos casos, todavía se pueden detectar ciertas anomalías dentro de la voz. 

Por ejemplo, algunos tonos no corresponden a cómo la persona pronunciaría ciertas palabras, o la congruencia o el nivel de dicción que tiene el audio creado no suena exactamente igual a cómo lo haría la persona real. 

“Entonces se puede de alguna manera identificar o llegar a sospecharse que estos audios pudieran ser falsos, pero pues las herramientas están avanzando lo suficientemente rápido como para generar audios más reales o más cercanos a  la voz de de una persona”, y por lo tanto más difícil de identificar. 

Manel Terraza coincide, pues dice que los modelos más avanzados de síntesis de voz te permiten replicar respiraciones y pausas como las que tiene la persona que queremos imitar. Así que a medida que se van sofisticando las voces sintéticas esas diferencias son menos obvias.

“Al día de hoy prácticamente es imposible diferenciar  para una persona una voz sintética buena de una real, y por lo tanto el problema de la detección es cada vez más complejo y requiere también de tecnología”, señala Terraza. 

El especialista también explica que las tecnologías de detección lo que hacen es dar una probabilidad de que ese audio sea natural o creado con IA, pero su efectividad también depende de aspectos como el volumen, la duración, y qué tanto ruido ambiental hay. Por lo que siempre habrá posibilidad de que el resultado no sea correcto. 

Terraza señala con el perfeccionamiento de este tipo de tecnología de generación de contenido, la única forma de tener una aproximación de si algo es real o es clonado es utilizando herramientas de detección basadas en inteligencia artificial es decir, “luchar con las mismas armas”.  

¿Qué herramientas existen para identificar audios?

Existen proyectos como  AntiFake, que buscan prevenir la generación de deepfakes usando IA para modificar los audios – sin afectar como lo escuchamos los humanos– y que estos no puedan ser imitados por otras IA. 

También nos encontramos con una herramienta gratuita de ElevenLabs que precisamente busca tratar de ayudar a los usuarios a identificar los audios creados con IA, especialmente los que fueron generados con su misma tecnología. 

Como ya mencionamos, otra de las herramientas que hemos encontrado es AI Voice Detector, pero es de paga. Al igual que el nuevo desarrollo de Loccus.ia.

Probamos estas últimas tres con un audio generado a partir de un texto con la herramienta de ElevenLabs, una grabación de mi propia voz, y el audio  que se le atribuyó a Batres, aunque él lo negó. 

Tanto ElevenLabs como Loccus acertaron a determinar que la grabación hecha con mi propia voz era una voz humana. Pero AI Voice Detector se equivocó, y señaló que había 55% de probabilidad de que fuera hecha con IA. 

como-verificar-audios-falsos-2

En el caso del audio que creamos con IA, las tres herramientas detectaron que se trataba de un audio fabricado. 

como-verificar-audios-falsos-3

En el caso del audio viral que se atribuyó a Batres –del que no tenemos certeza de su origen– ElevenLabs determinó un 98% de probabilidades de que fuera hecho con IA; AI Voice Detector señaló un porcentaje de entre 26 y 70% creado con IA; mientras que Loccus determinó un porcentaje de entre 5% y 25% creado con voz natural. Es decir, más del75% de probabilidad de que fuera hecho con IA. 

Entonces las tres herramientas acertaron al detectar la voy creada con IA, solo dos acertaron a identificar un audio con voz natural, y dos de tres coinciden en que el audio viral de Batres fue hecho con IA. 

¿Consejos para no caer en desinformación con audios falsos?

Paul Aguilar recomienda identificar el contexto del audio para saber si corresponde a algo que la persona podría o no haber dicho. También recomienda identificar la calidad del sonido o la consistencia vocal.

La tercer recomendación de Aguilar es verificar la fuente de información para saber si quien está publicando o filtrando este audio es confiable, o alguien de quien se podría sospechar que tal vez está generando esta información o falsificándola.

Aguilar dice que hay otras técnicas más especializadas, pero poco accesibles. Pues se requieren de herramientas especializadas para ingeniería de audio en donde se hace un análisis espectral del sonido, por ejemplo. 

Ante este panorama, para Terraza hay que poner en duda todo lo que no te estén diciendo cara a cara, sobre todo el contenido especialmente incendiario. Los reenvíos masivos de cosas también te pueden indicar que un audio fue creado para desestabilizar o causar polémica. 

¿Existe una legislación para los deepfakes? 

César Avilés, investigador del Instituto Belisario Domínguez, nos explicó que “explícitamente no existe una disposición en la legislación electoral que atiende específicamente esta problemática” de la desinformación generada con IA. 

Sin embargo, el especialista señala que sí existe una regulación que sanciona las calumnias, el daño a la honorabilidad de las personas, el uso de la violencia política de género, entre otras conductas que podrían entrar en el mal aprovechamiento de esta herramienta tecnológica. 

Luego del audio que Martí Matres argumentó fue creado con Inteligencia Artificial, el diputado morenista Miguel Torruco propuso una reforma al código penal para sancionar a quien use IA para generar daño o perjuicio a la imagen o reputación pública de las personas.

Avilés señala que es positivo que a partir de ello se capte la atención de las y los tomadores de decisiones para poner manos en la materia, pero es necesario no perder de vista que  se trata de un fenómeno mucho más complejo que necesita una legislación transversal. 

“Apenas ahorita a nivel federal el Congreso está poniendo atención en el fenómeno como tal sobre qué implica la inteligencia artificial, una tecnología sumamente disruptiva que apenas estamos conociendo sus aprovechamientos, pero también cuáles son las distorsiones y las problemáticas que podrían afectar los derechos de las personas”, advierte Avilés. 

Lo que hacemos en Animal Político requiere de periodistas profesionales, trabajo en equipo, mantener diálogo con los lectores y algo muy importante: independencia
Tú puedes ayudarnos a seguir.
Sé parte del equipo
Suscríbete a Animal Político, recibe beneficios y apoya el periodismo libre.
Etiquetas:
Audio falso
elecciones
Herramientas verificación
Inteligencia Artificial
Iniciar sesión

Registrate
Suscribete para comentar...
Imagen BBC
Quién es Ryan Wesley Routh, el sospechoso del aparente intento de asesinato contra Donald Trump
5 minutos de lectura

Comienzan a conocerse los detalles del aparente intento de asesinato contra Donald Trump y el presunto atacante.

16 de septiembre, 2024
Por: BBC News Mundo
0

Después de lo que el FBI llamó un aparente intento de asesinato contra el expresidente Donald Trump el domingo, se están conociendo los detalles del incidente y del sospechoso.

El hecho ocurrió en el Club de Golf Trump International de West Palm Beach, Florida.

Trump estaba jugando una ronda de golf cuando un miembro de su equipo de seguridad vio “el cañón de un rifle que sobresalía de la cerca”.

El agente inmediatamente enfrentó al individuo, que huyó del lugar. No está claro si el sospechoso disparó algún tiro.

El sujeto, identificado localmente como Ryan Wesley Routh, de 58 años, fue detenido después de que el automóvil en el que huyó fuera inmovilizado a 45 minutos del campo de golf.

El FBI recuperó un arma de fuego estilo AK47 y una mira telescópica, dos mochilas y una cámara GoPro del arbusto en el que se escondía el presunto atacante.

Trump aseguró a sus partidarios que estaba “sano y salvo” y dijo “nada me frenará”, al tiempo que pedía apoyo financiero para su campaña presidencial.

Se espera que el presunto atacante, que permanece detenido, comparezca ante un juez más tarde el lunes.

Quién es Ryan Wesley Routh

Medios estadounidenses informan que Routh, un contratista de construcción de techos de Carolina del Norte, tiene antecedentes penales y se ha mostrado como un firme defensor de Ucrania, viajando varias veces a ese país y expresando su deseo de combatir y morir allí.

Ryan Wesley Routh
Reuters
Routh se ha mostrado como un firme defensor de Ucrania tras la invasión de Rusia en 2022.

En 2023 fue entrevistado por el diario New York Times para un artículo sobre estadounidenses que se ofrecen como voluntarios para ayudar en la guerra en Ucrania.

Routh, que no tenía experiencia militar, declaró que había viajado al país después de la invasión rusa de 2022 y quería reclutar soldados afganos que habían huido de los talibanes para luchar allí.

En las semanas posteriores a la invasión rusa de Ucrania en 2022, publicaciones de Routh en la red social X mostraron una inclinación por la retórica violenta.

“ESTOY DISPUESTO A VOLAR A CRACOVIA E IR A LA FRONTERA DE UCRANIA PARA OFRECERME COMO VOLUNTARIO, LUCHAR Y MORIR”, escribió.

En la aplicación de mensajería Signal, Routh escribió que “los civiles deben cambiar esta guerra y prevenir guerras futuras” como parte de la biografía de su perfil.

En WhatsApp, su biografía decía: “Cada uno de nosotros debe hacer su parte diariamente con los pasos más pequeños para ayudar a apoyar los derechos humanos, la libertad y la democracia; todos debemos ayudar a los chinos”.

Ryan Wesley Routh
Reuters
Se dice que Ryan Wesley Routh viajó varias veces a Ucrania.

Interés “poco sano” en Ucrania

La BBC encontró que el hombre fue fotografiado en mayo de 2022 en Kyiv en una manifestación exigiendo más asistencia humanitaria internacional para los civiles.

El mes siguiente, concedió una entrevista a Newsweek Romania, en la que describió sus motivaciones para apoyar a Ucrania.

“Muchos de los otros conflictos son grises, pero este conflicto es definitivamente blanco y negro, es el bien contra el mal”, declaró.

Routh le dijo al entrevistador que su objetivo inicial era “venir a luchar a Ucrania”, pero como “plan B”, recurrió a reclutar combatientes extranjeros para el esfuerzo bélico.

“Necesitamos miles y miles de personas luchando con los ucranianos”, señaló.

Durante la entrevista, Routh se emocionó al hablar de los jóvenes que arriesgan sus vidas para luchar.

“Esto es lo más importante que está sucediendo en el mundo hoy en día”.

Routh en una marcha por Ucrania
Reuters
Los perfiles en redes sociales de Routh indican que hizo un llamamiento a los combatientes extranjeros para que fueran a Ucrania a unirse al esfuerzo bélico.

Un voluntario que estuvo en Ucrania le contó a la BBC su experiencia con Ryan Wesley Routh tras encontrarse con él en varias ocasiones en Kyiv en junio de 2022.

Chris Lutz, un trabajador humanitario del proyecto de ayuda Phoenix, dijo: “Me encontré con Ryan varias veces… Ryan intentaba ponerse en contacto con todo el mundo que hablaba inglés. Era un tipo omnipresente”.

Según Lutz, a Routh se le conocía localmente como “un vocero del reclutamiento” y su principal objetivo era atraer a extranjeros para que lucharan en las fuerzas armadas de Ucrania.

Cuando se le preguntó sobre su personalidad, Lutz afirmó: “No lo llamaría loco. Simplemente estaba hiperenfocado. Estaba haciendo todo lo posible por ayudar a Ucrania. Pero estaba llegando a un nivel poco sano... Tampoco tenía derechos ni poderes para reclutar para la legión internacional de Ucrania. Era una complicación”.

Añadió que Routh le pidió ayuda para reclutar combatientes voluntarios extranjeros.

“Me pidió consejo sobre cómo hacer llegar afganos a Ucrania. Sin embargo, no tenía experiencia en el sistema legal ucraniano, así que rechacé la solicitud. Cuando dijo que podía traer a miles de combatientes afganos, comencé a sospechar”, afirmó Lutz.

Antecedentes criminales

Los primeros informes sugieren que Routh tenía antecedentes penales. Según fuentes de la CBS, Ryan Routh fue acusado y condenado por numerosos delitos graves en el condado de Guilford, en Carolina del Norte, entre 2002 y 2010.

Los delitos incluyen portar un arma oculta, resistirse al arresto por parte de un agente de policía, conducir con una licencia revocada, posesión de propiedad robada y darse a la fuga con un vehículo de motor.

Los registros públicos muestran que Ryan Wesley Routh enfrentó cargos criminales por dos incidentes separados en 2002 por posesión de una ametralladora automática, considerada en los documentos judiciales como un arma de destrucción masiva.

Se declaró culpable del primer cargo en abril de 2002, según consta en un expediente judicial, aunque no se hicieron públicos otros detalles.

Asimismo, según informó el periódico News & Record, un sujeto llamado Ryan Wesley Routh fue acusado en diciembre de ese año cuando, armado con una ametralladora, se atrincheró en un edificio de United Roofing en Greensboro durante tres horas.

Las autoridades afirman que el incidente comenzó después de que lo detuvieran por una infracción de tráfico. La policía finalmente lo arrestó sin incidentes.

En ese segundo caso, se declaró culpable de conducir sin licencia ni registro, resistirse a un funcionario público y portar un arma de fuego oculta, mientras que el cargo de arma de destrucción masiva fue retirado, según consta en los registros públicos.

Según informa el New York Times, en los últimos años Routh había estado viviendo en Hawái, donde un individuo con su nombre dirigía una pequeña empresa.

line
BBC

Haz clic aquí para leer más historias de BBC News Mundo.

También puedes seguirnos en YouTube, Instagram, TikTok, X, Facebook y en nuestro nuevo canal de WhatsApp, donde encontrarás noticias de última hora y nuestro mejor contenido.

Y recuerda que puedes recibir notificaciones en nuestra app. Descarga la última versión y actívalas.

Lo que hacemos en Animal Político requiere de periodistas profesionales, trabajo en equipo, mantener diálogo con los lectores y algo muy importante: independencia
Tú puedes ayudarnos a seguir.
Sé parte del equipo
Suscríbete a Animal Político, recibe beneficios y apoya el periodismo libre.
Etiquetas:
Audio falso
elecciones
Herramientas verificación
Inteligencia Artificial
Iniciar sesión

Registrate
Suscribete para comentar...