Categorías
data quality Noticias Proyectos

Sesgos de género en los sistemas de inteligencia artificial: la necesidad de prácticas de datos inclusivas

Introducción

El rápido avance de las tecnologías de la información en los últimos años ha contribuido al desarrollo de las capacidades de la inteligencia artificial (IA) y a la forma en que recopila, procesa y utiliza información para diversos fines en la sociedad. La IA es capaz de simplificar procesos como el análisis de imágenes médicas, la creación de plataformas de aprendizaje o la generación de asistentes virtuales que responden a clientes las 24 horas del día, los 7 días de la semana, con una eficacia relativamente alta.

Sin embargo, al seguir siendo propensa a errores derivados de su diseño o de la falta de información, pueden producirse fallos que generen desigualdades o sesgos, especialmente en ámbitos donde surgen problemas como la escasa participación de las mujeres en el desarrollo y la aplicación de herramientas de IA.

El problema no reside únicamente en los datos, sino también en el diseño y la implementación. La falta de diversidad en los equipos de desarrollo, unida a mecanismos de supervisión insuficientes, favorece la aparición de estereotipos de género y desigualdades en la asistencia proporcionada por la IA.

En este contexto, este artículo pretende analizar cómo los sesgos de género en la IA incrementan la desigualdad de datos, prestando especial atención a sus efectos en el continente europeo. Se examinarán los principales factores implicados en estos ciclos y sus impactos, con el fin de proponer posibles soluciones para lograr una mayor equidad en el uso de los datos.

«Puede afirmarse que la IA no es neutral, sino un reflejo de los contextos sociales en los que se crea»

Género, datos y sesgos algorítmicos

La desigualdad de género puede entenderse a través de diferentes conceptos. El primero, el sesgo algorítmico, describe cómo la IA puede producir resultados negativos para determinados grupos debido a patrones observados históricamente. Es en este contexto donde surge la brecha de datos de género, provocando que la tecnología responda de la misma manera en todos los casos.

A esto se añade un elemento clave: los sesgos no afectan únicamente a las mujeres en general, sino que también tienen en cuenta otros factores, como la raza o la clase social. Investigaciones como Buolamwini y Gebru (2018) muestran que las deficiencias de los sistemas son más pronunciadas en mujeres de otras razas, poniendo de manifiesto formas de discriminación interseccional.

La desigualdad de datos no solo implica una falta de representación, sino también un acceso desigual a los beneficios que estos ofrecen. Por ello, puede afirmarse que la IA no es neutral, sino un reflejo de los contextos sociales en los que se crea, razón por la cual es necesario incorporar una perspectiva de género que contribuya a evitar que la IA amplifique las desigualdades existentes.

«Los sesgos de género no son errores aleatorios, sino una manifestación de desigualdades sociales trasladadas al ámbito digital»

Origen de los sesgos de género en los sistemas de inteligencia artificial

Los sesgos en la IA tienen su origen en factores estructurales y técnicos que atraviesan todo el ciclo de vida de los datos. Las desigualdades históricas, como la infrarrepresentación de las mujeres, suelen contribuir a ello, llevando a los algoritmos a identificar y reproducir patrones discriminatorios (Criado Pérez, 2019). Esto se refleja posteriormente en la automatización de decisiones que, unida a la infradenuncia de determinadas formas de discriminación, genera un círculo vicioso de desigualdad.

Otro factor que contribuye al sesgo es la falta de diversidad entre quienes diseñan y desarrollan sistemas de IA. Los perfiles homogéneos influyen en qué datos se consideran relevantes y en cómo se interpretan los resultados. Sin una perspectiva de género, las herramientas tecnológicas tienden a ignorar determinados segmentos de la población, agravando las desigualdades existentes. Además, decisiones que deberían ser neutrales —como la priorización de ciertos criterios— pueden generar resultados adversos si no se evalúan de manera crítica.

Estos factores demuestran que los sesgos de género no son errores aleatorios, sino una manifestación de desigualdades sociales trasladadas al ámbito digital. Resolver estos problemas requiere mejorar la calidad y representatividad de los datos, pero también modificar los procesos desde una perspectiva de equidad como elemento central.

Impacto de los sesgos de género en la IA

Los sesgos de género en la IA generan efectos negativos en distintos ámbitos sociales, económicos y políticos, reduciendo las oportunidades y el bienestar de las mujeres. Por ejemplo, en el mercado laboral, los sistemas automatizados pueden reproducir patrones de desigualdad y favorecer perfiles masculinos, penalizando a las mujeres en los procesos de contratación (Comisión Europea, 2020). En el ámbito de la seguridad, los errores en los sistemas de reconocimiento facial afectan mucho más a las mujeres, con riesgos que van desde errores de identificación hasta vulneraciones de derechos.

En otros sectores como la salud y las finanzas también están presentes estos sesgos. La falta de datos sobre mujeres en estudios clínicos puede dar lugar a diagnósticos inexactos. Del mismo modo, algunos algoritmos utilizados para la evaluación crediticia pueden incorporar variables que conduzcan a decisiones discriminatorias, limitando el acceso de las mujeres a determinados servicios financieros.

Estos impactos no se distribuyen de manera uniforme: factores como la raza, el origen o la identidad de género pueden agravar la discriminación generada por la IA. Estos ejemplos muestran que los sesgos de género no son problemas abstractos, sino consecuencias reales que requieren soluciones técnicas, regulatorias y sociales.

Respuesta institucional en la UE y el papel de Data Equality

La respuesta de la Unión Europea frente a la discriminación ha aumentado en los últimos años mediante marcos regulatorios y estrategias orientadas a promover un uso ético de la IA. La Ley de Inteligencia Artificial (AI Act) adopta un enfoque que busca supervisar aquellos sistemas que puedan afectar a los derechos fundamentales, mientras que la Estrategia Europea para la Igualdad de Género 2020-2025 pretende integrar la perspectiva de género en el ámbito digital (Comisión Europea, 2020).

Además, iniciativas como Data Equality muestran cómo la colaboración entre instituciones públicas, sociedad civil y actores tecnológicos puede mejorar el análisis de los datos relacionados con la discriminación. Estos proyectos desarrollan herramientas destinadas a detectar y mitigar sesgos, además de emplear metodologías para cubrir vacíos de información. Su labor pone de relieve la importancia de combinar la innovación tecnológica con enfoques inclusivos y participativos.

A pesar de estos avances, persisten desafíos como la falta de datos desagregados por género, la limitada coordinación entre actores y la insuficiente incorporación de la perspectiva de género en determinados marcos regulatorios. Por ello, es necesario reforzar los mecanismos de supervisión y promover una mayor transparencia algorítmica para garantizar la participación de grupos diversos en el diseño y desarrollo tecnológico.

«Aunque existe un compromiso institucional en la Unión Europea para promover una IA más ética e inclusiva, siguen existiendo limitaciones que requieren acciones más decididas»

Conclusión

Los avances en inteligencia artificial ofrecen nuevas oportunidades, pero también generan desafíos relacionados con las desigualdades y los sesgos presentes en los datos y en los contextos sociales. Lamentablemente, estos sistemas aún no son neutrales y pueden amplificar problemas ya existentes, especialmente cuando existe una brecha de datos de género.

La combinación de datos incompletos, la falta de diversidad en el desarrollo tecnológico y las desigualdades preexistentes genera resultados discriminatorios en ámbitos como la salud, la seguridad o el empleo, afectando especialmente a las mujeres.

Aunque existe un compromiso institucional en la Unión Europea para promover una IA más ética e inclusiva, siguen existiendo limitaciones que requieren acciones más decididas. Avanzar hacia un entorno digital más justo implica mejorar la calidad de los datos y revisar los procesos de diseño, con el objetivo de impulsar el desarrollo tecnológico sin perpetuar las desigualdades en la inteligencia artificial.

Autor

Samuel David Vargas Méndez

Artículo publicado originalmente en: https://www.data-equality.eu/wp-content/uploads/2026/06/DATA-EQUALITY_Article_FUNDEA.pdf

Referencias

Buolamwini, J., y Gebru, T. (2018). Gender Shades: Intersectional Accuracy Disparities in Commercial Gender Classification. Proceedings of Machine Learning Research, 81, 77–91.

Criado Pérez, C. (2019). Invisible Women: Data Bias in a World Designed for Men. Abrams Press.

Comisión Europea. (2020). Una Unión de Igualdad: Estrategia para la Igualdad de Género 2020-2025. Comisión Europea.

Comisión Europea. (2020). Programa Europeo de Aprendizaje Mutuo en Igualdad de Género: Inteligencia Artificial y Sesgos de Género en los Procesos de Reclutamiento y Selección. Comisión Europea.

Categorías
data quality Noticias Proyectos

DATA EQUALITY: hacia una mayor igualdad y eficacia en la justicia y la seguridad

El pasado 29 de abril, y en el marco del proyecto DATA EQUALITYla Fundación Euroárabe de Altos Estudios llevó a cabo un ejercicio nacional en España orientado a analizar los retos prácticos en la implementación de los instrumentos europeos de cooperación judicial, con especial atención a la gestión y transmisión de datos. La actividad desarrollada en formato online consistió en una entrevista en profundidad con dos perfiles expertos (procedentes de la administración penitenciaria y de las fuerzas policiales), centrada en las consecuencias de la fragmentación de la información en contextos transnacionales.

El ejercicio permitió explorar cómo la falta de datos completos y contextualizados impacta en la actuación de las autoridades judiciales, policiales y penitenciarias, así como en la toma de decisiones y en la garantía de derechos fundamentales. Este ejercicio se enmarca, además, en la fase de pilotaje de la nueva metodología desarrollada en el proyecto, orientada a validar su aplicabilidad en contextos reales.

Desafíos y propuestas

Entre los principales hallazgos destacan la existencia de lagunas informativas críticas (como la ausencia de historiales penitenciarios completos, indicadores de riesgo o información sobre vulnerabilidades) así como obstáculos operativos derivados de traducciones deficientes, falta de equivalencias jurídicas y limitada coordinación institucional.

Asimismo, el ejercicio permitió recoger propuestas orientadas a mejorar los mecanismos de cooperación, incluyendo el refuerzo de la interoperabilidad de sistemas, el desarrollo de protocolos estandarizados de intercambio de información y la necesidad de formación específica para los profesionales implicados. Estos resultados aportan evidencia empírica relevante para el desarrollo de metodologías más inclusivas y eficaces en la gestión de datos en contextos de cooperación judicial europea.

A partir de esta actividad, la Euroárabe ha contribuido a identificar desafíos clave relacionados con la calidad, interoperabilidad y transmisión de datos entre Estados miembros, evidenciando una brecha significativa entre el diseño normativo de los instrumentos europeos y su aplicación práctica.

Categorías
data quality Noticias Proyectos

La Euroárabe impulsa prácticas de datos inclusivos en la capacitación de formadores de DATA EQUALITY

La Fundación Euroárabe de Altos Estudios ha participado en la iniciativa de capacitación de formadores y en la reunión de coordinación del consorcio del proyecto DATA Equality que tuvieron lugar los días 3 y 4 de diciembre en el Centro de Estudios de Seguridad (KEMEA) en Atenas, Grecia.

El objetivo de la capacitación de formadores fue asegurar que todos los miembros del consorcio comprendieran y adquirieran plenamente las habilidades necesarias para utilizar y probar la nueva metodología desarrollada por el proyecto. Esto los prepara para convertirse en un grupo de capacitadores expertos para la próxima fase de formación en cascada prevista para la primavera de 2026, y que será desarrollada por la Fundación Euroárabe.

Además, durante la reunión de coordinación del proyecto, el investigador y coordinador de proyectos de la Fundación Euroárabe, José Luis Salido Medina, y la investigadora, Paula Cano Cruz, compartieron las últimas novedades del Manual Europeo sobre Datos de Igualdad.

Sobre DATA Equality

La Fundación Euroárabe forma parte del consorcio del proyecto DATA Equality, una iniciativa que ha desarrollado una metodología para respaldar prácticas de datos inclusivas para la sociedad civil. El proyecto ha establecido como alta prioridad la garantía de prácticas de datos inclusivas en los ámbitos de trabajo de la seguridad y la justicia, dada su repercusión en la ciudadanía, con la Corte de Apelación de Venecia, Italia, como coordinadora, junto a socios como el Alto Consejo de la Fiscalía de Albania.

La contribución de la Fundación Euroárabe se basa en su amplia experiencia en cooperación, formación e investigación entre Estados árabes y europeos. Su función es promover estudios e investigación, plataformas y foros, así como el desarrollo de metodologías y la creación de capacidades.

Categorías
data quality Noticias Proyectos

El consorcio de DATA EQUALITY forjará una metodología común para la UE

El 9 de julio tendrá lugar en Rimini (Italia) el taller final del proyecto europeo DATA EQUALITY del que la Fundación Euroárabe forma parte y cuyo cometido es prevenir y combatir la discriminación interseccional de datos. Este taller reúne a fuerzas y cuerpos de seguridad, profesionales judiciales, organizaciones de la sociedad civil e investigadores/as para debatir las principales conclusiones de cuatro Grupos de Trabajo temáticos que se centraron en la recopilación y gestión de datos, el análisis de datos, el intercambio de datos y los sesgos y cuestiones éticas en el uso de datos para herramientas de inteligencia artificial (IA) y OSINT (Open Source Intelligence).

A lo largo del proyecto, participantes de toda Europa han explorado desafíos comunes y compartido buenas prácticas. A través de tres talleres transnacionales y cuatro grupos de trabajo específicos, han identificado elementos clave que deberían dar forma a una Metodología Europea Compartida sobre Datos de Igualdad. Esta nueva metodología tiene como objetivo promover el uso ético, seguro e inclusivo de los datos relacionados con la discriminación.

Sobre DATA EQUALITY

DATA EQUALITY es un proyecto financiado por la Comisión Europea a través del programa Ciudadanos, Igualdad, Derechos y Valores (CERV). El consorcio, compuesto por nueve miembros bajo la coordinación de la Corte di Apello di Venezia, incluye a la Fundación Euroárabe y el Ayuntamiento de Murcia, junto a otras entidades de diferentes países europeos. Iniciado en septiembre de 2024 y con fecha de finalización prevista para mayo de 2026, el proyecto tiene tres objetivos:

  1. Mejorar las capacidades de las autoridades públicas para investigar eficazmente, perseguir y sentenciar adecuadamente los incidentes de discriminación.
  2. Mejorar la cooperación y el intercambio de información entre las autoridades públicas (en particular, los tribunales de distrito y las administraciones municipales y regionales), así como entre las autoridades públicas y otros agentes, como las organizaciones de la sociedad civil y los representantes de las comunidades, para mejorar las respuestas a la discriminación, el racismo, la xenofobia y otras formas de intolerancia.
  3. Mejorar el sistema de registro de la discriminación y recopilación de datos, mejora del enfoque metodológico y mejora de la cooperación interinstitucional en la recopilación de datos.

Categorías
data quality Noticias Proyectos

Taller online sobre cómo mejorar la gestión de datos sobre discriminación

El pasado 9 de mayo, la Fundación Euroárabe de Altos Estudios celebró en formato online un taller dirigido a organizaciones de la sociedad civil, en el marco del proyecto europeo DATA EQUALITY, financiado por la Unión Europea. Este encuentro tuvo como objetivo analizar las prácticas actuales, desafíos y buenas prácticas en la recopilación, gestión, análisis e intercambio de datos relacionados con la discriminación y estuvo dirigido por las investigadoras de la Euroárabe: Rascha Albaba Acosta, Paula Cano Cruz y Jose Luis Salido Medina.

La sesión se desarrolló de manera interactiva y participativa, permitiendo a los asistentes compartir sus experiencias y perspectivas en torno a los temas tratados. El taller contó con la participación de representantes de diferentes países europeos, entre ellos Grecia, Italia, España y Albania, quienes compartieron sus conocimientos y buenas prácticas en torno a la gestión de datos vinculados a la discriminación.

Esta actividad forma parte de la tarea 3.1 del proyecto DATA EQUALITY, centrada en mejorar la comprensión sobre cómo distintos actores recopilan, gestionan, analizan y comparten datos en el contexto de la discriminación. El proyecto, con una duración de 24 meses desde septiembre de 2024, tiene como objetivo desarrollar una metodología europea compartida que permita a organizaciones de la sociedad civil, fuerzas del orden y agencias judiciales cooperar de manera más efectiva en la gestión de datos relativos a la discriminación.

Categorías
data quality Noticias Proyectos

Presentamos los resultados de la Evaluación de Necesidades del proyecto DATA EQUALITY    

El pasado 28 de marzo, se celebró -en formato online- el primer encuentro de representantes políticos (First Policy Event) del proyecto europeo DATA EQUALITY para prevenir y combatir la discriminación interseccional de datos. Esta actividad tuvo como objetivo la exposición de las ideas más relevantes de las actividades de la Evaluación de Necesidades, así como debatir sobre posibles soluciones basadas en la Hoja de Ruta Técnica elaborada sobre la evaluación de las soluciones de IA existentes para la justicia predictiva y para que las plataformas OSINT (Inteligencia de Fuentes Abiertas) preexistentes estén libres de sesgos para recopilar y elaborar datos.

En el encuentro participaron las investigadoras de la Fundación Euroárabe, Rascha Albaba Acosta, Jose Luis Salido Medina y Paula Cano Cruz. Esta última fue la encargada de presentar los resultados de la “Evaluación de Necesidades», tarea que lidera la Fundación y con la que se pretende ilustrar la hoja de ruta y las ideas innovadoras para la recopilación y elaboración de datos a través de instrumentos basados en IA, involucrando a partes interesadas como Autoridades Judiciales, LEAs (Agencias de Aplicación de la Ley), empresas tecnológicas, centros de investigación y representantes de OSCs (Organizaciones de la Sociedad Civil).

Los resultados de la Evaluación de Necesidades, recopilados mediante actividades de investigación documental, una encuesta y entrevistas semiestructuradas, han destacado la brecha tanto en el sector público como en el privado en la recopilación, gestión y análisis de datos sobre discriminación, incluyendo la falta de conocimiento en la cuestión general de la discriminación basada en datos.

Categorías
data quality Noticias Proyectos

Comienza DATA EQUALITY, un proyecto que luchará contra la discriminación basada en datos

En un evento online, el pasado 20 de septiembre, se presentó DATA EQUALITY, un proyecto europeo que busca unir fuerzas para combatir la discriminación basada en datos. La Fundación Euroárabe, junto al Tribunal de Apelación de Venecia (coordinador del proyecto), la Fundación Agenfor International, el Ayuntamiento de Murcia, Kentro Merimnas Oikogeneaias Kai Paidiou, Policía Helénica, Keshilli i Larte i Prokurorise, Associazione Nazionale Comuni Italiani Emilia Romagna y Kentro Meleton Asfaleias, desarrollará una metodología común que permitirá a diferentes actores cooperar en la identificación y prevención de este problema.

El proyecto se dirige a profesionales activos en la recopilación, el análisis, el uso y la difusión de datos pertenecientes a los dos macrosectores en los que se centra el proyecto: las autoridades públicas, en particular las fuerzas y cuerpos de seguridad locales, así como los órganos judiciales, y las organizaciones de la sociedad civil (OSC).

El proyecto formará en el uso de la nueva metodología, incluido su componente OSINT imparcial y conforme a la Regulación General de Protección de Datos de la UE, a funcionarios pertenecientes a las fuerzas y cuerpos de seguridad, a órganos judiciales, así como a miembros de las OSC. El alumnado procederá de los países participantes en el proyecto: Grecia, Italia, España y Albania.

Logo de Data Equality

El rol de la Euroárabe

La Fundación Euroárabe asumirá la tarea de evaluar exhaustivamente las metodologías vigentes empleadas en la recolección, administración, análisis y difusión de datos vinculados a la discriminación. El objetivo es identificar las principales deficiencias, omisiones y demandas existentes, así como las prácticas óptimas a incorporar en una nueva metodología. Asimismo, se explorarán las posibilidades que ofrecen las herramientas de inteligencia artificial y de fuentes abiertas (OSINT) para detectar sesgos inherentes a los datos.

Para ello será imprescindible la cooperación entre organismos públicos y privados, en particular entre las OSC y las autoridades locales y judiciales, que permitirá asimismo llevar a cabo encuestas y entrevistas a los profesionales pertenecientes a las fuerzas y cuerpos de seguridad y judiciales y a las organizaciones de la sociedad civil con el fin de conocer sus perspectivas, necesidades y retos en relación con la recopilación, la gestión, el análisis y el intercambio de datos.