Alcance

Fase del proyecto

Identifique en qué fase de su proyecto digital se encuentra (por ejemplo, en la fase de diseño o implementación) o en qué fase se encuentra en relación con el uso de soluciones y herramientas digitales (por ejemplo, uso previsto o uso actual de una solución digital). 

Alcance

Tecnologías y soluciones digitales utilizadas

Identifique en qué fase de su proyecto digital se encuentra (por ejemplo, en la fase de diseño o implementación) o en qué fase se encuentra en relación con el uso de soluciones y herramientas digitales (por ejemplo, uso previsto o uso actual de una solución digital). 

Alcance

Actividades digitales

Identifique en qué fase de su proyecto digital se encuentra (por ejemplo, en la fase de diseño o implementación) o en qué fase se encuentra en relación con el uso de soluciones y herramientas digitales (por ejemplo, uso previsto o uso actual de una solución digital). 

Actividades relacionadas con los datos

Gestión responsable de los datos

Esta sección se centra en los riesgos para los derechos humanos que pueden suponer la recopilación, el almacenamiento y el tratamiento de datos personales. 

Actividades relacionadas con los datos

Evaluación del impacto sobre la privacidad

Esta sección se centra en los riesgos para los derechos humanos que pueden suponer la recopilación, el almacenamiento y el tratamiento de datos personales. 

Actividades relacionadas con los datos

Datos sensibles

Esta sección se centra en los riesgos para los derechos humanos que pueden suponer la recopilación, el almacenamiento y el tratamiento de datos personales. 

Actividades relacionadas con los datos

Consentimiento informado

Esta sección se centra en los riesgos para los derechos humanos que pueden suponer la recopilación, el almacenamiento y el tratamiento de datos personales. 

Actividades relacionadas con los datos

Consentimiento informado para el tratamiento de datos

Esta sección se centra en los riesgos para los derechos humanos que pueden suponer la recopilación, el almacenamiento y el tratamiento de datos personales. 

Actividades relacionadas con los datos

Minimización de datos

Esta sección se centra en los riesgos para los derechos humanos que pueden suponer la recopilación, el almacenamiento y el tratamiento de datos personales. 

Actividades relacionadas con los datos

Datos anónimos

Esta sección se centra en los riesgos para los derechos humanos que pueden suponer la recopilación, el almacenamiento y el tratamiento de datos personales. 

Actividades relacionadas con los datos

Ciberseguridad

Esta sección se centra en los riesgos para los derechos humanos que pueden suponer la recopilación, el almacenamiento y el tratamiento de datos personales. 

Inteligencia artificial, toma de decisiones automatizada y aprendizaje automático

Aplicación de IA

La sección incluye preguntas sobre los riesgos para los derechos humanos relacionados con la inteligencia artificial, la toma de decisiones automatizada y el aprendizaje automático (IA para abreviar). 

Inteligencia artificial, toma de decisiones automatizada y aprendizaje automático

Sesgos en los conjuntos de datos

La sección incluye preguntas sobre los riesgos para los derechos humanos relacionados con la inteligencia artificial, la toma de decisiones automatizada y el aprendizaje automático (IA para abreviar). 

Inteligencia artificial, toma de decisiones automatizada y aprendizaje automático

Resultados sesgados

La sección incluye preguntas sobre los riesgos para los derechos humanos relacionados con la inteligencia artificial, la toma de decisiones automatizada y el aprendizaje automático (IA para abreviar). 

Inteligencia artificial, toma de decisiones automatizada y aprendizaje automático

Análisis de género

La sección incluye preguntas sobre los riesgos para los derechos humanos relacionados con la inteligencia artificial, la toma de decisiones automatizada y el aprendizaje automático (IA para abreviar). 

Inteligencia artificial, toma de decisiones automatizada y aprendizaje automático

Pruebas posteriores a la implantación

La sección incluye preguntas sobre los riesgos para los derechos humanos relacionados con la inteligencia artificial, la toma de decisiones automatizada y el aprendizaje automático (IA para abreviar). 

Análisis de riesgos

Perfil de riesgo del proyecto

Esta sección sirve para identificar el contexto de riesgo del proyecto o solución digital. 

Temas relacionados con el contexto

Legislación sobre protección de datos en el país del proyecto

Esta sección se centra en cuestiones relacionadas con el contexto y el entorno más amplios en los que se implementará o aplicará el proyecto o la solución digital.

Temas relacionados con el contexto

Lecciones aprendidas de proyectos similares

Esta sección se centra en cuestiones relacionadas con el contexto y el entorno más amplios en los que se implementará o aplicará el proyecto o la solución digital.

Temas relacionados con el contexto

Repercusiones de proyectos anteriores en los derechos humanos

Esta sección se centra en cuestiones relacionadas con el contexto y el entorno más amplios en los que se implementará o aplicará el proyecto o la solución digital.

Temas relacionados con el contexto

Repercusiones de proyectos anteriores en los derechos humanos

Esta sección se centra en cuestiones relacionadas con el contexto y el entorno más amplios en los que se implementará o aplicará el proyecto o la solución digital.

Consecuencias no deseadas

Consecuencias no deseadas

Grupos marginados

Grupos marginados

Plantéese si el proyecto o la solución afecta a grupos marginados, que son especialmente susceptibles a los riesgos relacionados con los derechos humanos. 

Grupos marginados

Titulares de derechos que pueden verse afectados o afectadas

Plantéese si el proyecto o la solución afecta a grupos marginados, que son especialmente susceptibles a los riesgos relacionados con los derechos humanos. 

Accesibilidad

Los usuarios y usuarias como particulares

Plantéese en qué medida es accesible el proyecto o la solución para sus usuarios y usuarias. 

Accesibilidad

Accesibilidad

Plantéese en qué medida es accesible el proyecto o la solución para sus usuarios y usuarias. 

Accesibilidad

Control

Plantéese en qué medida es accesible el proyecto o la solución para sus usuarios y usuarias. 

Implicación de partes interesadas

Implicación en relación con posibles repercusiones

Esta sección se centra en la implicación de las partes interesadas en relación con las posibles repercusiones del proyecto o solución y en si se tienen en cuenta sus preocupaciones. 

Implicación de partes interesadas

Implicación de los y las titulares de derechos

Esta sección se centra en la implicación de las partes interesadas en relación con las posibles repercusiones del proyecto o solución y en si se tienen en cuenta sus preocupaciones. 

Implicación de partes interesadas

Implicación de los y las titulares de derechos

Esta sección se centra en la implicación de las partes interesadas en relación con las posibles repercusiones del proyecto o solución y en si se tienen en cuenta sus preocupaciones. 

Implicación de partes interesadas

Implicación de los y las titulares de derechos

Esta sección se centra en la implicación de las partes interesadas en relación con las posibles repercusiones del proyecto o solución y en si se tienen en cuenta sus preocupaciones. 

Transparencia y presentación de informes

Transparencia y presentación de informes

Transparencia y presentación de informes

Presentación de informes

Acceso a vías de recurso

Recurso

Progreso

0%

¿En qué fase del proyecto se encuentra?

Seleccione “diseño” o “implementación” si se trata de un proyecto digital. Seleccione “uso previsto” o “uso actual” si se trata de una herramienta o solución digital. Seleccione una opción para ver comentarios sobre cómo puede utilizarse la herramienta para esa opción concreta.

Comentario - Diseño del proyecto

Si se utiliza durante la fase de diseño del proyecto, la herramienta puede servir de guía temprana sobre cómo evitar riesgos para los derechos humanos que, de otro modo, podrían materializarse en fases posteriores del proyecto. 

Comentario - Implementación del proyecto

Si actualmente está implementando un proyecto digital, puede utilizar la herramienta para fundamentar la toma de decisiones en torno a componentes específicos de este y garantizar un enfoque basado en los derechos humanos para tales decisiones. 

Comentario - Uso previsto de una herramienta digital

Si tiene previsto utilizar una solución digital en su proyecto, puede utilizar la herramienta como una guía temprana sobre cómo evitar los riesgos para los derechos humanos relacionados con esa solución.

Comentario - Uso actual de una herramienta digital 

Si actualmente está utilizando una solución digital en su proyecto, puede utilizar la herramienta para identificar posibles efectos sobre los derechos humanos y fundamentar la toma de decisiones sobre los próximos pasos para abordar dichos efectos. 

Ejemplo: Fase de diseño del proyecto 

Por ejemplo, si actualmente está diseñando un proyecto sobre participación pública digital en los procesos políticos de una región o un país, lo más probable es que ya se esté planteando los riesgos relacionados con la protección de datos y la privacidad. Dado que el proyecto implicaría claramente a personas específicas, será importante plantearse ya en esta fase inicial cuáles podrían ser los riesgos más amplios del proyecto relacionados con los derechos humanos, de modo que puedan tomarse medidas preventivas. 

Ejemplo: Fase de implementación del proyecto 

Si, en cambio, va a implementar un proyecto sobre participación pública digital en los procesos políticos de una región o un país, lo más probable es que ya haya tenido en cuenta los riesgos para la protección de datos y la privacidad durante la fase de diseño. Dado que el proyecto corre el riesgo de afectar a personas específicas (titulares de derechos) cuando utilizan las diversas plataformas digitales, paneles y otras soluciones digitales e interactúan con ellos, será importante aplicar al proyecto una perspectiva más amplia de derechos humanos con el fin de adoptar medidas preventivas para abordar posibles efectos futuros, o mitigar cualquier efecto negativo que pueda haberse producido ya. 

Ejemplo de caso: “Uso previsto de una herramienta digital” o “Uso actual de una herramienta digital”. 

Aunque un proyecto de energía renovable como tal no pueda considerarse un proyecto digital, es muy posible que se prevea utilizar soluciones digitales dentro de ese proyecto con fines específicos. Por ejemplo, podría exigirse que el desarrollador del proyecto utilizase una plataforma de comunicación digital o de redes sociales para relacionarse con las partes interesadas locales. En este caso, la opción correcta sería seleccionar “Uso previsto de una herramienta” o “Uso actual de una herramienta digital”, y utilizar Digital Rights Check para evaluar los riesgos para los derechos humanos que implicaría el uso de dicha herramienta. 

¿Cuáles de las siguientes tecnologías o soluciones digitales se utilizan en su proyecto?

Seleccione todas las opciones aplicables. Para más información sobre las opciones de respuesta, seleccione la opción correspondiente y consulte el comentario.

Comentario - Aplicación para teléfonos inteligentes

Las aplicaciones para teléfonos inteligentes pueden utilizarse para muchos fines diferentes, como programas de salud electrónica, plataformas de tecnología financiera, programas de seguimiento y localización de casos de Covid-19, soluciones de gobernanza electrónica y muchos más. Dependiendo de los fines de la aplicación, puede incluir importantes actividades de tratamiento de datos, así como modelos de inteligencia artificial aplicados a los datos. 

Comentario - Herramienta de aprendizaje electrónico

El aprendizaje electrónico y otras formas de aprendizaje virtual y digital, aunque no suelen ser herramientas de alto riesgo, incluirán a menudo alguna forma de recopilación de datos. Por ejemplo, la recopilación de información personal si una plataforma tiene restringido el acceso, o de otros datos vinculados a respuestas específicas, tiempos de respuesta, etc. Los datos de los y las participantes y los usuarios y usuarias también podrían analizarse y tratarse de diferentes maneras. 

Comentario - Dispositivo IoT (Internet de las Cosas)

Los dispositivos de Internet de las Cosas (IoT) facilitan la recopilación, el intercambio y el análisis de datos en tiempo real. Si hay varios dispositivos IoT conectados entre sí, pueden tener lugar complejos análisis de datos procedentes de diversas fuentes. Los dispositivos IoT pueden utilizarse para la supervisión remota, la predicción de las necesidades de mantenimiento, la gestión de recursos y mucho más. 

Comentario - Plataforma digital social o de comunicación (incluidas las redes sociales)

Las plataformas digitales de comunicación suelen implicar mucho tratamiento de datos de usuarios y usuarias. Los datos de los usuarios y usuarias de las plataformas pueden recopilarse, almacenarse y compartirse, y el uso de plataformas también puede facilitar el análisis a gran escala de los datos mediante la aplicación de modelos de inteligencia artificial, metodologías de aprendizaje automático, etc. Por último, una plataforma digital de comunicación también hace uso de los datos generados por los usuarios y usuarias. Ejemplos de uso de plataformas digitales de comunicación: uso de las redes sociales para la participación de la sociedad civil, plataformas de medicina electrónica, etc. 

Comentario - Servicios en la nube

El uso de los servicios en la nube incluirá naturalmente distintas formas de tratamiento de datos, como su recopilación y almacenamiento. Esto significa que debe prestarse especial atención a los reglamentos y normas de protección de datos en el contexto correspondiente. 

Comentario - Soluciones de inteligencia artificial

Las herramientas de inteligencia artificial incluyen desde sencillos sistemas automatizados de priorización hasta complejos análisis automatizados basados en datos sobre servicios públicos (por ejemplo, el uso del agua). Las propias herramientas requieren datos que luego pueden tratarse. Por tanto, puede haber problemas relacionados con la recopilación, el intercambio y el tratamiento de datos, así como cuestiones específicas relativas a la aplicación de la propia inteligencia artificial. 

Recursos de la GIZ: 

Más recursos: 

  • Digital Strategy del Ministerio Federal de Cooperación Económica y Desarrollo de Alemania. 

Tecnologías y soluciones digitales que utiliza la GIZ 

La GIZ implementa varios proyectos en los que las tecnologías de la información y la comunicación desempeñan un papel importante. Desde programas de aprendizaje electrónico en Honduras, Albania y Pakistán a una universidad indígena en red en Bolivia; desde el apoyo a la creación de empresas emergentes digitales y el desarrollo de aplicaciones en Nigeria, Kenya, Túnez y Yemen a servicios financieros digitales en Ghana, Jordania y Mozambique. 

Más información aquí. 

Proyecto Fair Forward de la GIZ 

La iniciativa FAIR Forward – Artificial Intelligence for All (Inteligencia artificial para todas las personas) pretende cerrar esta brecha y reducir la desigualdad social facilitando un acceso justo y abierto a los datos lingüísticos. El proyecto ya ha cosechado algunos éxitos iniciales en Rwanda, donde millones de personas pronto podrán utilizar un chatbot para recibir asesoramiento sobre el coronavirus en su idioma local. 

Más información aquí. 

¿Incluye el proyecto o la solución alguna de las siguientes actividades digitales?

Por “actividades digitales” entendemos las actividades subyacentes de la tecnología o la solución. Para más información sobre las opciones de respuesta, seleccione la opción correspondiente y consulte el comentario.

Comentario - Recopilación de datos

Esta opción implica que el componente del proyecto se desarrolle de algún modo para recopilar datos digitalmente. Por ejemplo, proyectos centrados en la participación pública en los que la información sobre las opiniones de las personas en relación con las prácticas gubernamentales está vinculada a información identificativa de cada una de ellas. 

 

La recopilación de datos puede causar una serie de efectos —el más evidente, afectar al derecho a la privacidad— si, por ejemplo, los y las titulares de los datos no han dado su consentimiento. Pero la “amenaza” de recopilar datos sin consentimiento también puede repercutir, por ejemplo, en la libertad de expresión, ya que las personas no quieren compartir su opinión si se están recopilando esos datos. 

Comentario - Almacenamiento de datos  

El almacenamiento de datos está naturalmente vinculado a la recopilación de datos, ya que hace referencia a lo que ocurre con los datos una vez recopilados. Esto incluye, por ejemplo, disponer de una base de datos de todos los alumnos y alumnas que han participado en un proyecto de aprendizaje electrónico. En algunos casos es posible que los datos recopilados simplemente no se almacenen, o que los almacene otra persona en otro lugar.  

El almacenamiento de datos en sí mismo puede afectar principalmente al derecho a la privacidad, sobre todo si existen riesgos de filtrado de datos. Incluso cuando existen razones legítimas para almacenar datos, hacerlo durante un periodo de tiempo excesivo puede plantear importantes problemas relacionados con el derecho a la privacidad. 

Comentario - Alteración, tratamiento o uso de los datos 

Esta actividad hace referencia a cómo se utilizan los datos. Aunque es posible que no se haga nada con los datos, salvo almacenarlos, a menudo la recopilación de datos digitales tiene el propósito de utilizarlos para, por ejemplo, analizar patrones, hacer predicciones, etc. Un ejemplo es el análisis de grandes cantidades de datos para prever brotes de enfermedades en un país. 

La alteración, el tratamiento o el uso de los datos pueden tener repercusiones de gran alcance sobre los derechos humanos en función del contexto. Pueden incluir el uso de análisis de macrodatos para hacer predicciones que acaban siendo discriminatorias. Otro ejemplo: Si los centros sanitarios utilizan los datos para mejorar la eficiencia, incluso los pequeños errores pueden tener graves repercusiones en el derecho a la salud. 

Comentario - Intercambio de datos 

Compartir datos significa simplemente compartir con otras personas o entidades los datos que se han recopilado. Esto ocurre a menudo en relación con la investigación, cuando los datos utilizados se ponen a disposición de otros investigadores e investigadoras. 

En primer lugar, el intercambio de datos puede afectar al derecho a la privacidad si la persona no ha dado su consentimiento informado. Además, los datos compartidos podrían utilizarse para fines como la publicidad selectiva, que puede tener, entre otras cosas, efectos discriminatorios. 

Comentario - Alojamiento y/o intercambio de contenido generado por los usuarios y usuarias 

Esto hace referencia a disponer de una plataforma a la que se brinda acceso a determinados usuarios y usuarias que además generan el contenido. Por ejemplo, plataformas de aprendizaje electrónico en las que los alumnos y alumnas elaboran determinados contenidos digitales, o plataformas digitales de comunicación para la participación electrónica. 

El mero hecho de alojar o compartir contenidos también puede tener repercusiones. Si una plataforma aloja contenido que incita al odio, puede tener repercusiones negativas en el derecho a la salud mental. Si el contenido es discriminatorio, puede tener, naturalmente, repercusiones sobre el derecho a la no discriminación. 

Comentario - Inteligencia artificial (IA) / aprendizaje automático 

Aunque no existe una definición común de IA, en general se refiere a la ciencia y la ingeniería para crear máquinas inteligentes, especialmente programas informáticos inteligentes. Incluye sistemas de reconocimiento facial y de voz, vehículos autónomos y algoritmos de aprendizaje automático que pueden ayudar a predecir patrones meteorológicos, sequías o incluso actividades delictivas. 

La inteligencia artificial tiene muchos usos y, por tanto, puede tener una gran variedad de repercusiones. Por ejemplo: efectos sobre el derecho a un juicio justo cuando la IA se utiliza en los sistemas judiciales; efectos sobre el derecho a la igualdad y a la libertad si los resultados directos están sesgados en detrimento de los grupos marginados; efectos sobre el derecho a la salud si las plataformas de medicina electrónica basadas en la IA toman decisiones poco acertadas; efectos sobre el derecho a un nivel de vida adecuado si las aprobaciones rápidas de las prestaciones por desempleo basadas en la IA limitan el acceso de determinados grupos a dichas prestaciones; efectos sobre el derecho a la privacidad y sobre muchos otros derechos en relación con las aplicaciones de seguimiento y localización de casos de COVID-19. 

Comentario - No lo sé

Es importante que el personal del proyecto comprenda la tecnología subyacente de los componentes digitales para poder evaluar sus repercusiones. La herramienta le permitirá continuar, pero sin preguntas específicas relacionadas con las actividades digitales de su herramienta digital. 

En un proyecto sobre mejora de procesos agrícolas en un país del sur de Asia, una agencia de cooperación para el desarrollo colabora con pequeños agricultores y agricultoras locales para mejorar su productividad y, al mismo tiempo, utilizar menos recursos hídricos. Debido a la pandemia de Covid-19, parte de la comunicación con los y las líderes comunitarios ha tenido lugar a través de plataformas digitales. La plataforma digital utilizada es de libre acceso para cualquier persona que desee participar en estas sesiones, a las que se unen muchos y muchas líderes comunitarios.

El uso de la plataforma digital incluyó las siguientes actividades digitales:

  • Recogida de datos: los usuarios deben rellenar su nombre; se recogen datos sobre cuándo un usuario se conecta, se desconecta y qué escribe en la plataforma.
  • Intercambio de datos: los datos se comparten entre todos los socios del proyecto, con el fin de realizar un seguimiento del éxito del compromiso.
  • Almacenamiento de datos: los datos anteriores se almacenan para hacer un seguimiento del éxito a lo largo del tiempo.
  • Alojar y compartir contenidos generados por los usuarios: los comentarios de los participantes son contenidos generados por los usuarios.

Las siguientes actividades no son relevantes:

  • Alteración, tratamiento o uso de datos:  los datos solo se han registrado y compartido, pero no se produce ningún otro tratamiento de los datos en la plataforma
  • Inteligencia artificial (IA) / aprendizaje automático: no es relevante en este caso, ya que no se produjo ningún tratamiento automatizado de los datos.
Caution - No

Dado que su respuesta indica que no se está llevando a cabo ninguna de las actividades anteriores, la orientación termina aquí. Este puede ser el caso, por ejemplo, si el componente de su proyecto trata sobre tecnologías digitales, pero no utiliza dichas tecnologías (por ejemplo, educación presencial sobre alfabetización digital). No dude en marcar la casilla “otros” en caso de que desee continuar con los demás pasos de la herramienta.

¿Se ha evaluado el proyecto o la solución mediante la lista de verificación “Pautas sobre datos responsables” de la GIZ?

En los recursos encontrará un enlace a la lista de verificación. Si no tiene clara la respuesta, consulte a colegas que hayan participado en un proceso de este tipo.

Recomendación - Sí

Revise y actualice la evaluación inicial según sea necesario y preste especial atención a la participación de las partes interesadas y los grupos marginados. 

Recomendación - No

Revise lo antes posible la lista de verificación “Responsible Data Guidelines (Pautas sobre datos responsables). 

Recomendación - No lo sé

Consulte a las contrapartes del proyecto y a otras personas implicadas en el componente digital y compruebe si se ha utilizado la lista de verificación “Responsible Data Guidelines (Pautas sobre datos responsables). 

Otros recursos: 

¿Se ha realizado una evaluación del impacto sobre la privacidad (por ejemplo, una evaluación del impacto sobre la protección de datos) en relación con el proyecto o la solución digital?

Dependiendo del proyecto o la solución digital específica, es posible que ya se le haya exigido realizar algún tipo de evaluación de impacto, por ejemplo, sobre la privacidad o sobre la protección de datos. Consulte los recursos para más información.

Comentario - Sí

Revise las evaluaciones realizadas anteriormente y determine si los riesgos más amplios en materia de derechos humanos están suficientemente cubiertos. Actualice la evaluación según proceda. 

Derechos humanos y principios potencialmente afectados - Todavía no. Está en proceso.

Derecho a la privacidad

Recomendación - Todavía no. Está en proceso.

Revise la evaluación prevista del impacto sobre la privacidad y estudie cómo integrar mejor los derechos humanos en la evaluación. 

Derechos humanos y principios potencialmente afectados - No

Derecho a la privacidad

Recomendación - No

Determine si necesita llevar a cabo algún tipo de evaluación del impacto sobre la privacidad, y realícela lo antes posible en caso necesario. No olvide considerar los derechos humanos de forma más amplia en la evaluación. 

Comentario - No

Aunque el proyecto o componente específico no requiera dichas evaluaciones, puede ser útil utilizar su estructura para fundamentar las evaluaciones del posible impacto sobre los derechos humanos. 

Recomendación - No lo sé

Consulte a las contrapartes del proyecto y a otras personas implicadas en el proyecto o solución digital y compruebe si se ha realizado algún tipo de evaluación del impacto sobre la privacidad. 

¿Recopila, almacena o trata el proyecto o la solución datos personales sensibles?

Se consideran datos sensibles (según el Reglamento General de Protección de Datos de la UE):
- los datos personales que revelen el origen étnico o racial, las opiniones políticas, las convicciones religiosas o filosóficas o la afiliación sindical

- los datos genéticos, los datos biométricos dirigidos a identificar de manera unívoca a una persona física,
los datos relativos a la salud
o los datos relativos a la vida sexual o a la orientación sexual de una persona física.

Nota importante: Es posible aplicar algoritmos para generar datos personales sensibles a partir de datos no sensibles

Derechos humanos y principios potencialmente afectados - Sí

Derecho a la privacidad

Recomendación - Sí

El tratamiento de datos sensibles hace muy necesario que el proyecto tenga un enfoque basado en los derechos humanos, tomando como punto de partida a las personas potencialmente afectadas. Garantice la existencia de dicho proceso y revise los análisis de impacto existentes. 

Comentario - No

El hecho de que no se recopilen, almacenen o traten de otro modo datos sensibles implica un menor riesgo en términos de posibles efectos sobre los derechos humanos. 

Comentario - No lo sé

Consulte los recursos adicionales (especialmente las pautas sobre datos responsables (Responsible Data Guidelines) y los documentos relacionados), coordínese con las contrapartes del proyecto y otras personas implicadas en el tratamiento de datos y pregunte si se tratan datos sensibles. 

Una empresa que está desarrollando una innovadora plataforma de salud electrónica que incluye servicios de telemedicina ha recibido financiamiento de un banco de financiamiento para el desarrollo, ya que se prevé que la plataforma facilite el acceso a servicios sanitarios a poblaciones anteriormente desatendidas. Por supuesto, la plataforma de salud electrónica recopila, almacena y comparte datos personales relacionados con la salud, es decir, datos sensibles. Por ello, será necesario prestar una mayor atención a los riesgos para los derechos humanos; por ejemplo, riesgos para el derecho a la salud y a la no discriminación.

¿Se ha informado a todas las personas sobre el tratamiento de sus datos y han dado su consentimiento informado al tratamiento?

El tratamiento de datos hace referencia a las operaciones realizadas con datos personales, como su recopilación, almacenamiento, uso o difusión (según el Reglamento General de Protección de Datos de la UE).

A menudo, las personas no comprenden plenamente ni sienten que controlan cuáles de sus datos se están tratando y cómo. Una simple casilla digital para dar el consentimiento puede no ser suficiente para considerar que una persona ha recibido la información pertinente y ha comprendido plenamente su consentimiento.

Por ello, en relación con las aplicaciones de riesgo medio y alto de los componentes digitales, es especialmente importante garantizar que los usuarios y usuarias comprendan perfectamente qué datos se recopilan.

Comentario - Sí

Aunque obtener el consentimiento es esencial, también es importante evaluar si se ha proporcionado de forma libre e informada. En algunos casos no está claro que el consentimiento se haya dado libremente, sobre todo si el no darlo no es una opción realista en la práctica. 

Derechos humanos y principios potencialmente afectados - No

Derecho a la privacidad, derecho a la libertad de información y derecho a la participación.

Recomendación - No

Revise sus esfuerzos para informar a las personas de cómo se utilizan sus datos, así como los procesos establecidos para que den su consentimiento. Entable contacto con las personas para evaluar cómo pueden mejorarse estos esfuerzos. Si no se puede garantizar la obtención del consentimiento informado, plantéese la posibilidad de interrumpir el tratamiento de los datos personales. 

Si no recopila los datos por su cuenta, analice con las contrapartes encargadas cómo lo hacen y cómo dan su consentimiento las personas.

Recomendación - No lo sé

Póngase en contacto con las contrapartes del proyecto y otras personas implicadas en el tratamiento de datos, y pregunte si se ha obtenido el consentimiento informado para la recopilación y el tratamiento de los datos, y cómo se ha obtenido (si procede). 

Recursos de la GIZ: 

Otros recursos: 

  • Comisión Europea, “¿Qué es el tratamiento de datos? 
  • Para más información sobre qué es el consentimiento informado, véase UK Information Commissioner’s Office, “What is valid consent?” (¿Cuándo se considera válido el consentimiento?) 
  • Derecho a la privacidad: 
  • Derecho a la libertad de información: 
  • Derecho a la participación: 

Dado que muchas organizaciones han empezado a utilizar en mayor medida las herramientas de colaboración digital durante la pandemia de Covid-19, el tratamiento automático de datos también está aumentando. Una organización que utilice plataformas de aprendizaje electrónico con una frecuencia creciente debe ser consciente de los datos que se recopilan cuando los usuarios y usuarias utilizan dichas plataformas, y debe asegurarse de haberles informado adecuadamente del tipo de información que se va a tratar, así como obtener el consentimiento informado de esas personas. 

 

Reflexione sobre cómo se ha obtenido el consentimiento informado.

Plantéese cómo se ha obtenido el consentimiento informado de las personas y anótelo. Reflexionar sobre cómo ha ocurrido exactamente puede ser un ejercicio importante.

Para más información sobre qué es el consentimiento informado, véase UK Information Commissioner’s Office, “What is valid consent?” (¿Cuándo se considera válido el consentimiento?) 

¿Sigue el proyecto o la solución estrictamente los principios de minimización de datos?

La minimización de datos significa que los datos recopilados, utilizados o almacenados deben ser adecuados, pertinentes y limitados a lo necesario para los fines previstos. Cuando los datos no se minimizan, aumentan los riesgos para el derecho a la privacidad.

Comentario - Sí

Los riesgos relacionados con el derecho a la privacidad se han reducido considerablemente. Evalúe continuamente si la cantidad y el tipo de datos recopilados y utilizados deben modificarse, y si los datos pueden suprimirse. 

Derechos humanos y principios potencialmente afectados - No

Derecho a la privacidad

Recomendación - No

Revise sus prácticas de tratamiento de datos y asegúrese de que trata la menor cantidad posible, ya que esto puede disminuir significativamente los riesgos para los derechos humanos. La minimización de los datos puede incluir, por ejemplo, la recopilación en un primer momento de cantidades limitadas de datos, así como la elaboración de cláusulas de vencimiento que garanticen que los datos solo se conservan durante un periodo de tiempo limitado, tras el cual se eliminan. 

Comentario - No lo sé

Póngase en contacto con las contrapartes del proyecto y otras personas implicadas en el proyecto o la solución para evaluar si se han minimizado o deberían minimizarse los datos. 

Tenga en cuenta los siguientes ejemplos: 

  1. Un servicio público de empleo “inteligente” envía automáticamente a los y las demandantes de empleo un cuestionario general que incluye preguntas específicas relacionadas con la salud que solo son pertinentes para determinados trabajos manuales. Sería innecesario y excesivo obtener esa información de una persona que solicita un trabajo de oficina. Así pues, los datos deben reducirse al mínimo desde el principio o eliminarse posteriormente cuando se compruebe que no son pertinentes. 
  2. Se crea un aula en línea para la enseñanza a distancia durante el cierre de los colegios por la pandemia de Covid-19. Se envía a los padres y a las madres un cuestionario general que incluye preguntas sobre la salud para evaluar las cuestiones de accesibilidad. Sin embargo, solo algunas discapacidades son relevantes, y obtener más información sanitaria sería excesivo. Así pues, la recopilación, el uso y el almacenamiento de datos deben reducirse al mínimo. 

¿Cree que existe el riesgo de que los datos personales anónimos puedan dejar de ser anónimos?

Por ejemplo, se puede aplicar la inteligencia artificial para volver a identificar a las personas vinculadas a determinados datos anónimos mediante la combinación de diversas fuentes y puntos de datos. Por lo tanto, los riesgos para el derecho a la privacidad pueden persistir incluso después de anonimizar los datos.

Derechos humanos y principios potencialmente afectados - Sí

Derecho a la privacidad

Recomendación - Sí

En primer lugar, plantéese si los datos recopilados y utilizados podrían minimizarse aún más. Revise este punto a medida que avance el proyecto, ya que podría identificar datos innecesarios en fases posteriores. En segundo lugar, revise cómo podrían compartirse o se comparten con terceros los datos recopilados, ya que esto puede aumentar el riesgo de desanonimización. 

Comentario - No

A menudo existe cierto riesgo de que esto ocurra (véanse otras referencias), por lo que es importante revisar continuamente este riesgo si se considera que los datos se están compartiendo con terceros. 

Derechos humanos y principios potencialmente afectados - No lo sé

Derecho a la privacidad

Comentario - No lo sé

Consulte otros recursos para obtener más información sobre la reidentificación de datos personales. 

Recursos de la GIZ: 

Más información: 

“Las aplicaciones de IA pueden utilizarse para identificar y, por tanto, rastrear a las personas en distintos dispositivos, en sus hogares, en el trabajo y en espacios públicos. Por ejemplo, aunque los datos personales se (pseudo)anonimizan de forma rutinaria dentro de los conjuntos de datos, la IA puede emplearse para desanonimizarlos. El reconocimiento facial es otro medio por el que se puede rastrear e identificar a las personas, lo que tiene el potencial de transformar las expectativas de anonimato en el espacio público”. 

¿Ha tenido en cuenta la seguridad de los datos que reco¿Ha tenido en cuenta la seguridad de los datos que recopila y comparte en su proyecto o a través de las medidas que aplica?

La ciberseguridad puede definirse como “la preservación —mediante las políticas, la tecnología y la educación— de la disponibilidad, confidencialidad e integridad de la información y su infraestructura subyacente, con el fin de mejorar la seguridad de las personas tanto en línea como fuera de línea”.
- Grupo de trabajo “Internet Free and Secure” (Internet libre y segura) de la Freedom Online Coalition (FOC) (Coalición para la Libertad de Expresión en Internet).

Comentario - Sí

Ha tenido en cuenta un aspecto importante de la protección del derecho a la privacidad y otros derechos humanos que podrían ponerse en peligro si se filtraran datos personales (y potencialmente sensibles). 

Recomendación - No

Evalúe la seguridad de los datos que recopila y comparte en su proyecto o a través de su solución. Garantice que existen suficientes salvaguardias para mantener la seguridad de los datos. 

Más información: 

¿Qué tipo de aplicación de IA se utiliza en el proyecto?

Seleccione una opción para ver una descripción más detallada de la aplicación. Elija la opción “Otra” si su proyecto o solución utiliza un tipo de aplicación de IA distinta de las enumeradas.

Comentario - Reconocimiento de imágenes y objetos

Se refiere al análisis de grandes conjuntos de datos para automatizar el reconocimiento, la clasificación y el contexto asociados a una imagen o un objeto. Incluye el reconocimiento facial, pero también el análisis de grandes cantidades de fotos tomadas por satélite para predecir patrones migratorios. 

 

La IA de identificación de imágenes y objetos corre el riesgo de afectar negativamente al derecho a la privacidad. Hay que prestar especial atención a los conjuntos de datos utilizados, cómo se recopilan los datos y cómo funciona la tecnología de reconocimiento. La tecnología de reconocimiento facial, por ejemplo, puede tener importantes consecuencias sobre el derecho a la privacidad, la libertad de reunión, el derecho a un juicio justo y muchos otros derechos. 

Comentario - Evaluación del riesgo

Las evaluaciones de riesgos consisten en el análisis de grandes conjuntos de datos para identificar patrones y recomendar líneas de actuación y, en algunos casos, tomar medidas específicas. Puede tratarse, por ejemplo, de la calificación automatizada del riesgo crediticio por parte de los bancos, los riesgos de reincidencia en un sistema judicial o los riesgos de inundaciones o fenómenos meteorológicos extremos. 

 

Las evaluaciones de riesgos mediante IA suelen hacer predicciones de riesgos basadas en datos históricos. Si las evaluaciones de riesgo anteriores han sido sesgadas, las predicciones realizadas por la aplicación de IA también lo serán, a menos que se corrija el sesgo. Preste especial atención si la información obtenida con las evaluaciones de riesgos se utiliza para tomar decisiones que puedan tener repercusiones significativas en los y las titulares de derechos; los resultados directos podrían tener graves repercusiones en los derechos humanos. Por ejemplo, si las evaluaciones de riesgo se utilizan en los sistemas judiciales, o en relación con el reparto de prestaciones públicas. 

Comentario - Optimización de procesos y automatización de flujos de trabajo

La optimización de procesos y la automatización de flujos de trabajo hacen referencia al análisis de grandes conjuntos de datos para identificar anomalías, agrupar patrones y predecir resultados directos o formas de optimizar y automatizar flujos de trabajo específicos. Esto puede incluir, por ejemplo, “chatbots inteligentes” que ayuden a evaluar qué usuarios y usuarias necesitan una asistencia más amplia y cuáles pueden redirigirse a páginas de un sitio web dedicadas a las preguntas frecuentes, y a identificar a los y las pacientes sanitarios a los que debe darse prioridad para determinados procedimientos. 

 

La optimización de procesos y la automatización de flujos de trabajo rara vez plantean riesgos significativos para los derechos humanos si afectan a tareas estrictamente administrativas. No obstante, el mismo proceso también puede utilizarse para acelerar las decisiones relativas a la asistencia social, la expedición de permisos u otras formas de concesión de licencias. Todo esto puede repercutir negativamente en los derechos humanos. También pueden surgir problemas relacionados con el derecho al acceso a la información y a vías de recurso, ya que el modelo de IA subyacente puede ser difícil de explicar y comprender, lo que dificulta la apelación. 

Comentario - Análisis de texto y voz

El análisis de texto y voz se refiere al análisis de conjuntos de datos para reconocer, procesar y etiquetar texto y voz, y hacer recomendaciones basadas en el etiquetado. Por ejemplo, tecnologías de conversión de texto a voz que ayuden a los y las invidentes a acceder a contenidos escritos. 

 

Entre los posibles efectos sobre los derechos humanos relacionados con el análisis de texto y voz se incluyen los “chatbots” de los servicios públicos que no son capaces de ayudar a las personas de grupos minoritarios que no hablan la lengua principal de un país. Los asistentes lingüísticos que se perciben como humanos también pueden causar malestar a las personas que utilizan el servicio. 

Comentario - Generación de contenidos 

La generación de contenidos se refiere al análisis de grandes conjuntos de datos para categorizar, procesar, seleccionar, personalizar y ofrecer contenidos específicos para contextos concretos. Por ejemplo, noticias o previsiones meteorológicas generadas automáticamente a partir de la revisión por IA de otras fuentes de noticias o datos meteorológicos, así como la generación y difusión de contenidos basados en declaraciones oficiales del Gobierno y respuestas de “chatbots inteligentes”. 

 

El impacto de la generación de contenidos depende del contenido generado. Entre los ejemplos de efectos sobre los derechos humanos cabe citar que los contenidos generados alimenten otros sistemas de IA, haciendo que todo el proceso sea muy opaco y difícil de entender, lo que podría dar lugar a decisiones que nadie puede explicar. 

Para más información sobre las distintas soluciones de IA y sus posibles repercusiones en los derechos humanos, véase: 

¿Existen procesos para evaluar los sesgos en los conjuntos de datos?

El sesgo es una forma de injusticia contra una persona (o grupo). Aunque hay diferentes tipos de sesgo en las aplicaciones de IA, esta pregunta se refiere al sesgo en los conjuntos de datos, como los datos que no son representativos o los que reflejan prejuicios (por ejemplo, una herramienta de contratación de IA alimentada con decisiones anteriores de contratación que favorecieron a los hombres en detrimento de las mujeres). Puede ser necesario tratar la cuestión del sesgo con el desarrollador de la aplicación de IA para poder responder a la pregunta. Consulte los recursos para obtener más información.

Comentario - Sí

Eso significa que ha tenido en cuenta un aspecto significativo de las posibles repercusiones negativas sobre los derechos humanos. No obstante, las herramientas de IA son tan buenas o tan malas como los datos en los que se basan y, por tanto, es importante evaluar continuamente si los datos son válidos, fiables, actuales, suficientes, etc. Los datos existentes que están sesgados o son discriminatorios van a producir resultados sesgados o discriminatorios. 

Derechos humanos y principios potencialmente afectados - No

Derecho a la igualdad y a la no discriminación 

Recomendación - No

Planifique y realice una evaluación de los posibles sesgos en los conjuntos de datos y elabore un plan para mitigarlos. 

Derechos humanos y principios potencialmente afectados - No lo sé

Derecho a la igualdad y a la no discriminación 

Recomendación - No lo sé

Consulte a las contrapartes del proyecto y a los terceros implicados en el desarrollo del modelo de IA. Si no les consta ningún proceso para evaluar los sesgos en los conjuntos de datos, es probable que no se hayan evaluado. 

Recursos:  

  • Derecho a la no discriminación: 
  • Derecho a la igualdad: 

Más información: 

Estudio de caso 

  1. Iniciativa FAIR Forward – Artificial Intelligence for All (Inteligencia artificial para todas las personas)
    • La IA de procesamiento del lenguaje natural puede utilizarse para generar y compartir información de forma específica e individualizada. El mismo tipo de sistema puede utilizarse también para llegar a las personas que no saben leer. Para entrenar estos sistemas es necesario disponer de una gran cantidad de datos de entrenamiento. Por diversas razones, la disponibilidad de los datos lingüísticos necesarios de los países africanos y asiáticos ha sido muy limitada. La iniciativa FAIR Forward – Artificial Intelligence for All se desarrolló con el fin de cerrar esta brecha relativa a los datos lingüísticos y proporcionar un acceso justo y abierto a ellos. Gracias a este trabajo y a la creciente disponibilidad de datos lingüísticos nacionales, la iniciativa Fair Forward ha desarrollado un chatbot en Rwanda que permitirá a millones de personas recibir asesoramiento sobre el coronavirus en su lengua local. 
    • Fuente: GIZ, “Artificial Intelligence For All” (Inteligencia artificial para todos y todas) 
  1. Uso de la IA en las actividades de respuesta al coronavirus
    • “El análisis de datos con ayuda de la IA está teniendo un papel predominante en el seguimiento de las infecciones, las muertes y las tasas de recuperación en todo el mundo. Las instituciones han conseguido dibujar las tendencias de la Covid-19 en distintos países y condiciones. En los países en desarrollo también se necesitan tecnologías de recopilación, seguimiento y análisis de datos para seguir la evolución del virus y adaptar la respuesta y las medidas de mitigación. 
    • Se está utilizando la inteligencia artificial para detectar el coronavirus mediante el análisis de tomografías computarizadas. Los departamentos de diagnóstico por imagen de los centros sanitarios se están viendo desbordados por la mayor carga de trabajo provocada por el virus. Esta solución mejora la velocidad de diagnóstico de las TAC. Algunas grandes empresas tecnológicas afirman haber creado sistemas de análisis basados en inteligencia artificial capaces de leer los resultados en cuestión de segundos, con una precisión del 96 % en el diagnóstico del virus. En los países africanos, donde escasean los médicos y médicas especialistas y los laboratorios, esta tecnología puede suponer un antes y un después. 
    • Los Gobiernos de todo el mundo utilizan tecnologías móviles y de rastreo inteligente para seguir los movimientos de las personas y evitar una mayor expansión del virus. La UE debe apoyar a los Gobiernos africanos para que utilicen la gran cantidad de datos de teléfonos móviles disponibles (respetando siempre la privacidad). Existen soluciones tecnológicas que permiten rastrear el movimiento de las personas teniendo en cuenta los riesgos del uso indebido de los datos personales”. 
    • Fuente: Caja de herramientas de digitalización, “Practice: Big Data and AI” (Práctica: macrodatos e IA) 

¿Se han evaluado los sesgos en los productos y resultados (inesperados) relacionados con la aplicación de la IA?

Esta cuestión se refiere al sesgo en los productos y resultados de la aplicación de la IA, en contraposición a los datos subyacentes. Plantéese si alguien la ha evaluado de forma específica.

Comentario - Sí

Eso significa que ha tenido en cuenta un aspecto significativo de los posibles efectos negativos sobre los derechos humanos de los sistemas automatizados de toma de decisiones. 

Derechos humanos y principios potencialmente afectados - No

Derecho a la igualdad y a la no discriminación 

Recomendación - No

Planifique y lleve a cabo una evaluación de los sesgos en los productos y resultados relacionados con la IA. 

Derechos humanos y principios potencialmente afectados - No lo sé

Derecho a la igualdad y a la no discriminación 

Recomendación - No lo sé

Consulte a las contrapartes del proyecto y a los terceros implicados en el desarrollo del modelo de IA. Si no les consta ningún proceso para evaluar los sesgos en los resultados, es probable que no se hayan evaluado. 

Recursos  

  • Derecho a la igualdad: 

Más información: 

Por ejemplo, un modelo de IA para analizar las expresiones faciales de las personas y detectar su estado emocional podría disponer de datos sin ningún tipo de sesgo de los que aprender y, por tanto, no sería discriminatorio en su desarrollo y diseño. Sin embargo, dado que la ciencia que subyace a la tecnología de reconocimiento emocional es cuestionable, existe el riesgo de que los resultados de este modelo de IA sean discriminatorios. Este es especialmente el caso cuando no se tiene en cuenta el contexto y, por tanto, puede haber repercusiones discriminatorias sobre, por ejemplo, personas de grupos étnicos minoritarios o con discapacidad. 

Fuente: Vox Recode, “Artificial intelligence will help determine if you get your next job”, 12 de diciembre de 2019 (La inteligencia artificial ayudará a decidir si consigues tu próximo trabajo) 

¿Se ha realizado un análisis específico basado en el género del desarrollo y el uso de la solución de IA?

¿Se ha evaluado, por ejemplo, si las predicciones realizadas por el modelo de IA son discriminatorias en función del género? Consulte los recursos para más información.

Comentario - Sí

Eso significa que ha tenido en cuenta un aspecto significativo de los posibles efectos negativos sobre los derechos humanos de los sistemas de IA. 

Derechos humanos y principios potencialmente afectados - No

Derecho a la igualdad y a la no discriminación y derechos de la mujer 

Recomendación - No

Planifique y realice un análisis basado en el género de la implementación del proyecto o solución. 

Derechos humanos y principios potencialmente afectados - No lo sé

Derecho a la igualdad y a la no discriminación y derechos de la mujer 

Recomendación - No lo sé

Consulte a las contrapartes del proyecto y a los terceros implicados en el desarrollo de la IA. Si no les consta ningún análisis específico del sistema basado en el género, es probable que no se haya realizado. 

Más información: 

  • Derecho a la igualdad y a la no discriminación: 
  • Derechos de la mujer: 
  • Sobre la brecha digital de género: 
  • Sobre el sesgo de género en la IA: 

Muchos asistentes personales virtuales (como Siri, Alexa y Cortana) y chatbots tienen nombre de mujer y vienen con voz femenina por defecto. Las organizaciones que desarrollan o utilizan estos asistentes virtuales con “características femeninas” pueden reforzar los estereotipos, así como la realidad social de que la mayoría del personal de asistencia o secretaría, tanto en el sector público como en el privado, son mujeres. Por lo tanto, siempre será importante evaluar cualquier efecto negativo inesperado relacionado con el género. 

Para más información, véase Surya Deva, “Addressing the gender bias in artificial intelligence and automation”, OpenGlobalRights, 10 de abril de 2020. 

¿Se ha comprobado si el sistema de IA presenta riesgos para los derechos humanos tras su implantación, o existe un plan claro para ello?

Plantéese si, por ejemplo, un chatbot se ha evaluado tras su implantación para saber si algún grupo concreto corre riesgo de discriminación.

Comentario - Sí

El seguimiento, la evaluación y el reentrenamiento constantes son prácticas esenciales para detectar y corregir los sesgos arraigados y los resultados dispares. 

Derechos humanos y principios potencialmente afectados - No

Derecho a la igualdad y a la no discriminación 

Recomendación - No

Desarrolle un plan y pruebe el sistema de IA para comprobar su precisión y los riesgos para los derechos humanos tras su implantación. 

Comentario - No

Incluso los algoritmos mejor intencionados pueden tener consecuencias no deseadas. El seguimiento, la evaluación y el reentrenamiento constantes son prácticas esenciales para detectar y corregir los sesgos arraigados y los resultados dispares. 

Derechos humanos y principios potencialmente afectados - No lo sé

Derecho a la igualdad y a la no discriminación 

Recomendación - No lo sé

Consulte a las contrapartes del proyecto y a los terceros implicados en el desarrollo y/o implantación del sistema de IA. Si no les constan dichos procesos, es probable que el sistema no se haya sometido a pruebas para detectar resultados sesgados o discriminatorios tras su uso e implantación. 

Más información: 

  • Derecho a la igualdad: 

Algunos sistemas sanitarios recurren a herramientas de predicción del riesgo basadas en IA para identificar y seleccionar a los y las pacientes de alto riesgo que necesitan una atención especial. Los y las pacientes seleccionados para estos programas reciben recursos adicionales, así como una mayor atención por parte de proveedores capacitados, para garantizar que la atención esté bien coordinada. Muchos sistemas sanitarios cuentan con las herramientas de IA como elementos clave de sus esfuerzos de gestión de la salud de la población, ya que se consideran eficaces para mejorar los resultados y la satisfacción al tiempo que reducen los costes, un objetivo al que se suele tender cuando se trata de mejorar la asistencia sanitaria en las economías emergentes. Estos programas de atención a pacientes de alto riesgo son muy caros de gestionar, por lo que los sistemas sanitarios suelen recurrir a herramientas de IA para identificar a las personas que más se pueden beneficiar de dichos programas. 

Al hacerlo, las herramientas de IA deben hacer algunas deducciones basadas en los datos disponibles. Una forma de identificar las mayores necesidades asistenciales es tomar como referencia el dinero invertido anteriormente por los y las pacientes en su asistencia. Sin embargo, eso puede resultar discriminatorio para las poblaciones marginadas que han tenido menos capacidad para asignar recursos importantes a su atención, aunque lo hubiesen necesitado también. 

En este caso, el problema ya debería haberse detectado antes de la implantación. Pero, si no fuera así, un análisis posterior podría revelar las diferencias en función de la raza a la hora de inscribir a los y las pacientes en el programa e identificar la razón por la que esto ocurre. 

Para más información, véase: Obermeyer et al., “Dissecting racial bias in an algorithm used to manage the health of populations”, Science 366, 447–453 (2019) (Diseccionando el sesgo racial en un algoritmo utilizado para gestionar la salud de las poblaciones). 

¿El proyecto o componente está relacionado con un sector de alto riesgo o con la prestación de servicios públicos?

Los sectores de alto riesgo son aquellos en los que las decisiones adoptadas pueden tener graves consecuencias para las personas:
- Vigilancia e identificación a distancia
- Aplicación de la ley
- Migración, asilo y control de fronteras
- Poder judicial
- Educación y formación profesional
- Servicios de empleo y gestión de trabajadores y trabajadoras
- Infraestructura digital crítica
- Prestación de servicios privados esenciales; entre ellos, la banca y los seguros.
- Prestación de servicios públicos esenciales; entre ellos, la seguridad social y otras prestaciones y servicios públicos.

Comentario - Sí

Si el proyecto o la solución se centra en un sector de alto riesgo o está relacionado con la prestación de servicios públicos esenciales, se debe tener especial cuidado a la hora de aplicar o desarrollar cualquier herramienta o servicio digital, ya que los riesgos potenciales para los derechos humanos pueden ser graves.

Comentario - No

Si no se trata de un sector de alto riesgo ni de la prestación de servicios públicos esenciales, el proyecto puede considerarse en principio de riesgo bajo o medio, a menos que la aplicación específica sea muy delicada.

Comentario - No lo sé

Consulte a las contrapartes del proyecto y la sección de recursos y plantéese si el sector en cuestión es de alto riesgo o no. En caso de duda, tal vez debería responder afirmativamente a la pregunta, ya que no se puede descartar que los riesgos sean elevados.

Para más información sobre los sectores de alto riesgo, véase: Comisión Europea, Propuesta de Reglamento sobre IA, Anexo III 

Un proyecto centrado en el desarrollo de una plataforma de registro electrónico para trabajadores y trabajadoras migrantes podría considerarse de alto riesgo, ya que una implementación defectuosa del proyecto podría repercutir tanto en el empleo como en la situación de los y las migrantes.

¿Se utiliza o aplica la solución digital de forma que puedan producirse importantes efectos no deseados sobre los derechos humanos?

Pueden existir riesgos significativos para los derechos humanos, por ejemplo, cuando los usuarios o usuarias o las personas afectadas son grupos marginados y la solución se utiliza de forma que puede afectar directamente a esas personas. Véase el estudio de caso como ejemplo.

Comentario - Sí

Las solicitudes de alto riesgo deben recibir suficientes recursos para llevar a cabo una evaluación en profundidad de los riesgos relacionados con los derechos humanos y las posibles medidas preventivas o de mitigación. Para ello se debe contar en gran medida con las partes interesadas y los y las titulares de derechos.

Comentario - No

El proyecto o solución puede considerarse de riesgo bajo-medio, a menos que tenga relación con un sector de alto riesgo en el contexto de un país de alto riesgo. En esos casos, sigue siendo necesario extremar la precaución.

Comentario - No lo sé

Consulte a las contrapartes del proyecto y a otras personas con más información sobre la implementación del proyecto o el uso de la solución. En caso de duda, plantéese responder afirmativamente a la pregunta, ya que es posible que se trate de una situación de alto riesgo.

Véase este vídeo del proyecto Human Rights, Big Data and Technology (Derechos humanos, macrodatos y tecnología) que ilustra cómo la inteligencia artificial puede afectar a los derechos humanos. 

Los servicios de empleo y las prestaciones por desempleo pueden considerarse parte de un sector sensible que merece especial atención. Sin embargo, si un proyecto incluye simplemente modelos de IA que se utilizan para mejorar la gestión de las citas con los y las solicitantes de prestaciones por desempleo, es poco probable que implique riesgos significativos para los derechos humanos. Si, por el contrario, se utilizaran modelos de IA para predecir las probabilidades de éxito de los y las solicitantes de empleo y determinar así la asignación de recursos a “los mejores candidatos y candidatas”, podrían existir riesgos importantes para los derechos humanos. Por ejemplo, puede haber repercusiones sobre el derecho a la igualdad y a la no discriminación, y también sobre el derecho al trabajo y a un nivel de vida adecuado si el sistema discrimina a algunas personas que, por tanto, tienen menos probabilidades de conseguir trabajo en el futuro. 

¿Se desarrolla el proyecto o la solución en el contexto de un país de alto riesgo en lo que respecta a los derechos humanos? 

Es probable que un contexto de alto riesgo aumente el riesgo de efectos negativos sobre los derechos humanos. Plantéese si se da alguno de los siguientes puntos en el país en cuestión:
- falta de legislación sobre protección de datos, o legislación débil en este sentido
- deficiente Estado de derecho y sistema judicial ineficiente
- país afectado por conflictos
- persecución significativa de defensores y defensoras de los derechos humanos
- limitaciones significativas de los derechos civiles y políticos
- situación de seguridad inestable
- alta probabilidad o historial de censura, intimidación, violencia, etc. contra grupos marginados
- la ciberdelincuencia es frecuente
- el acoso en línea es habitual.

Comentario - Sí

Habrá que prestar mayor atención a todos los tipos de tratamiento de datos y aplicaciones de IA, sobre todo en relación con los grupos marginados en el contexto específico. Revise y actualice el análisis del contexto nacional realizado durante la fase de diseño del proyecto teniendo en cuenta el producto o servicio digital específico.

Comentario - No lo sé

Consulte el análisis del contexto nacional desarrollado durante la fase de diseño del proyecto (si está disponible), y plantéese si el contexto nacional es de alto riesgo o no. En caso de duda, plantéese responder afirmativamente a la pregunta, ya que el país puede ser de alto riesgo.

Comentario - No

Un contexto nacional de riesgo bajo o medio suele significar que el Estado de derecho es más sólido y que existen múltiples salvaguardas a nivel nacional.

Recursos de la GIZ: 

Recursos para el contexto nacional: 

Perfil de riesgo del proyecto
Recomendación

Based on your answers to the risk questions, the digital component seems to involve low-to-medium risk. While that is positive, there is still need to be vigilant in case the context or application changes. Further sections around stakeholder engagement remain highly relevant even as potential risks are low.

Perfil de riesgo del proyecto
Recomendación

Based on your answers on the risk questions, there is no high-risk application involved. However, both the country context and sector are high-risk which means that you will need to pay extra attention to the application and use of the digital component. Slight changes to the initial plan may pose significant risks.

Perfil de riesgo del proyecto
Recomendación

Heightened attention will need to be paid to all kinds of data processing, AI applications etc., particularly with regard to groups that are vulnerable in the specific context. Any country context analysis performed during the project design phase should be updated with the specific digital product or service in mind.

¿Dispone el país donde se está aplicando el proyecto o la solución de una legislación adecuada en materia de protección de datos?

Plantéese si 1) existe legislación sobre protección de datos y 2) si parece adecuada desde el punto de vista de los derechos humanos. Para evaluar la adecuación de la legislación sobre protección de datos, puede consultar la sección de recursos y utilizar el Reglamento General de Protección de Datos (RGPD) de la UE como referencia. Con el RGPD, la Comisión Europea también ha reconocido que determinados países ofrecen una protección adecuada.

Comentario - Sí

Esto reduce los niveles de riesgo del tratamiento de datos. No obstante, si se carece de seguimiento y vigilancia del cumplimiento, puede no significar mucho en la práctica, y seguirá siendo importante tener en cuenta las repercusiones sobre los derechos humanos de las actividades relacionadas con los datos. 

Derechos humanos y principios potencialmente afectados - No

Derecho a la privacidad 

Recomendación - No

El proyecto o solución debe limitar las actividades de tratamiento de datos, sobre todo en lo que respecta a las contrapartes que puedan no disponer de normas y procesos adecuados de recopilación y tratamiento de datos. Preste especial atención al consentimiento para la recopilación y a la minimización de datos, ya que es probable que no haya una supervisión externa eficaz de las actividades. 

Derechos humanos y principios potencialmente afectados - No lo sé

Derecho a la privacidad 

Recomendación - No lo sé

Identifique la situación actual de la legislación sobre protección de datos en el país del proyecto o solución. 

Prácticamente todos los proyectos y soluciones digitales dependen de la posibilidad de recopilar, almacenar, tratar, modificar y compartir datos, y muchos también pueden aumentar las posibilidades de hacer precisamente eso. Si un proyecto innovador sobre el uso de dispositivos de Internet de las Cosas (IoT) para el bien público se lleva a cabo en un país sin protección de datos, poco se puede esperar en términos de acceso a la reparación si los datos no se gestionan correctamente. Por lo tanto, es importante comprender el contexto normativo en el que se implementará o aplicará el proyecto o la solución digital, a fin de identificar posibles riesgos. Si existe una normativa de protección de datos y su aplicación es eficaz, disminuye el riesgo de las actividades relacionadas con los datos. 

¿Conoce proyectos o soluciones digitales similares que se hayan implementado o utilizado anteriormente en el mismo lugar?

Esto podría ocurrir, por ejemplo, si en el mismo país —en su propia institución o en otra diferente— se ha realizado un esfuerzo similar en materia de aprendizaje electrónico.

Comentario - Sí

Tenga en cuenta los resultados de proyectos anteriores y colabore con los y las responsables del proyecto y con las partes interesadas externas, según proceda. Esto puede ayudarle a evaluar qué medidas preventivas y de mitigación deben adoptarse en su proyecto durante su implementación. 

Comentario - No, no ha habido anteriormente proyectos o soluciones similares en el mismo lugar. 

Aunque no disponga de referencias anteriores, podrá ayudar a otras personas que se encuentren en su situación en el futuro. Procure ser lo más transparente posible para ayudar a otras personas que implementen proyectos similares o utilicen herramientas parecidas más adelante. 

Recomendación - No sé si ha habido anteriormente proyectos o soluciones similares en el mismo lugar.

Averigüe si se han llevado a cabo proyectos similares con anterioridad. Esa información será de utilidad para identificar las posibles repercusiones sobre los derechos humanos, así como las medidas más adecuadas para evitarlas, prevenirlas y abordarlas. 

Por ejemplo, en caso de que anteriormente se haya implementado un proyecto para desarrollar bases de datos lingüísticos de lenguas escritas en el mismo país o región y esté planificando un proyecto similar, podría ser muy útil contactar con los y las responsables del proyecto anterior. Así podría obtener información sobre los problemas que se encontraron, cómo evitaron las dificultades detectadas y cómo se gestionaron los riesgos para los derechos humanos en general. 

¿Sabe si los proyectos anteriores tuvieron repercusiones negativas sobre los derechos humanos?

Para responder a esta pregunta, puede que tenga que revisar los informes publicados por el proyecto en cuestión, así como informes de los medios de comunicación o de la sociedad civil.

Comentario - Sí, los proyectos anteriores tuvieron repercusiones negativas sobre los derechos humanos.

Plantéese qué tipo de repercusiones en la siguiente pregunta. 

Recomendación - No, los proyectos anteriores no tuvieron repercusiones negativas sobre los derechos humanos.

Evalúe proyectos y soluciones anteriores similares y tenga en cuenta las salvaguardas que se establecieron para evitar efectos negativos sobre los derechos humanos. Plantéese si pueden aplicarse a su proyecto también. 

Comentario - No sé si los proyectos anteriores tuvieron repercusiones negativas sobre los derechos humanos.

Póngase en contacto con las personas implicadas en el proyecto u otras que tengan conocimiento de él, y pregúnteles si pueden compartir más información sobre posibles repercusiones (y su prevención o mitigación).

¿Qué efectos negativos sobre los derechos humanos tuvieron los proyectos anteriores?

Si dispone de la información, indique qué derechos humanos se han visto afectados anteriormente.

Derechos humanos y principios potencialmente afectados - Derecho a la privacidad

Derecho a la privacidad 

Recomendación - Derecho a la privacidad
Derechos humanos y principios potencialmente afectados - Derecho a la no discriminación

Derecho a la no discriminación 

Derechos humanos y principios potencialmente afectados - Libertad de expresión

Libertad de expresión 

Recomendación - Libertad de expresión
Recomendación - No lo sé

Póngase en contacto con las personas implicadas en el desarrollo o el uso de la solución digital en cuestión o con otras que tengan conocimiento de ella, y pregúnteles si pueden compartir más información sobre posibles repercusiones (y su prevención o mitigación). Tome medidas preventivas para garantizar que la solución digital no tenga las mismas repercusiones negativas que los proyectos anteriores. 

Recomendación

Tome medidas preventivas para garantizar que el proyecto o componente digital no tenga las mismas repercusiones negativas que los proyectos anteriores.

En el caso de los proyectos de identificación digital, por ejemplo, tanto la sociedad civil como los medios de comunicación han escrito mucho sobre las posibles repercusiones en los derechos humanos. En el caso del proyecto nacional de identificación digital de Uganda, un estudio ha señalado que el proyecto incluía una “recopilación excesiva de datos personales” con fines de registro. Según el estudio, la situación de los derechos humanos era aún más preocupante, ya que las salvaguardas de protección de datos eran inadecuadas. El proyecto también ha cambiado de ámbito durante su implementación y, al parecer, los datos se han compartido con autoridades encargadas del cumplimiento de la ley y empresas de telecomunicaciones, lo que supone nuevos riesgos para el derecho a la privacidad y otros derechos humanos. Por último, determinadas minorías sociales, como las personas mayores y económicamente desfavorecidas, así como las mujeres, han sido objeto de prácticas excluyentes. 

Para más información, véase: Research ICT Africa, Digital Identity in Uganda”, 2021 (Identidad digital en Uganda) 

¿Se han evaluado las consecuencias negativas imprevistas del proyecto o la solución?

En este análisis se deben incluir las consecuencias no deseadas relacionadas con el objetivo del proyecto o el uso de la solución digital, pero también el uso imprevisto de la solución digital.

Comentario - Sí

Examine las posibles consecuencias negativas imprevistas con las partes interesadas externas, incluidos los y las titulares de derechos potencialmente afectados, con el fin de verificar la evaluación e identificar medidas preventivas. Plantéese también el riesgo de que esas situaciones se materialicen. 

Recomendación - No

Evalúe las posibles consecuencias negativas imprevistas con el equipo del proyecto y otras contrapartes implicadas. 

Por ejemplo, en un taller en el que se debatan las posibles situaciones futuras y las peores hipótesis. Comente sus conclusiones con las partes interesadas externas, incluidos los y las titulares de derechos potencialmente afectados, y deles la oportunidad de plantear cualquier otra preocupación sobre posibles consecuencias negativas del proyecto. 

Recursos de la GIZ: 

Más información: 

  • Véase un ejemplo de evaluación de posibles repercusiones futuras en la evaluación del reconocimiento facial de Google de Business for Social Responsibility y el concepto de “Human Rights by Design” (diseño con perspectiva de derechos humanos) 

Si un proyecto incluye el desarrollo de un sistema de registro electrónico para trabajadores y trabajadoras migrantes, es probable que se consulte a quienes lo utilicen sobre sus experiencias para poder abordar rápidamente cualquier posible repercusión negativa sobre los derechos humanos. Sin embargo, también existe el riesgo de que sean los trabajadores y trabajadoras migrantes que decidan no utilizar el sistema los que se vean perjudicados, y una consecuencia no deseada del proyecto sería que no pudiesen encontrar empleo. 

¿Pertenecen los usuarios y usuarias previstos y/u otros titulares de derechos a grupos marginados?

Debe prestarse especial atención a las personas / grupos marginados, ya que corren un mayor riesgo de no poder prever, afrontar y resistir los riesgos y efectos adversos relacionados con el proyecto, o de no poder recuperarse de ellos. Las personas marginadas dependerán del contexto, pero pueden ser niños y niñas, mujeres, minorías religiosas o étnicas, personas con discapacidades y migrantes. Siempre debe hacer una evaluación específica de las vulnerabilidades basada en las realidades locales. A modo de ejemplo, aunque un proyecto de digitalización para mejorar únicamente los procesos administrativos internos de un organismo gubernamental no parezca implicar a los grupos marginados, podría hacerlo si los procesos afectan a la toma de decisiones importantes para las personas (por ejemplo, decisiones sobre los pagos de la seguridad social).

Comentario - Sí

Dado que los grupos marginados pueden verse afectados por el proyecto, hay que poner especial cuidado en garantizar que no se vean perjudicados. Asegúrese de que se consulta a dichos grupos y/o a los y las representantes legítimos y de que se cuenta con ellos para poder evaluar cualquier repercusión negativa que les afecte especialmente. 

Comentario - No

En la mayoría de las situaciones, esto significaría que los riesgos para los derechos humanos son de poca importancia. No obstante, asegúrese de tener en cuenta los posibles riesgos de discriminación relacionados con grupos marginados que no formen parte de los usuarios y usuarias previstos. Asegúrese de tener en cuenta específicamente si las personas que deciden de forma deliberada no participar en el proyecto pertenecen a grupos marginados. 

Recomendación - No lo sé

Consulte los recursos adicionales y plantéese si el proyecto puede afectar a grupos vulnerables o marginados. Tenga en cuenta tanto a los usuarios y usuarias directos como a las personas que puedan verse afectadas de otro modo. 

Comentario - No lo sé

Plantéese si los grupos marginados pueden verse afectados. 

Por ejemplo: un país introduce un sistema de registro electrónico para los y las solicitantes de empleo. Sin embargo, los trabajadores y trabajadoras migrantes tienden a no utilizarlo. Aunque los trabajadores y trabajadoras migrantes no sean usuarios y usuarias del servicio, sigue habiendo posibilidades de que les afecte la aparición de un nuevo sistema de registro electrónico. 

¿A cuál de los siguientes grupos puede afectar la solución?

La lista no es exhaustiva y, dependiendo del contexto, puede haber otros grupos marginados que se hayan identificado como potencialmente afectados por el proyecto. En ese caso, seleccione la opción “Otro” e indique el grupo marginado que ha identificado.

Recomendación - Infancia y juventud

Involucre a los y las titulares de derechos, y tenga en cuenta específicamente a “la infancia y la juventud”: 

  • Lleve a cabo consultas con niños y niñas en coordinación con expertos y expertas en participación infantil para facilitar la participación respetando las normas éticas
  • Diseñe el proceso de manera que sea accesible, inclusivo y significativo para los niños y niñas
  • Garantice la participación voluntaria en un entorno favorable para la infancia
  • Garantice la participación
  • Lleve a cabo consultas tanto con los niños y niñas y jóvenes como sobre ellos y ellas
  • No obvie la participación de padres, madres y personas a cargo, profesores y profesoras, líderes de las comunidades, organizaciones juveniles y otros, y tenga en cuenta el interés superior de los y las menores 
Recomendación - Mujeres y niñas

Involucre a los y las titulares de derechos, y tenga en cuenta específicamente a “las mujeres y niñas”:

  • Consulte a las mujeres por separado de forma sensible al género
  • Incluya a mujeres en el equipo de evaluación del impacto sobre los derechos humanos
  • Incluya en el equipo de evaluación del impacto sobre los derechos humanos a personas con conocimientos sobre los derechos y experiencias particulares de las mujeres y las niñas, especialmente en relación con proyectos, productos y servicios digitales
  • Excluya a los miembros masculinos del equipo de determinadas entrevistas
  • Proporcione un espacio seguro y cómodo para las entrevistas
  • Incluya a subgrupos especialmente marginados (por ejemplo, defensoras de los derechos humanos, chicas jóvenes, etc.)
  • Utilice enfoques proactivos e innovadores para reducir las barreras que impiden la participación de las mujeres (por ejemplo, proporcionar servicios de guardería durante las reuniones) 
Recomendación - Pueblos indígenas

Involucre a los y las titulares de derechos, y tenga en cuenta específicamente a los “pueblos indígenas”:

  • Incluya en el equipo de evaluación del impacto sobre los derechos humanos a personas con conocimientos sobre los derechos de los pueblos indígenas y el contexto local
  • Respete las instituciones representativas indígenas, asegúrese de comprender las características culturales y organizativas de los pueblos indígenas y la jerarquía de autoridades para entablar contacto con las personas adecuadas en el orden y la forma adecuados
  • Utilice un lenguaje apropiado para el contexto
  • En el caso de los proyectos dirigidos a pueblos indígenas o que tengan algún otro tipo de impacto sobre ellos, garantice que las metodologías paraindígenas y perindígenas sean la base de su desarrollo, siempre que sea posible
  • Existe el riesgo de imponer procesos o estructuras no deseados a los receptores y receptoras indígenas 
Recomendación - Trabajadores y trabajadoras y sindicatos

Involucre a los y las titulares de derechos, y tenga en cuenta específicamente a los “trabajadores y trabajadoras y sindicatos”:

  • Asegúrese de reunirse con diferentes categorías de trabajadores y trabajadoras y líderes sindicales (por ejemplo, según género, posición, personas sindicalizadas frente a no sindicalizadas, etc.)
  • Incluya a los “trabajadores y trabajadoras del sector informal” en la evaluación del impacto sobre los derechos humanos
  • Fije un horario compatible con el horario de trabajo de los trabajadores y trabajadoras
  • Considere la posibilidad de entrevistar a los trabajadores y trabajadoras fuera de las instalaciones de la empresa y del horario laboral 
Recomendación - Minorías (nacionales, raciales, étnicas, religiosas o políticas)

Involucre a los y las titulares de derechos, y tenga en cuenta específicamente a las “minorías (nacionales, raciales, étnicas, religiosas o políticas)”:

  • Es posible que las minorías hablen un idioma distinto del nacional; debe involucrarse a los grupos minoritarios en un idioma que entiendan y con el que se sientan más cómodos
  • El contacto debe ser culturalmente apropiado
  • Dadas las diferentes características de los distintos grupos minoritarios, puede ser útil incluir en el equipo a una persona especialista en antropología que tenga experiencia en el trato con el grupo minoritario en cuestión
  • Asegure una amplia participación desde dentro de la comunidad minoritaria al tratar con ella en lugar de dirigirse solo a determinados o determinadas líderes que pueden no representar a la comunidad en su conjunto 
Recomendación - Personas con discapacidad

Involucre a los y las titulares de derechos, y tenga en cuenta específicamente a las “personas con discapacidad”:

  • Cuando se trabaje con personas con determinadas discapacidades físicas o psíquicas, garantice que el lugar de las reuniones y/o la forma de participar sean accesibles y que se tomen medidas para que la participación sea significativa (por ejemplo, interpretación en lengua de signos, disponibilidad de información en braille)
Recomendación - Personas mayores

Involucre a los y las titulares de derechos, y tenga en cuenta específicamente a las “personas mayores”:

  • A la hora de trabajar con personas mayores, asegúrese de que el lugar de las reuniones y el modo de relacionarse sean accesibles, teniendo en cuenta la mayor probabilidad de necesidades especiales (por ejemplo, acceso adaptado a sillas de ruedas y soluciones digitales sencillas y fáciles de usar) 
Recomendación - Migrantes y personas refugiadas, apátridas y desplazadas forzosamente

Involucre a los y las titulares de derechos, y tenga en cuenta específicamente a “los migrantes y las personas refugiadas, apátridas y desplazadas forzosamente”: 

  • Debido a su situación jurídica incierta, las personas pertenecientes a este grupo de titulares de derechos, especialmente las que carecen de permiso de residencia, pueden tener dudas a la hora de hablar abiertamente por temor a las posibles consecuencias; es importante proporcionar un espacio seguro al tratar con migrantes y personas refugiadas, apátridas y/o desplazadas forzosamente
  • Aunque para relacionarse con los y las titulares de derechos siempre es fundamental mantener la confidencialidad de las identidades de las personas entrevistadas, en el caso de este grupo la confidencialidad requiere una atención especial
  • Considere la posibilidad de entablar contacto a distancia o virtualmente a través de canales de comunicación cifrados para proteger la seguridad de estas personas 
Recomendación - Lesbianas, gais, bisexuales, transexuales, intersexuales y personas queer (LGBTIQ+)

Involucre a los y las titulares de derechos, y tenga en cuenta específicamente a “lesbianas, gais, bisexuales, transexuales, intersexuales y personas queer (LGBTIQ+)”:

  • Los evaluadores y evaluadoras deben recibir una capacitación adecuada sobre cuestiones LGBTIQ+ para trabajar con este grupo
  • Asegúrese de que las personas LGBTIQ+ se sientan cómodas a la hora de proporcionar información garantizando la confidencialidad de los datos recopilados
  • Plantéese recurrir a formas anónimas de participación
  • Al diseñar los planes de participación, garantice que las comunidades en cuestión estén representadas en toda su diversidad. 

¿Se prevé que los usuarios y usuarias o beneficiarios y beneficiarias del proyecto o solución digital sean particulares?

La solución digital puede estar destinada a personas particulares (por ejemplo, una plataforma educativa digital para usuarios y usuarias particulares) o puede estar dirigida, por ejemplo, a una organización (por ejemplo, un modelo de IA que ayude en los procesos administrativos sin interacción con personas externas). Si la solución digital está destinada a particulares, hay que prestar más atención a su capacidad para acceder a ella y utilizarla.

Comentario - Sí

Si la solución digital está destinada a particulares, será importante asegurarse de que es accesible. 

Comentario - No

En la mayoría de las situaciones, esto significaría que los riesgos para los derechos humanos son de poca importancia. No obstante, asegúrese de tener en cuenta los posibles riesgos de discriminación relacionados con la accesibilidad, ya que las instituciones también tienen usuarios y usuarias particulares. 

Comentario - No lo sé

Si se trata, por ejemplo, de aulas en línea, aplicaciones de seguimiento y localización, chatbots utilizados para servicios públicos, plataformas de telemedicina o plataformas digitales de comunicación, es probable que haya personas particulares entre los usuarios y usuarias o beneficiarios y beneficiarias. 

¿Es accesible el proyecto o la solución, especialmente para los grupos marginados?

Algunos ejemplos de factores que afectan a la accesibilidad son:
- costos: ¿es asequible para la mayoría de las personas (teniendo en cuenta también el costo del hardware y de las tarifas de datos)?
- barreras lingüísticas
- alfabetización digital de los usuarios y usuarias
- infraestructura digital: ¿existe la infraestructura física necesaria (por ejemplo, acceso de banda ancha, conexión estable a Internet)?
- discriminación: ¿se encuentran determinados grupos sociales con barreras sociales o culturales adicionales?
- notoriedad: ¿conocen el producto o servicio todas las personas incluidas en el grupo de usuarios y usuarias previsto?
Para más información, véanse otros recursos.

Comentario - Sí, y esta cuestión se ha evaluado de forma específica.

Plantéese la posibilidad de adoptar un proceso de seguimiento para garantizar la accesibilidad a lo largo del tiempo. 

Derechos humanos y principios potencialmente afectados - No

Derecho a la igualdad y a la no discriminación 

Recomendación - No

Trabaje con los grupos marginados y/o sus representantes para garantizar que la herramienta, el producto o el servicio sean accesibles, especialmente para los grupos marginados. 

Derechos humanos y principios potencialmente afectados - No lo sé

Derecho a la igualdad y a la no discriminación 

Recomendación - No lo sé

Trabaje con grupos potencialmente marginados a los que pueda parecerles que la herramienta, producto o servicio digital no es accesible, y escuche sus opiniones para determinar mejor la accesibilidad general. 

Recursos

  • Derecho a la igualdad: 

¿Se controla la accesibilidad de la solución digital, o habrá un plan de control?

Nos referimos, por ejemplo, a si existe un proceso para controlar quiénes son los usuarios y usuarias y quiénes no utilizan la solución, y si hay un proceso sencillo para proporcionar información de retorno sobre problemas de accesibilidad, etc.

Comentario - Sí

La accesibilidad relacionada con productos y servicios digitales debe garantizarse durante toda la vida del producto o servicio. Asegúrese de interactuar con los usuarios previstos a intervalos regulares para garantizar que sigue siendo accesible.

Derechos humanos y principios potencialmente afectados - No

Derecho a la igualdad y a la no discriminación

Recomendación - No

Colabore con los usuarios, sobre todo de grupos vulnerables, y/o sus representantes para elaborar un plan de seguimiento que garantice que la herramienta, producto o servicio sigue siendo accesible y que cualquier problema de accesibilidad se resuelve lo antes posible.

Derechos humanos y principios potencialmente afectados - No lo sé

Derecho a la igualdad y a la no discriminación

Recomendación - No lo sé

Consulta con los socios del proyecto y otros responsables del mantenimiento del producto o servicio digital para averiguar cuál es el plan para garantizar la accesibilidad durante toda la vida útil del producto o servicio.

¿Usted o sus contrapartes han consultado específicamente a las partes interesadas sobre las posibles repercusiones de la solución digital?

Las partes interesadas pueden ser tanto internas (diversos miembros del personal y funciones del proyecto) como externas (incluidos los actores gubernamentales y las contrapartes del proyecto implicados en el desarrollo o el uso de la solución digital, así como organizaciones de la sociedad civil, instituciones académicas y grupos de titulares de derechos). El trabajo conjunto puede adoptar muchas formas: grupos focales, entrevistas en persona o virtuales, audiencias públicas.

Derechos humanos y principios potencialmente afectados - Sí, a las partes interesadas internas.

Derecho a un recurso efectivo y derecho a una participación significativa 

Recomendación - Sí, a las partes interesadas internas.

Trabaje con las partes interesadas externas tan pronto como se haya realizado el análisis interno inicial de las posibles repercusiones negativas sobre los derechos humanos. Céntrese específicamente en los grupos marginados previamente identificados. 

Comentario - Sí, a las partes interesadas internas.

Trabajar con las partes interesadas internas es importante para que todas las personas desarrollen un entendimiento común de los problemas, para validar los análisis internos y para determinar posibles problemas que no se hayan identificado previamente. 

Derechos humanos y principios potencialmente afectados - No

Derecho a un recurso efectivo y derecho a una participación significativa 

Recomendación - No

Aborde con las partes interesadas —tanto internas como externas— el tema de las posibles repercusiones negativas sobre los derechos humanos. Céntrese específicamente en los grupos marginados previamente identificados. 

Comentario - No

Es importante involucrar a las partes interesadas internas en el tema de las posibles repercusiones negativas imprevistas sobre los derechos humanos para fomentar la capacidad interna y la apropiación de la gestión de riesgos. La colaboración con partes interesadas externas es importante para validar las conclusiones y el análisis con las partes interesadas que puedan tener más información sobre las posibles repercusiones, incluidos los y las titulares de derechos que puedan verse afectados. 

Derechos humanos y principios potencialmente afectados - No lo sé

Derecho a un recurso efectivo y derecho a una participación significativa 

Recomendación - No lo sé

Consulte a las contrapartes del proyecto y a otras personas implicadas en el desarrollo del componente digital y compruebe si se ha trabajado con las partes interesadas internas y externas en relación con las posibles repercusiones negativas sobre los derechos humanos

¿Se ha implicado a los y las titulares de derechos, incluidos los que no se consideran usuarios o usuarias, y/o a sus representantes legítimos?

Los titulares de derechos son todas las personas cuyos derechos puedan verse afectados, tanto los usuarios previstos como los no usuarios (para una definición más detallada, véase el Glosario).

Comentario - Sí, a los usuarios y usuarias previstos y a otros y otras titulares de derechos

Eso significa que ha tenido en cuenta un aspecto importante de la implicación de las partes interesadas: conocer las perspectivas y opiniones directamente de los y las titulares de derechos potencialmente afectados. Lo importante es asegurarse de que el trabajo conjunto ha sido significativo. 

Derechos humanos y principios potencialmente afectados - Sí, a los usuarios y usuarias previstos

Derecho a un recurso efectivo y derecho a una participación significativa 

Recomendación - Sí, a los usuarios y usuarias previstos

Desarrolle un plan para implicar a las personas potencialmente afectadas que no se consideran usuarias del producto o servicio. 

Comentario - Sí, a los usuarios y usuarias previstos

Eso significa que ha tenido en cuenta un aspecto importante de la implicación de las partes interesadas: conocer las perspectivas y opiniones directamente de los y las titulares de derechos potencialmente afectados. Lo importante es asegurarse de que el trabajo conjunto ha sido significativo. 

Derechos humanos y principios potencialmente afectados - No

Derecho a un recurso efectivo y derecho a una participación significativa 

Recomendación - No

Desarrolle un plan para implicar a los y las titulares de derechos, incluidas las personas que no se consideran usuarias y/o sus representantes legítimos. 

Comentario - No

Es importante implicar específicamente a las personas titulares de derechos (independientemente de que se consideren usuarias o no) durante la implicación de las partes interesadas. De lo contrario, se corre el riesgo de pasar por alto repercusiones significativas de las que no son conscientes otras partes interesadas externas (que no son titulares de derechos). 

Derechos humanos y principios potencialmente afectados - No lo sé

Derecho a un recurso efectivo y derecho a una participación significativa 

Recomendación - No lo sé

Consulte a las contrapartes del proyecto y a otras personas implicadas en el desarrollo del componente digital y compruebe si los y las titulares de derechos han tenido la oportunidad de hacer sus propias aportaciones.

¿Han dado su opinión sobre las posibles repercusiones del proyecto?

Este será el caso si la implicación no solo consiste en compartir información, sino también en obtener aportaciones de partes interesadas externas sobre el componente digital y sus posibles repercusiones.

Comentario - Sí

Se trata de un aspecto importante para garantizar una implicación significativa de las partes interesadas en relación con el respeto a los derechos humanos. 

Derechos humanos y principios potencialmente afectados - No

Derecho a un recurso efectivo y derecho a una participación significativa

Recomendación - No

Desarrolle un plan para implicar a los y las titulares de derechos y obtener su opinión sobre los riesgos y repercusiones en materia de derechos humanos.

Comentario - No

Es importante que la implicación de las partes interesadas en general y de los y las titulares de derechos en particular no consista en la comunicación unidireccional. Por el contrario, los y las titulares de derechos o sus representantes legítimos deberían tener la posibilidad de hacer aportaciones al análisis interno, así como de añadir su propia perspectiva sobre temas que podrían no haberse tratado en dicho análisis.

Derechos humanos y principios potencialmente afectados - No lo sé

Derecho a un recurso efectivo y derecho a una participación significativa

Recomendación - No lo sé

Consulte a las contrapartes del proyecto y a otras personas implicadas en el desarrollo del componente digital y compruebe si los y las titulares de derechos han tenido la oportunidad de hacer sus propias aportaciones.

¿Se han abordado las cuestiones planteadas por los y las titulares de derechos?

Tenga en cuenta las preocupaciones que se han planteado y evalúe si se han tomado medidas para prevenir o mitigar esos efectos.

Comentario - Sí

Entonces ha tenido en cuenta un aspecto importante de la implicación de las partes interesadas: garantizar que sea significativa y que repercuta en el proceso de implementación del proyecto en la medida necesaria. También es importante que informe a las partes interesadas implicadas sobre las medidas adoptadas. 

Recomendación - No, pero el proceso para abordar esas cuestiones está en marcha.

Informe a los y las titulares de derechos previamente implicados sobre los avances en la resolución de los posibles problemas de derechos humanos identificados, y proporcione plazos estimados. 

Comentario - No, pero el proceso para abordar esas cuestiones está en marcha.

Es importante que las partes interesadas, en particular los y las titulares de derechos marginados, reciban información actualizada sobre el proceso para que puedan evaluar si se han realizado los ajustes adecuados. Si las medidas se retrasan, debe informar a las partes interesadas de los plazos estimados, aunque no pueda especificar las medidas exactas que se tomarán. 

Derechos humanos y principios potencialmente afectados - No, no se han desarrollado planes para ello.

Derecho a un recurso efectivo y derecho a una participación significativa 

Recomendación - No, no se han desarrollado planes para ello.

Revise el material de consulta para comprobar si efectivamente hay que realizar ajustes y adaptaciones para garantizar que las repercusiones sobre los derechos humanos se previenen, mitigan o abordan de forma adecuada. 

Comentario - No, no se han desarrollado planes para ello.

Para garantizar que la implicación de las partes interesadas —en particular de los grupos marginados de titulares de derechos— sea significativa, es esencial que se aborden las repercusiones negativas potenciales y reales sobre los derechos humanos. 

Derechos humanos y principios potencialmente afectados - No lo sé

Derecho a un recurso efectivo y derecho a una participación significativa 

Recomendación - No lo sé

Consulte a las contrapartes del proyecto y a otras personas implicadas en el desarrollo y la implementación del componente digital y compruebe si se han abordado las cuestiones planteadas por los y las titulares de derechos.

¿Han publicado usted o la contraparte del proyecto informes sobre las posibles repercusiones, las medidas de mitigación, la implicación de las partes interesadas y otros procesos relacionados con las preguntas de esta herramienta?

Por ejemplo, informes específicos sobre el componente digital en cuestión, pero también informes más amplios que incluyan información adicional sobre el componente digital, los efectos potenciales identificados y otras actividades relacionadas. Es importante proporcionar información que sea relevante para las partes interesadas externas; por eso se deben cubrir todos los temas mencionados en los informes.

Comentario - Sí, en relación con todos los temas.

Sigue siendo importante continuar actualizando los informes públicos a medida que avanza la implementación del proyecto y el componente digital. Deberá desarrollarse un plan de presentación de informes y transparencia en el que se describa el modo en que la información se hará llegar al público destinatario, que incluirá a los y las titulares de derechos potencialmente afectados. Planifique la comunicación con los y las titulares de derechos de forma que la información sea accesible para los distintos grupos afectados por el proyecto o componente. 

Comentario - Sí, en relación con algunos de los temas mencionados.

Es positivo que se hayan publicado algunos informes para garantizar una mayor transparencia, lo que mejora la rendición de cuentas en relación con el proyecto en general y con el componente digital en particular. Sin embargo, es importante proporcionar toda la información pertinente —desde las repercusiones identificadas hasta la eficacia de las medidas de mitigación— para aumentar la rendición de cuentas. 

Comentario - Todavía no. Está en proceso.

Es importante que las partes interesadas, especialmente los y las titulares de derechos marginados, reciban información sobre la implementación del proyecto para que puedan valorar si están de acuerdo con el análisis del impacto y si se han tomado las medidas adecuadas. 

Derechos humanos y principios potencialmente afectados - No, no se han desarrollado planes para ello.

Derecho a una participación significativa y derecho al acceso a la información 

Recomendación - No, no se han desarrollado planes para ello.

Trabaje con sus contrapartes y desarrolle un plan de transparencia y comunicación en relación con las repercusiones identificadas, la implicación de las partes interesadas y las acciones preventivas y/o de mitigación previstas. 

Comentario - No, no se han desarrollado planes para ello.

La transparencia es un aspecto importante a la hora de aplicar un enfoque de las evaluaciones de impacto sobre los derechos humanos basado en los derechos. 

Derechos humanos y principios potencialmente afectados - No lo sé

Derecho a una participación significativa y derecho al acceso a la información 

Recomendación - No lo sé

Consulte a las contrapartes del proyecto y a otras personas implicadas en el desarrollo y la implementación del componente digital y compruebe si se ha publicado algún informe.

Los principios de los derechos humanos deben regir la cooperación y la programación para el desarrollo. Entre otras cosas, esto significa que es importante tener en cuenta el principio de participación e inclusión en su proyecto o en relación con el uso de una solución digital. La transparencia y la presentación de informes son esenciales para cumplir este principio, ya que también pueden reforzar la capacidad de los y las titulares de derechos para reinvindicar sus derechos. Para más información sobre el enfoque basado en los derechos humanos, véase: 

  • Derecho a la participación: 

¿De qué no se ha informado?

Plantéese sobre cuáles de los temas enumerados no se ha publicado ningún tipo de información. Informar también puede consistir en un simple mensaje directo a todas las personas afectadas, que puede ser un esfuerzo pequeño si se trata de un grupo reducido de personas.

Recomendación - Repercusiones potenciales

Elabore un plan para aumentar los esfuerzos de transparencia en relación con las repercusiones potenciales identificadas. 

Recomendación - Implicación de partes interesadas

Elabore un plan para aumentar los esfuerzos de transparencia en relación con la implicación de las partes interesadas. 

Recomendación - Medidas de mitigación

Elabore un plan para aumentar los esfuerzos de transparencia en relación con las medidas de mitigación. 

¿Existe un mecanismo para recoger las opiniones, quejas o reclamaciones de las personas usuarias y no usuarias del proyecto o solución digital?

Es importante contar con un mecanismo para que las personas (tanto usuarias como no usuarias) puedan presentar quejas o preocupaciones sobre el proyecto o solución digital. Por ejemplo, líneas de asistencia telefónica, cuentas básicas de correo electrónico, servicios de chat o buzones físicos. Además, los proyectos de la GIZ deben nombrar a un delegado o delegada para la protección de datos que puede ser el o la de la empresa. Estos mecanismos permiten detectar de forma temprana los posibles riesgos y repercusiones sobre los derechos humanos, y ayudan a identificar a las personas cuyos derechos se han visto afectados negativamente, de modo que se les pueda ofrecer una reparación.

Comentario - Sí, para personas usuarias y no usuarias.

Un aspecto esencial del respeto a los derechos humanos es disponer de un mecanismo para atender las reclamaciones. Consulte los criterios de eficacia de los Principios Rectores de las Naciones Unidas sobre las empresas y los derechos humanos para comprobar si el mecanismo de reclamación existente puede mejorarse (véanse otros recursos). 

Derechos humanos y principios potencialmente afectados - Sí, solo para personas usuarias.

Derecho a un recurso efectivo y derecho a una participación significativa 

Recomendación - Sí, solo para personas usuarias.

Revise el mecanismo de reclamación y la comunicación relacionada con él, y asegúrese de que las personas no usuarias potencialmente afectadas también puedan acceder a él y obtener información al respecto. 

Comentario - Sí, solo para personas usuarias.

Es importante que las personas no usuarias también puedan presentar quejas. Por ejemplo, en alguna ocasión podría desoírse a personas no inscritas en un proyecto de registro electrónico, y que, sin embargo, sus preocupaciones sean las que más se deban tener en cuenta para garantizar que se evitan o abordan las posibles repercusiones sobre los derechos humanos. 

Derechos humanos y principios potencialmente afectados - Todavía no. Está en proceso.

Derecho a un recurso efectivo y derecho a una participación significativa 

Recomendación - Todavía no. Está en proceso.

Estructure un plan para cuando el mecanismo de reclamación esté en funcionamiento y garantice que todos y todas las titulares de derechos correspondientes puedan acceder a él, y que se les informe de su existencia una vez que esté en funcionamiento. 

Derechos humanos y principios potencialmente afectados - No, no se han desarrollado planes para ello.

Derecho a un recurso efectivo y derecho a una participación significativa 

Recomendación - No, no se han desarrollado planes para ello.

Trabaje con las contrapartes para desarrollar un mecanismo que se ajuste a los criterios de eficacia descritos en los Principios Rectores de las Naciones Unidas sobre las empresas y los derechos humanos (véanse otros recursos). 

Comentario - No, no se han desarrollado planes para ello.

Un aspecto esencial del respeto a los derechos humanos es disponer de un mecanismo para atender las reclamaciones. 

Derechos humanos y principios potencialmente afectados - No lo sé

Derecho a un recurso efectivo y derecho a una participación significativa 

Recomendación - No lo sé

Consulte a las contrapartes del proyecto y a otras personas implicadas en el desarrollo y la implementación del componente digital y compruebe si existe algún mecanismo de reclamación, si se utiliza y quién lo utiliza.

Gracias por participar

Esta es su página de resultados.

A continuación encontrará un resumen de su proyecto basado en las respuestas que ha facilitado, así como una recapitulación de las recomendaciones que se han ido dando a lo largo de la evaluación. También podrá descargarse una plantilla de plan de acción en materia de derechos humanos que le ayudará a planificar los próximos pasos para abordar las posibles repercusiones sobre los derechos humanos.

Tenga en cuenta que la evaluación del perfil de riesgo de su proyecto y las recomendaciones se basan en sus respuestas, y podrían resultar inexactas si determinadas características específicas de su proyecto que afectan a los riesgos para los derechos humanos no se han tenido en cuenta en la evaluación. Le animamos a que tome estos resultados como orientación y siga estudiando los posibles riesgos para los derechos humanos y las medidas necesarias en función de las circunstancias específicas de su proyecto.