Hacer que los algoritmos rindan cuentas a los ciudadanos
Algoritmos que rinden cuentas a la ciudadanía
Esta pieza es parte de la "Serie de blogs de algoritmos abiertos" de OGP. Leer otras publicaciones de la serie aquí.
Hoy, Instituto AI Now, Instituto Ada Lovelace y la Open Government PartnershipEl sistema Open Government Partnership (OGP) es una iniciativa de múltiples partes interesadas enfocada en mejorar la transparencia del gobierno, garantizar oportunidades para la participación ciudadana en asuntos públicos y fortalecer... Más (OGP) lanzó el primer estudio de este tipo que analiza la ola inicial de marcos de políticas que promueven transparenciaDe acuerdo con los Artículos de Gobernanza de OGP, la transparencia ocurre cuando "la información en poder del gobierno (incluidas las actividades y decisiones) es abierta, completa, oportuna y está disponible gratuitamente para el público... Más y responsabilidad del uso de algoritmos por parte de los gobiernos en varias jurisdicciones.
Dado que la mayoría de estas políticas aún se encuentran en etapas muy incipientes de implementación, el estudio cubre las tendencias de implementación tempranas más que el impacto a largo plazo y brinda orientación y lecciones para los responsables de la implementación de políticas. Puede encontrar algunos de los hallazgos clave aquí y acceder al informe completo aquí.
At DerechosCon 2021, funcionarios gubernamentales y organizaciones de la sociedad civil, incluidos miembros de la Red de algoritmos abiertos, discutido su experiencia en la implementación de iniciativas de transparencia de algoritmos y la participación del público en la política algorítmica. Estas son algunas de las ideas y desafíos que compartieron, que contribuyeron en gran medida a los hallazgos del informe:
- Los algoritmos son complejos y los niveles de conciencia pública varían. Debido a la mayor atención de los medios en diferentes países y a varios escándalos como en el Netherlands y la UK, la gente se está volviendo más consciente y preocupada acerca de cómo el uso de datos y algoritmos por parte del sector público puede impactarlos significativamente. Pero para ir más allá y lograr una transparencia y una participación significativas, es importante hacer que la información sea comprensible para el público (como hizo Francia al utilizar un video para explicar un algoritmo), comprometerse con las comunidades afectadas en el diseño e implementación de algoritmos y proporcionar mecanismos concretos para el escrutinio público. Algunas de las primeras lecciones del consultas públicas implementado alrededor del Carta de algoritmos en Nueva Zelanda sugieren que existe la necesidad de interactuar proactivamente con el público en las primeras etapas a través de talleres, los medios de comunicación y asociaciones con comunidades marginadas, así como brindar oportunidades de retroalimentación en varias fases.
- Hay una falta de lenguaje compartido o coherente.. Conceptos como algoritmos, toma de decisiones automatizadaA medida que los gobiernos recurren cada vez más a los algoritmos para respaldar la toma de decisiones para los servicios públicos, la transparencia y la responsabilidad del uso de algoritmos son necesarias para minimizar su daño y aumentar ... y la inteligencia artificial se utilizan con diferentes significados e interpretaciones en todas las jurisdicciones y comunidades. Como en todas las áreas de políticas emergentes, construir un entendimiento común lleva tiempo, pero para involucrar de manera significativa a los ciudadanos y coordinar las políticas con las diferentes agencias gubernamentales que usan algoritmos, es importante trabajar para superar la ambigüedad.
- No se debe subestimar la disponibilidad y la calidad de los datos.. Los datos ingresados en un algoritmo impactan el resultado de la decisión en áreas como salud, educaciónLa rendición de cuentas dentro del sistema de educación pública es clave para mejorar los resultados y logros, y la rendición de cuentas es casi imposible sin políticas transparentes y oportunidades de participación..., contratación pública, y otros. Los datos de baja calidad, que se producen con poca o ninguna supervisión por parte del público, así como los datos faltantes de grupos específicos (generalmente los más marginados) pueden introducir sesgos y discriminación en los algoritmos y dar como resultado decisiones políticas deficientes y discriminatorias. Es necesario intensificar los esfuerzos para mejorar la calidad y disponibilidad de los datos.
- Los marcos legales y de políticas que apoyan la implementación de la responsabilidad algorítmica son importantes. Marcos transversales en torno a áreas como el acceso a la información, la protección de datos regulaciónLos reformadores del gobierno están desarrollando regulaciones que consagran valores de transparencia, participación y rendición de cuentas en las prácticas gubernamentales. Especificaciones técnicas: Acta de creación o reforma..., la infraestructura digital y la rendición de cuentas en el derecho administrativo, que varían según los contextos regionales y los países, pueden tener un impacto en la implementación de políticas algorítmicas de rendición de cuentas. Esto es especialmente importante en contextos o países donde las conversaciones sobre inteligencia artificial y políticas algorítmicas aún se encuentran en etapas muy incipientes. A medida que el uso de algoritmos en el sector público continúa aumentando, la rendición de cuentas algorítmica también puede verse como un portal para discutir problemas sistémicos relacionados con los marcos fundamentales.
A medida que nos acercamos al décimo aniversario de OGP y con más de 10 países y miembros locales co-creando sus planes de acción este año, los copresidentes de OGP han hecho un concreto tu llamada a la acción. a todos los miembros para promover la innovación digital inclusiva en sus plan de acciónLos planes de acción son el núcleo de la participación de un gobierno en OGP. Son el producto de un proceso de co-creación en el que el gobierno y la sociedad civil desarrollan conjuntamente compromisos de gobierno abierto... compromisos Esperamos que las lecciones de este estudio y las discusiones de aprendizaje entre pares puedan respaldar los esfuerzos de los gobiernos y la sociedad civil para promover la responsabilidad algorítmica, incluso como parte de sus planes de acción de OGP.
Hoy, AI Now Institute, Ada Lovelace Institute y la Alianza para el Gobierno Abierto (OGP por sus siglas en inglés) lanzaron el primer estudio de su tipo que analiza la ola de marcos legislativos que promueven la transparencia y rendición de cuentas de los algoritmos utilizados por los gobiernos de diversas jurisdicciones.
La mayoría de estas políticas se encuentran en las primeras fases de su implementación, por lo que el estudio se enfocó en la implementación temprana y no en los impactos de largo plazo, identificando pautas y lecciones que pueden ser de utilidad para la implementación de estos marcos. En este enlace puedes consultar algunos resultados clave y en este el informe completo.
En el evento RightsCon 2021, funcionarios de gobierno y organizaciones de la sociedad civil, incluyendo miembros de Open Algorithms Network, comentaron su experiencia en la implementación de iniciativas de transparencia en algoritmos y en la comunicación con la ciudadanía alrededor de las políticas de algoritmos. A continuación presentamos algunas reflexiones y retos que compartieron y que fueron clave para los hallazgos del informe:
- Los algoritmos son complejos y hay diferentes niveles de sensibilización entre el público. Gracias a la atención que le han dado los medios en algunos países y como resultado de algunos escándalos como el caso de los Países Bajos y el Reino Unido, la gente es más consciente sobre el uso de los datos por el sector público y cómo los pueden afectar los algoritmos. Pero para ir más allá y lograr una verdadera transparencia y participación, es importante hacer que la información sea accesible al público (como el caso de Francia, que creó un video para explicar los algoritmos), colaborar con las comunidades afectadas en el diseño y la implementación de algoritmos y diseñar mecanismos concretos para el escrutinio público. Algunas lecciones de las consultas públicas implementadas por el Algorithms Charter de Nueva Zelanda sugieren que es necesario involucrar al público de forma proactiva desde el inicio a través de talleres, los medios y alianzas con las comunidades marginadas, además de ofrecer diversas oportunidades de retroalimentación.
- No hay un lenguaje compartido ni consistente. Algunos conceptos como algoritmos, toma automatizada de decisiones e inteligencia artificial se utilizan con diferentes significados en las diferentes jurisdicciones y comunidades. Como en todas las áreas de política emergentes, crear un lenguaje común lleva tiempo, pero para involucrar a la ciudadanía y coordinar las políticas entre las diferentes instituciones de gobierno que utilizan algoritmos, es importante eliminar la ambigüedad.
- No se debe subestimar la disponibilidad y calidad de los datos. Los datos utilizados en los algoritmos impactan los resultados de las decisiones que se toman en áreas como salud, educación, contratación abierta y otros. Cuando se utilizan datos de baja calidad y que se generan sin supervisión del público o cuando no se incluyen datos sobre ciertos grupos (comúnmente los más marginados), los algoritmos se crean con sesgos y discriminación, lo que resulta en decisiones de políticas mal diseñadas y discriminatorias. Por ello, es necesario mejorar la calidad y disponibilidad de los datos.
- Los marcos legales que apoyan la implementación de los algoritmos son de gran importancia. Los marcos transversales en áreas como el acceso a la información, protección de datos, infraestructura digital y rendición de cuentas, las cuales varían en los diferentes contextos regionales y países, pueden tener impacto en la implementación de las políticas de rendición de cuentas de los algoritmos. Esto importa sobre todo en los contextos y países en donde las conversaciones sobre inteligencia artificial y algoritmos son muy incipientes. El uso de los algoritmos sigue creciendo en el sector público, por lo que la rendición de cuentas de los algoritmos puede ser una puerta de entrada para discutir otros problemas sistémicos.
En el marco del próximo décimo aniversario de OGP y considerando que más de 100 países y entidades locales están cocreando planes de acción, los copresidentes de OGP lanzaron un llamado a la acción a promover la innovación digital incluyente en sus compromisos y planes de acción. Esperamos que las lecciones aprendidas a través de este estudio y que las discusiones puedan apoyar los esfuerzos del gobierno y la sociedad civil de impulsar la rendición de cuentas de los algoritmos, entre otras acciones a través de sus planes de acción de OGP.
Sin comentarios aún
Más información
Red de algoritmos abiertos
Conozca la red informal de gobiernos implementadores de OGP, que moviliza una coalición entre países de quienes trabajan en la responsabilidad algorítmica.
Algoritmos abiertos: experiencias de Francia, los Países Bajos y Nueva Zelanda
Los algoritmos, sistemas analíticos que procesan datos y complementan o reemplazan la toma de decisiones que antes realizaban las personas, se han convertido en una forma esencial para que los gobiernos mejoren la prestación de servicios públicos ...
Copresidente del Llamado a la acción global para todos los miembros de OGP
En apoyo de Open Renewal, los Copresidentes de OGP, la República de Corea y Maria Baron del Directorio Legislativo, han lanzado un llamado a la acción global para todos los miembros de OGP en 2021 ...
Deje un comentario