El error humano de la inteligencia artificial

-

https://www.agendadigitale.eu/cultura-digitale/the-human-error-of-artificial-intelligence/

En enero de 2020, Robert Julian-Borchak, un hombre negro, fue arrestado en Detroit por un crimen que no cometió solo por un error en un sistema de inteligencia artificial de reconocimiento facial. Este, según el New York Times, fue el primer caso conocido de un ciudadano estadounidense arrestado por un error algorítmico.


El caso de Robert Julian-Borchak cuenta la historia de nuestro tiempo. Hoy en día, las fuerzas del orden y los tribunales utilizan cada vez más los sistemas de inteligencia artificial para monitorear, rastrear y perfilarnos y determinar nuestra posible inocencia o culpabilidad. Estas transformaciones no solo afectan a Estados Unidos. También en Europa, las lógicas algorítmicas se están incorporando rápidamente en los entornos de justicia penal [1] y la vigilancia policial predictiva. [2].




Como demuestra el ejemplo de Robert Julian-Borchak, el uso de estas tecnologías por los tribunales y las fuerzas del orden puede tener un impacto perjudicial sobre nuestros derechos y libertades, y esta es la razón por la que estos sistemas deben ser estudiados, probados, evaluados y, en ocasiones, prohibidos. .


En abril de 2021, la Comisión Europea publicó una nueva Propuesta de Reglamento sobre Inteligencia Artificial en Europa, cuyo objetivo es precisamente eso. La nueva propuesta no solo sugiere que debemos entender los sistemas de inteligencia artificial que se utilizan para perfilar a las personas (por agentes del orden, educadores, recursos humanos, etc.) como de alto riesgo, sino también prácticas como la puntuación social o la vigilancia biométrica en 'tiempo real'. debería estar prohibido. La nueva propuesta también pide una mayor responsabilidad y transparencia en las formas en que se utiliza y se capacita la IA de alto riesgo. Lo que surge claramente de la propuesta de la Comisión de la UE es que los sistemas de inteligencia artificial destinados a la elaboración de perfiles humanos están expuestos a diferentes tipos de errores implícitos y sesgos en la elaboración de perfiles humanos que pueden amplificar las desigualdades en nuestra sociedad y pueden tener un impacto negativo en los derechos humanos.


La propuesta de la Comisión Europea de reglamento sobre inteligencia artificial es, en mi opinión, un paso adelante muy importante. Sin embargo, también creo que tenemos que ser realistas, aprender de la experiencia de GDPR y recordar que la implementación de propuestas legislativas como esta en Europa no es nada fácil. Lo cierto es que nuestra vida diaria se define ahora por una increíble cantidad de decisiones algorítmicas, que no son fácilmente controlables o gobernables.


La historia de Robert Julian-Borchak suena absurda, distópica y kafkiana. Es un caso extremo. En su extremo, sin embargo, nos enfrenta a una historia mucho más mundana y ordinaria: todos los días somos juzgados por sistemas de inteligencia artificial, y todos los días sus errores, sus sesgos pueden limitar nuestras libertades.

Comentarios

Publicar un comentario

Popular

Es hora de que la IA se explique

-
https://www.hpe.com/us/en/insights/articles/it-s-time-for-ai-to-explain-itself-2108.html Los modelos de IA son cada vez más precisos, pero ni siquiera los científicos de datos que los crearon pueden explicar por qué, y eso es un problema. Los algoritmos basados en la IA forman parte de la vida cotidiana de casi todo el mundo. Todos nos hemos acostumbrado a que las máquinas nos sugieran una nueva serie para ver en Netflix, otra persona a la que seguir en Facebook o lo siguiente que tenemos que pedir en Amazon. También están impulsando decisiones mucho más importantes, como en qué acciones invertir, qué procedimientos médicos considerar o si se puede optar a una hipoteca. En algunos casos, un sistema de IA puede ofrecer mejores consejos que un asesor financiero, un médico o un banquero. Pero si acabas en el lado equivocado de un algoritmo, no hay ninguna persona a la que puedas abrochar para explicar por qué tu solicitud de préstamo fue rechazada o tu currículum descartado. Y con demasia...
Leer más

Ann Cavoukian explica por qué la vigilancia invasiva no debería ser la norma en los entornos urbanos modernos y sostenibles

-
https://www.codastory.com/authoritarian-tech/privacy-smart-cities/ De Ámsterdam a Dubai, las ciudades inteligentes prometen un futuro brillante y sostenible. Pensemos en los sistemas de GPS que ponen en verde las luces de las calles para las ambulancias que se acercan y en los sistemas de riego que controlan la calidad del suelo y el clima para conservar el agua. Sin embargo, la tecnología que hay detrás puede tener serias implicaciones para nuestra privacidad y derechos civiles. En 2016, San Diego desplegó farolas equipadas con cámaras de vigilancia para controlar el tráfico, pero la policía ha utilizado desde entonces sus imágenes durante las investigaciones. En la primavera de 2020, incluso se encendieron en las protestas de Black Lives Matter. El ayuntamiento está estudiando ahora una nueva normativa para regular su uso.  En 2017, la doctora Ann Cavoukian aceptó trabajar como asesora en un proyecto ahora abandonado, en el que la empresa hermana de Google, Sidewalk Labs, planeab...
Leer más

Gemelos digitales, cerebros virtuales y los peligros del lenguaje

-
https://ethicsblog.crb.uu.se/2022/01/18/digital-twins-virtual-brains-and-the-dangers-of-language/ Se ha empezado a introducir una nueva tecnología de simulación por ordenador, por ejemplo, en la industria manufacturera. La simulación por ordenador se llama gemelo digital, lo que me reta a dar vida al lector a lo que algo que suena tan imaginativo puede ser en realidad. La explicación más realista que puedo encontrar proviene del mundo de Harry Potter. ¿Recuerdan el mapa de Hogwarts, que no sólo muestra todas las habitaciones y pasillos, sino también los pasos en tiempo real de quienes se escabullen por la escuela? Un mapa similar puede crearse fácilmente en un entorno informático conectando el mapa en el ordenador con sensores en el suelo del edificio que representa el mapa. Inmediatamente se tiene un mapa digital interactivo del edificio que se actualiza automáticamente y muestra los movimientos de la gente en él. Imaginemos además que la simulación informática puede hacer cálculos qu...
Leer más