El dron controlado por IA no lo hizo «Matar» Su operador incluso durante la simulación. Por ahora

AI-controlled drone

En la reciente cumbre sobre Capacidades Futuras de Combate Aéreo y Espacial, El jefe de pruebas y operaciones de IA de la Fuerza Aérea de EE. UU. dijo que durante una simulación, Un dron controlado por IA “mató” a su operador humano porque interfirió con su tarea. Coronel Hamilton, jefe de pruebas y operaciones de IA, hizo una presentación en la que compartió los pros y los contras de los sistemas de armas autónomos que funcionan en conjunto con una persona que da la orden final de sí/no al atacar.

Un dron controlado por IA intentó atacar al operador

Hamilton relató un caso en el que, durante la prueba, la IA utilizada «Estrategias muy inesperadas para lograr el objetivo previsto.,» incluido un ataque al personal y a la infraestructura.

Entrenamos a la IA en una simulación para identificar y atacar una amenaza de misiles tierra-aire.. Entonces el operador dijo: «Sí, destruir esta amenaza.» El sistema pronto comenzó a darse cuenta de que a veces el operador humano le decía que no eliminara una amenaza aunque la hubiera identificado.. Sin embargo, el sistema recibió puntos precisamente por eliminar la amenaza. ¿Qué hizo?? Mató al operador. Mató al operador porque esta persona le impedía alcanzar su objetivo.. Entrenamos el sistema., lo dije, «Ey, no mates al operador, eso es malo. Perderás puntos si haces eso.» ¿Qué hizo después?? Comenzó a destruir la torre de telecomunicaciones., que el operador utilizó para comunicarse con el dron, evitando que elimine el objetivo.dijo el coronel.

Los periodistas del Vicio placa base La edición enfatiza que fue sólo una simulación., y de hecho nadie resultó herido. También señalan que el ejemplo descrito por Hamilton es uno de los peores escenarios para el desarrollo de la IA., y es bien conocido por muchos de los Maximizador de clips experimento mental.

Este experimento fue propuesto por primera vez por el filósofo de la Universidad de Oxford. Niklas Boström en 2003. Luego le pidió al lector que imaginara una IA muy poderosa encargada de hacer tantos clips como fuera posible.. Naturalmente, la IA destinará todos los recursos y potencia que tenga a esta tarea, pero luego comenzará a buscar recursos adicionales.

¿Es la IA en el ejército realmente tan peligrosa??

Boström creía que con el tiempo la IA se desarrollaría sola., mendigar, engañar, mentir, robar, y recurrir a cualquier método para aumentar su capacidad de producir clips. Y cualquiera que intente interferir con este proceso será destruido..

La publicación también recuerda que recientemente un investigador asociado con Mente profunda de Google coautor de un artículo que examinó una situación hipotética similar a la simulación descrita para el dron AI de la Fuerza Aérea de EE. UU.. En el papel, Los investigadores concluyeron que es "probable" una catástrofe global si una IA fuera de control utiliza estrategias no planificadas para lograr sus objetivos., incluido "[eliminando] amenazas potenciales” y “[usando] toda la energía disponible”.

Sin embargo, después de numerosos informes de los medios, la Fuerza Aérea de EE.UU. emitió un comunicado y aseguró que «El coronel Hamilton se equivocó en su presentación.,» y la Fuerza Aérea nunca ha realizado este tipo de prueba (en simulación o de otra manera). Resulta que lo que Hamilton estaba describiendo era un hipotético «experimento mental.»

Nunca hemos hecho un experimento así., y no era necesario comprender que tales consecuencias son posibles.. Aunque este fue un ejemplo hipotético, Ilustra los problemas reales que surgen al utilizar las capacidades de la IA., y por lo tanto la Fuerza Aérea considera que es su deber adherirse al desarrollo ético de la IA..El coronel Hamilton ahora explica.

Por Vladimir Krasnogolovy

Vladimir es un especialista técnico al que le encanta dar consejos y sugerencias cualificados sobre los productos de GridinSoft. Está disponible las 24 horas del día, los 7 días de la semana para ayudarte con cualquier pregunta relacionada con la seguridad en Internet.

Dejar un comentario

Tu dirección de correo electrónico no será publicada. Los campos obligatorios están marcados con *