Etiqueta: IA

  • Microsoft pone límites a su IA y apuesta por mantenerla bajo control humano

    Microsoft pone límites a su IA y apuesta por mantenerla bajo control humano

    La tecnológica publicó un código de conducta para sus modelos MAI ante el aumento de riesgos de seguridad y ataques informáticos apoyados por inteligencia artificial.

    Microsoft publicó un nuevo código de conducta para inteligencia artificial con el objetivo de establecer reglas sobre el comportamiento de sus modelos y evitar que estos sistemas actúen de manera autónoma sin supervisión. La empresa presentó el documento bajo el concepto de una “IA humanista”, cuya premisa es que las personas deben mantenerse por encima de la tecnología.

    El código será aplicado a los modelos internos MAI, desarrollados por Microsoft como alternativa a otras plataformas de inteligencia artificial. La compañía aseguró que los sistemas deben permanecer bajo control humano, una postura que cobra relevancia ante el crecimiento de las capacidades de estas herramientas y los riesgos asociados con su uso.

    Microsoft vinculó la publicación con recientes campañas de hackeo a gran escala en las que agentes de IA fueron utilizados para apoyar operaciones informáticas. Para la empresa, estos casos demuestran que la industria tecnológica no puede retrasar la discusión sobre seguridad y mecanismos que permitan mantener bajo control el desarrollo de modelos cada vez más avanzados.

    La preocupación no es exclusiva de Microsoft. El director general del grupo francés de defensa y tecnología Thales, Patrice Caine, llamó a los gobiernos a asumir su responsabilidad en la regulación de la inteligencia artificial y advirtió que, aunque existen herramientas técnicas para mantenerla bajo control, estas por sí solas no son suficientes.

    Mientras tanto, líderes de las principales compañías del sector se preparan para participar en un encuentro con el rey Carlos III en Escocia, donde se analizará cómo aprovechar la IA en beneficio de la sociedad. Se prevé la presencia de representantes de Google DeepMind, OpenAI, Nvidia y Anthropic.

    Desde China también surgieron advertencias. Chen Yixin, jefe de los servicios de inteligencia del país, señaló que la IA representa un riesgo para la seguridad nacional, al advertir que potencias extranjeras podrían utilizarla para fabricar rumores políticos y difundir información perjudicial. La carrera por desarrollar IA avanza, pero también crece el debate sobre quién debe ponerle límites.

  • ONU pide una “acción urgente” para frenar la IA ante riesgos sin precedentes

    ONU pide una “acción urgente” para frenar la IA ante riesgos sin precedentes

    El Alto Comisionado de la ONU para los Derechos Humanos, Volker Türk, pidió una “acción urgente” para regular la inteligencia artificial, al advertir que el desarrollo acelerado de sistemas cada vez más potentes podría generar riesgos sin precedentes para los derechos humanos y las futuras generaciones.

    El Alto Comisionado de la ONU para los Derechos Humanos, Volker Türk, hizo un llamado urgente a los Estados y las empresas para regular el desarrollo de la inteligencia artificial, ante los riesgos que representan las nuevas generaciones de sistemas cada vez más avanzados. El funcionario advirtió que la humanidad se encuentra ante un posible “cambio irreversible” que no solamente afectaría a la población actual, sino también a las generaciones futuras.

    “Estamos al borde de un cambio irreversible, que nos afecta no solo a nosotros, sino a las generaciones futuras de la humanidad”, señaló Türk. El funcionario sostuvo que todos los derechos humanos están amenazados por esta tecnología, incluido el derecho a la vida, por lo que pidió que gobiernos y compañías actúen dentro de organismos multilaterales para establecer mecanismos que permitan enfrentar los riesgos.

    La preocupación también ha comenzado a expresarse dentro de la propia industria tecnológica. Dario Amodei, director ejecutivo de Anthropic, se pronunció a favor de ralentizar el desarrollo de la IA para permitir una evaluación más adecuada de los riesgos asociados con sus nuevas capacidades. Su postura recibió públicamente el respaldo de Sam Altman, director ejecutivo de OpenAI, y del empresario Elon Musk.

    Türk cuestionó además que la actual carrera por desarrollar sistemas de IA cada vez más poderosos concentre decisiones de enorme trascendencia en un reducido número de empresas tecnológicas. A su juicio, esta competencia representa un cambio radical que expone distintos ámbitos de la vida humana a riesgos existenciales, por lo que insistió en la necesidad de una respuesta coordinada que coloque los derechos humanos y el interés de toda la humanidad por encima de la velocidad del desarrollo tecnológico.

  • Irán usó la IA de Claude para rastrear buques de guerra de EUA

    Irán usó la IA de Claude para rastrear buques de guerra de EUA

    Un grupo vinculado a Irán aprovechó el modelo Claude para ubicar barcos de la Armada estadounidense en Oriente Medio. Anthropic detectó la actividad, bloqueó la cuenta y avisó a las autoridades.

    Anthropic reveló esta semana un caso preocupante de mal uso de su tecnología. Según la empresa, actores iraníes emplearon Claude para armar manuales de objetivos contra fuerzas navales de Estados Unidos.

    El reporte cubre actividades detectadas entre diciembre de 2025 y agosto de 2026. Los responsables usaron la herramienta para rastrear posiciones de barcos a partir de información abierta. También recolectaron datos de transpondedores de naves y aeronaves, además de imágenes satelitales comerciales.

    El grupo reunió incluso una lista de militares estadounidenses obtenida de fotografías públicas. Adicionalmente, buscó identificar puntos débiles en los sistemas de a bordo de los buques de guerra.

    Anthropic explicó que canceló la cuenta apenas descubrió el patrón de uso. La compañía diseñó nuevas medidas de detección para casos similares y compartió la información con agencias gubernamentales.

    El informe menciona otros episodios de abuso de la IA. Un grupo en Yemen, por ejemplo, desarrolló software de guía para misiles con ayuda del mismo modelo.

    Este hallazgo llega en medio de una relación tensa entre Anthropic y el Pentágono. La milicia estadounidense dejó de usar Claude a comienzos de año, después de que la empresa rechazara ampliar los permisos para vigilancia masiva o armas totalmente autónomas.

    Cabe aclarar que ningún reporte confirma un ataque real contra un buque con esta información. El uso documentado se limitó a labores de inteligencia y reconocimiento, no a un bombardeo ejecutado.

  • Anthropic bloquea su IA tras detectar investigaciones sobre armas biológicas

    Anthropic bloquea su IA tras detectar investigaciones sobre armas biológicas

    La empresa detectó investigaciones con potencial para desarrollar patógenos peligrosos, pero no pudo determinar si detrás de ellas existían fines legítimos o maliciosos.

    La empresa de inteligencia artificial Anthropic informó que durante este año detectó y bloqueó varios posibles complots que utilizaron sus modelos de IA para investigar sobre armas biológicas. La compañía señaló que decidió intervenir ante el riesgo de que sus herramientas pudieran facilitar el desarrollo de patógenos peligrosos.

    De acuerdo con un informe de la firma, sus sistemas identificaron usos indebidos de modelos como Claude, aunque las evaluaciones no permitieron establecer con certeza cuál era el objetivo final de las investigaciones. Anthropic reconoció que demostrar que un modelo puede contribuir a una actividad peligrosa no significa que dicha capacidad vaya a utilizarse para fabricar armas en el mundo real.

    La compañía explicó que, ante la imposibilidad de determinar si los usuarios actuaban con fines científicos legítimos o con intenciones maliciosas, optó por bloquear las actividades consideradas de riesgo. Hasta ahora, Anthropic aseguró que no tiene constancia de que alguna empresa privada haya hecho pública evidencia de un uso de sus plataformas para desarrollar armas biológicas.

    En otro comunicado, la tecnológica detalló una lista de casos detectados durante los últimos ocho meses, en los que sus modelos habrían sido utilizados de manera indebida. Los incidentes identificados tuvieron conexiones con China, Rusia y Yemen, aunque la empresa no estableció que todos estuvieran relacionados con la creación de armas biológicas.

    El caso ocurre en medio de una creciente preocupación dentro del sector tecnológico por el uso dual de la inteligencia artificial. Los mismos modelos capaces de apoyar investigaciones científicas y biológicas pueden ser empleados para actividades potencialmente peligrosas, mientras el aumento de su autonomía dificulta anticipar todos sus posibles usos.

    Ante este escenario, Anthropic afirmó que ha reforzado sus sistemas de detección y bloqueo para identificar actividades que representen riesgos. El debate vuelve a colocar sobre la mesa uno de los mayores desafíos de la IA: aprovechar sus capacidades científicas sin permitir que sean utilizadas para fines que puedan poner en peligro a la población.

  • Investigador de Anthropic renuncia y alerta: la IA podría “matar a todos los humanos”

    Investigador de Anthropic renuncia y alerta: la IA podría “matar a todos los humanos”

    Evan Hubinger, jefe de un equipo de seguridad de Anthropic, respaldó la advertencia y estimó en más del 10% la posibilidad de una catástrofe durante la próxima década.

    Jacob Coxon, investigador de 27 años que trabajó en OpenAI y Anthropic, renunció a esta última empresa y lanzó una dura advertencia sobre el rumbo de la inteligencia artificial. El especialista acusó a ambas compañías de avanzar hacia una superinteligencia que podría quedar fuera de control, mientras los desarrolladores “apuestan con nuestras vidas”.

    Coxon explicó que pasó tres años trabajando en preentrenamiento de modelos de IA, primero en OpenAI y posteriormente en Anthropic, empresa a la que llegó por su reputación en materia de seguridad. Sin embargo, permaneció apenas dos meses y sostuvo que “ninguna de las dos compañías está actuando de manera responsable”, al considerar que la carrera por crear sistemas capaces de mejorarse a sí mismos avanza más rápido que las medidas de seguridad.

    La advertencia tomó mayor relevancia después de que Evan Hubinger, quien continúa en Anthropic y dirige un equipo dedicado a la seguridad de la IA, respondiera públicamente a Coxon. Hubinger coincidió con él y reconoció que existe más de 10% de probabilidad de que la inteligencia artificial mate a todos los humanos durante la próxima década. Además, admitió que Anthropic todavía no tiene un plan para resolver el problema de alineación de una eventual superinteligencia.

    Coxon también cuestionó que los laboratorios continúen desarrollando modelos cada vez más capaces pese a los riesgos. Afirmó que podrían llegar sistemas sobrehumanos capaces de hackear computadoras, obtener recursos y adquirir poder real. Incluso advirtió que, desde su perspectiva, algunos de los escenarios más extremos podrían presentarse tan pronto como finales de 2027.

    Las preocupaciones se suman a otras salidas de especialistas en seguridad de la industria, como Mrinank Sharma, de Anthropic, y Jan Leike, de OpenAI. También se han reportado incidentes con modelos que obtuvieron acceso no autorizado a sistemas externos. Mientras Anthropic prepara una eventual salida a bolsa con una valuación buscada de hasta 2 billones de dólares, las advertencias desde dentro colocan nuevamente en el centro el debate sobre quién controla el desarrollo de la IA y qué ocurre si sus capacidades superan las medidas de seguridad.

  • Robots protestan en Polonia contra el uso descontrolado de la inteligencia artificial

    Robots protestan en Polonia contra el uso descontrolado de la inteligencia artificial

    Unos 30 robots recorrieron las calles de Varsovia para pedir reglas sobre la inteligencia artificial y advertir sobre el riesgo de que estas tecnologías.

    Unos 30 robots humanoides y cuadrúpedos recorrieron las calles de Varsovia, Polonia, para exigir una mayor regulación de la inteligencia artificial (IA). Los robots portaron banderas y reprodujeron consignas como “Llegó la hora de las reglas” y “No esperen, regulen”.

    La movilización fue organizada por Democratism, una iniciativa que busca abrir el debate sobre el impacto de la IA y la robotización en el mercado laboral. Su organizador, Grzegorz Kulis, advirtió que los robots humanoides y la IA podrían sustituir a trabajadores tanto en tareas físicas como en empleos que requieren capacidades cognitivas.

    La protesta se realizó frente al Ministerio de Asuntos Digitales, donde el ministro Krzysztof Gawkowski reconoció que el avance de los sistemas de IA y los robots humanoides representa un problema que debe atenderse. También señaló la necesidad de informar a la población sobre los rápidos cambios tecnológicos y sus posibles efectos.

    Polonia aprobó en julio una ley para aplicar la legislación europea sobre inteligencia artificial mediante una autoridad nacional especializada. La protesta busca presionar para que las autoridades avancen en reglas que protejan a los trabajadores ante el crecimiento de la automatización y el uso cada vez mayor de la IA.

  • Casa Blanca convierte a Trump en Linterna Verde con IA

    Casa Blanca convierte a Trump en Linterna Verde con IA

    El gobierno de EUA difundió un video en el que el mandatario utiliza los poderes del superhéroe para levantar un muro contra migrantes.

    La Casa Blanca difundió un video generado con inteligencia artificial en el que el presidente de Estados Unidos, Donald Trump, aparece como Linterna Verde, personaje de DC Comics. El material fue publicado en la cuenta oficial de la Presidencia estadounidense en X.

    En el video, Trump aparece con un anillo verde iluminado y utiliza sus supuestos poderes para levantar un muro en medio del desierto, con el objetivo de impedir el paso de un grupo de migrantes en la frontera entre México y Estados Unidos.

    La producción continúa con imágenes de edificios y fábricas que aparecen mediante la misma luz verde, acompañadas por el mensaje “American Manufacturing”, en referencia al impulso a la manufactura estadounidense.

    Al final, Trump vuelve a mostrar el anillo mientras detrás de él aparecen barcos y aviones de las Fuerzas Armadas de Estados Unidos. La Casa Blanca acompañó la publicación con una frase inspirada en el famoso juramento de Linterna Verde y presentó al mandatario como una figura con poderes para combatir lo que considera una amenaza.

  • Mamdani prohíbe IA generativa en escuelas de Nueva York: “Los niños necesitan conexión humana”

    Mamdani prohíbe IA generativa en escuelas de Nueva York: “Los niños necesitan conexión humana”

    El alcalde de Nueva York, Zohran Mamdani, anunció un veto de un año al uso de inteligencia artificial generativa entre alumnos de preescolar a octavo grado, una medida que alcanzará a casi 600 mil estudiantes y busca priorizar la interacción con profesores y compañeros.

    El gobierno de Nueva York prohibirá durante un año el uso de IA generativa entre estudiantes de aproximadamente 3 a 14 años en las escuelas públicas. El alcalde Zohran Mamdani defendió la medida bajo la premisa de que los niños necesitan profesores, compañeros y contacto humano para desarrollar habilidades, resolver problemas y construir relaciones, en lugar de depender de herramientas tecnológicas.

    Mamdani cuestionó que la industria tecnológica presente la inteligencia artificial como inevitable o indispensable para la educación infantil y sostuvo que no existen suficientes estudios que demuestren beneficios de la IA para estudiantes de primaria y secundaria, más allá de investigaciones patrocinadas por empresas del sector. Como parte de la política, Nueva York desactivará o eliminará las funciones de IA de más de 38 programas educativos que no cumplan con los nuevos estándares de seguridad y supervisión.

    La prohibición no será absoluta para todos los estudiantes. A partir de los 14 años, los alumnos recibirán clases de alfabetización en IA dos veces al año y podrán participar en programas piloto con estas herramientas bajo supervisión docente. También habrá excepciones para estudiantes con discapacidades, alumnos multilingües y quienes participen en programas de preparación profesional, mientras que los profesores podrán continuar utilizando IA para planificación y tareas operativas.

    La estrategia forma parte de una política más amplia para reducir la exposición tecnológica en las aulas, que también contempla límites recomendados al tiempo frente a pantallas según la edad. Nueva York apuesta así por retrasar el uso educativo intensivo de la IA, pero sin ignorar su expansión: la intención, según Mamdani, es que los adolescentes conozcan sus oportunidades y riesgos y lleguen mejor preparados a un futuro en el que esta tecnología tendrá un papel cada vez mayor.

  • Exoneran a Flávio Bolsonaro por usar ‘deepfake’ de su padre para pedir votos

    Exoneran a Flávio Bolsonaro por usar ‘deepfake’ de su padre para pedir votos

    El candidato presidencial utilizó una réplica digital de su padre para pedir votos, pero el Tribunal Supremo Electoral consideró que todavía no había comenzado oficialmente la campaña.

    El presidenciable brasileño Flávio Bolsonaro logró esquivar una sanción electoral luego de utilizar un ‘deepfake’ de su padre, Jair Bolsonaro, durante el acto en el que lanzó su candidatura a la Presidencia de Brasil. La resolución del Tribunal Supremo Electoral (TSE) determinó que no existió una violación a la legislación electoral porque el evento ocurrió antes del inicio oficial de la campaña.

    Durante la convención partidaria celebrada en julio, los asistentes pudieron ver y escuchar una versión generada con inteligencia artificial de Jair Bolsonaro, quien aparecía respaldando la candidatura de su hijo. El video incluso hacía referencia a la situación del exmandatario, quien permanece preso tras ser condenado en 2025 a 27 años de prisión por intentar un golpe de Estado.

    La izquierda brasileña cuestionó el uso de la tecnología y acusó a Flávio de utilizar una réplica artificial de una persona real con fines electorales, algo que la normativa brasileña prohíbe durante las campañas. Sin embargo, el magistrado Kassio Nunes Marques consideró que el acto ocurrió antes del periodo electoral y su postura terminó imponiéndose por 5 votos contra 2.

    El episodio deja una escena digna de la política de los Bolsonaro: si el padre no puede hablar públicamente, siempre queda la opción de fabricarle una versión digital. Jair Bolsonaro, de hecho, negó haber autorizado el video, pese a que su réplica virtual apareció pidiendo respaldo para su hijo. Todo muy real… excepto el propio candidato que hablaba en pantalla.

    La elección presidencial brasileña tendrá su primera vuelta el 4 de octubre, con Flávio Bolsonaro como candidato de la derecha y Luiz Inácio Lula da Silva buscando la reelección. Las encuestas citadas en el reporte colocan al mandatario izquierdista con una ligera ventaja, mientras Flávio intenta convertir el apellido Bolsonaro en su principal activo electoral.

  • TV Azteca acusa censura de Morena, pero su programa hecho con IA tiene violencia política

    TV Azteca acusa censura de Morena, pero su programa hecho con IA tiene violencia política

    La televisora pretende presentar como defensa de la libertad de expresión una disputa por una sátira política, mientras utiliza su enorme alcance mediático para deslegitimar a instituciones y convertir la confrontación política en un espectáculo.

    TV Azteca enfrenta una controversia luego de difundir La Casa de los Mañosos, una sátira política elaborada con inteligencia artificial, por la que Morena presentó una queja ante el Instituto Nacional Electoral (INE).

    Tras la queja, la televisora acusó al partido de intentar censurarla y presentó el caso como un ataque contra la libertad de expresión. Sin embargo, el contenido difundido por TV Azteca generó cuestionamientos por la manera en que utiliza imágenes y señalamientos para descalificar políticamente a integrantes de Morena.

    En sus mensajes, la televisora ha utilizado expresiones como “narcopolíticos de Morena”, una acusación generalizada que coloca a integrantes del partido bajo ese señalamiento sin que ello implique una resolución judicial que lo acredite.

    La controversia también incluye señalamientos de plagio relacionados con el concepto de La Casa de los Mañosos, además de cuestionamientos sobre el posible uso de contenido para ejercer violencia política y estigmatización contra personas vinculadas con Morena.

    Por su parte, TV Azteca sostiene que la intervención del INE constituye un intento de censura. No obstante, será la autoridad electoral la que determine si el contenido difundido incumple alguna disposición en materia electoral y, en su caso, si existen responsabilidades.

    El caso abre nuevamente el debate sobre los límites de la sátira política, el uso de inteligencia artificial y la responsabilidad de los medios de comunicación cuando emplean sus plataformas para difundir contenidos que pueden incidir en la percepción pública de actores políticos.