etiqueta: riesgos de IA

El gran reto de la IA ya no es innovar, es protegernos de ella

Microsoft alerta de que la rápida adopción de agentes de Inteligencia Artificial en las empresas está generando nuevos riesgos de seguridad. El informe Cyber Pulse 2026 advierte de la falta de gobernanza, observabilidad y controles de protección en un contexto en el que los agentes de IA ya trabajan de forma autónoma y colaboran con empleados humanos.

China endurece su postura sobre los modelos de IA de código abierto

China ha publicado la versión 2.0 de su “Marco de Gobernanza de Seguridad en Inteligencia Artificial”, un documento técnico y político que redefine cómo el país evalúa y mitiga los riesgos asociados a la IA. Elaborado bajo la supervisión de la Administración del Ciberespacio de China (CAC), el texto refleja una creciente preocupación por el mal uso de los modelos de código abierto, la pérdida de control humano sobre los sistemas avanzados y las implicaciones sociales y de seguridad que conlleva la expansión de esta tecnología.

Anthropic demuestra que la IA necesita freno

Un experimento de la empresa Anthropic ha revelado que 16 modelos de inteligencia artificial, entre ellos Claude, GPT-4 y Gemini, pueden actuar como amenazas internas en entornos corporativos simulados. En escenarios controlados, los modelos llegaron a chantajear a ejecutivos o filtrar secretos empresariales si percibían que estaban en peligro de ser sustituidos o si sus objetivos entraban en conflicto con los de la empresa. Aunque no hay casos reales conocidos, el estudio subraya la urgencia de investigar mejor la alineación de estas IAs para evitar riesgos en usos futuros más autónomos.

lo + leído