Tecnología

El éxodo de la OpenAI: ¿Priorizar el progreso sobre el peligro?

Seguir el ritmo vertiginoso de la inteligencia artificial (IA) es un reto monumental. Este artículo profundiza en los últimos avances en el ámbito del aprendizaje automático, destacando investigaciones y experimentos dignos de mención junto a un análisis crítico de la controvertida toma de decisiones de OpenAI.

OpenAI: ¿Productos por encima de las precauciones?

Esta semana, OpenAI dominó los titulares no sólo por el lanzamiento de su producto, sino también por una controversia interna. La empresa desveló el GPT-4o, su modelo generativo más potente hasta la fecha. Sin embargo, apenas unos días después, saltó la noticia de la disolución de su equipo de investigación sobre seguridad, encargado de mitigar los riesgos asociados a los sistemas de IA «superinteligentes».

Como era de esperar, este desmantelamiento generó una oleada de atención mediática. Los informes sugieren que OpenAI dio prioridad al lanzamiento de nuevos productos como GPT-4o sobre la investigación de seguridad, lo que en última instancia condujo a la dimisión de dos figuras clave: Jan Leike, que codirigía el equipo de seguridad, e Ilya Sutskever, cofundador de OpenAI.

El concepto de IA superinteligente es actualmente más teórico que tangible. Está por ver si la industria tecnológica logrará o no los avances necesarios para crear una IA que reproduzca las capacidades humanas. Sin embargo, los últimos acontecimientos parecen sugerir un cambio preocupante en las prioridades de liderazgo de OpenAI, especialmente bajo la dirección de su director ejecutivo, Sam Altman.

Altman ha sido acusado de «enfurecer» a Sutskever al precipitar el lanzamiento de funciones potenciadas por la IA en la primera conferencia de desarrolladores de OpenAI el año pasado. También ha criticado a Helen Toner, antigua miembro del consejo de OpenAI y directora del Centro de Seguridad y Tecnologías Emergentes de Georgetown. Al parecer, su artículo coescrito en el que criticaba el enfoque de seguridad de OpenAI provocó tal ira en Altman que éste intentó apartarla de la junta.

En el último año, el compromiso de OpenAI con la seguridad parece haber menguado. El repositorio de chatbot de la empresa se ha visto plagado de spam y supuestamente ha extraído datos de YouTube, violando las condiciones de servicio de la plataforma. Además, OpenAI ha albergado abiertamente la ambición de permitir que su IA genere contenido explícito. Estos acontecimientos han llevado a un número creciente de investigadores de la seguridad de OpenAI a creer que sus esfuerzos estarían mejor respaldados en otro lugar.

Más allá de la OpenAI: un panorama de avances de la IA

Aunque las luchas internas de OpenAI han dominado las noticias recientes, el campo de la IA sigue siendo testigo de avances significativos en diversos ámbitos:

OpenAI y Reddit: En un acontecimiento aparte, OpenAI llegó a un acuerdo con Reddit para aprovechar los datos de la plataforma social para entrenar sus modelos de IA. Esta colaboración fue recibida con entusiasmo por Wall Street, pero es posible que los usuarios de Reddit no se muestren tan receptivos.

Escaparate de la IA de Google: Google celebró esta semana su conferencia anual de desarrolladores I/O, en la que desveló una plétora de productos impulsados por la IA. Estos abarcaron desde el generador de vídeo Veo y los resultados de búsqueda potenciados por IA hasta los avances en las aplicaciones de chatbot Gemini de Google.

Anthropic recluta a una estrella de la tecnología: Anthropic, un competidor en la carrera de la IA, anunció el nombramiento de Mike Krieger, cofundador de Instagram y cofundador de la aplicación de noticias personalizadas Artifact, recientemente adquirida, como su primer Director de Producto. Krieger dirigirá los esfuerzos de Anthropic tanto para consumidores como para empresas.

IA para las mentes jóvenes: Anthropic también anunció que empezaría a permitir a los desarrolladores crear aplicaciones y herramientas centradas en los niños y potenciadas por sus modelos de IA, siempre que se adhieran a unas directrices específicas. Cabe destacar que, a diferencia de Anthropic, algunos de sus rivales, como Google, no permiten la integración de su IA en aplicaciones diseñadas para los usuarios más jóvenes.

El arte de hacer películas con IA: A principios de este mes, la startup de IA Runway organizó su segundo festival de cine sobre IA. Una de las conclusiones clave fue la constatación de que los momentos más impactantes suelen provenir de elementos humanos y no de la propia IA.

Navegando por la frontera: marcos de seguridad y consideraciones éticas

Es innegable que las salidas del equipo de seguridad de OpenAI han puesto la seguridad de la IA en el punto de mira. Google DeepMind, otro actor destacado en este campo, está forjando activamente un camino a seguir con su «Marco de Seguridad Fronteriza». Este marco esboza una estrategia de tres vertientes para identificar y mitigar los riesgos potenciales asociados a las capacidades avanzadas de la IA, que abarcan desde los generadores de malware fuera de control hasta el uso indebido más general de la IA.

He aquí un desglose del Marco de Seguridad Fronteriza:

Identificación: El marco hace hincapié en la importancia de identificar de forma proactiva las capacidades potencialmente dañinas dentro de un modelo mediante la simulación de su trayectoria de desarrollo.

Evaluación: Las evaluaciones periódicas son cruciales para detectar cuándo los modelos alcanzan «niveles de capacidad críticos» conocidos que podrían suponer amenazas para la seguridad.

Mitigación: Una vez identificados los riesgos, es necesario aplicar un plan de mitigación para evitar el acceso no autorizado (ya sea por parte de agentes externos o del propio modelo) o escenarios de despliegue problemáticos.

Chris Bran

Chris Bran tiene un fuerte compromiso con el periodismo honesto y accesible. Con su orientación, Daily Blips se esfuerza por ser una fuente de noticias de confianza para todos.

Deja una respuesta

Tu dirección de correo electrónico no será publicada. Los campos obligatorios están marcados con *

Botón volver arriba