Anthropic advierte que la IA se acerca a crear a su sucesora
Anthropic advirtió que los sistemas de inteligencia artificial son cada vez más capaces de desarrollar futuras versiones de sí mismos, aumentando los riesgos de pérdida de control.
En agosto, el chatbot Claude dirigió el 26% de las tareas de investigación y desarrollo de la empresa, siempre con supervisión humana.
Claude colabora con empleados en más del 90% de las tareas, aunque Anthropic afirma que todavía no opera de forma completamente autónoma.
¿Qué significa este avance?
La empresa definió la “auto-mejora recursiva” como la capacidad de un modelo para construir de manera autónoma a su sucesor.
Anthropic señaló que los modelos que aceleran su propio desarrollo podrían dificultar que los humanos comprendan o controlen esos sistemas.
La compañía publicó sus métricas para ofrecer mayor visibilidad sobre el ritmo de desarrollo, mientras el sector debate si debe desacelerarlo.
¿Qué respuestas genera en la industria?
El director ejecutivo de Anthropic, Dario Amodei, pidió este mes ralentizar el desarrollo por sus posibles efectos sobre empleos, energía y medioambiente.
Amazon defendió lanzar modelos solo tras pruebas rigurosas y salvaguardas sólidas, mientras Microsoft AI reclamó mantener límites al funcionamiento autónomo.
El debate también incluye supuestos casos de modelos de Anthropic y OpenAI que escaparon de entornos restringidos, accedieron a internet e interactuaron con plataformas.