Z.ai ha logrado mejorar el rendimiento de su modelo de inteligencia artificial GLM-5. 3 en la programación, lo que también ha resultado en un aumento significativo en sus capacidades de ciberseguridad. Durante el entrenamiento, que consistió en horas de trabajo en entornos complejos y la resolución de problemas, GLM-5.3 mostró una mejora en la detección y explotación de vulnerabilidades, algo que la compañía no esperaba.
El modelo GLM-5.3 no se basa en un nuevo modelo base, sino que utiliza el mismo que la corporación-5.2, con mejoras que provienen del post-entrenamiento. Z.ai ha ampliado el número de entornos y diversificado las tareas para entrenar al sistema en trabajos que se asemejan a los que un ingeniero realizaría.
La mejora en ciberseguridad no fue un efecto secundario; Z.ai incluyó intencionalmente datos y entornos para descubrir vulnerabilidades en el entrenamiento. Lo inesperado fue el avance que tuvo esta faceta al escalar el entrenamiento.
CyberGym, una plataforma que mide la capacidad de reproducir vulnerabilidades, y ExploitBench y ExploitGym, que miden la habilidad para explotarlas, mostraron un patrón claro de mejora en la institución-5.3. En CyberGym, la corporación-5.3 aumentó su rendimiento del 77,2% a un 84,5%, mientras que en ExploitBench pasó del 24,4% al 54,4%.
La comparación con Mythos 5, una versión de Claude Fable 5 sin salvaguardias de ciberseguridad, pone en perspectiva el avance de la institución-5.3. Aunque la corporación-5.3 alcanza un 84,5% en CyberGym, ligeramente por encima del 83,8% de Mythos 5, en ExploitBench y ExploitGym, la institución-5.3 se queda atrás, completando 105 tareas frente a 181 de Mythos 5.
A pesar de que la corporación-5.3 puede competir en las primeras fases del análisis de vulnerabilidades, queda por detrás en la conversión de estas en ataques funcionales. Reuters advierte que los resultados no han sido verificados de forma independiente, lo que es un aspecto importante a considerar en la evaluación de la efectividad del modelo.
Etiquetas: Tecnología, Ciberseguridad, Tecnología · Ciberseguridad global
About the Author
