Cryptelio

Astra para Derecho 6.2 de OpenAI Logra un 20.8% en el Benchmark LAB-AA de Harvey

Cryptelio Editorial Publicado 17 nov. 2026 · 19:03 UTC
Astra para Derecho 6.2 de OpenAI Logra un 20.8% en el Benchmark LAB-AA de Harvey

Astra para Derecho 6.2 de OpenAI se ha posicionado como el líder en el benchmark LAB-AA v1.1 de Harvey, alcanzando una tasa de aprobación total con restricción de alucinaciones del 20.8%. Esta puntuación coloca a Astra para Derecho 6.2 por delante de todos los demás modelos evaluados, incluyendo el propio GPT-6.2 Astra de OpenAI, que registró un 15.0%.

El benchmark LAB-AA v1.1 consiste en 120 tareas privadas derivadas de escenarios legales del mundo real en 24 áreas de práctica, asegurando que los modelos no puedan depender únicamente de su experiencia en dominios específicos. El rendimiento de Astra para Derecho 6.2 refleja una mejora significativa respecto a su predecesor, con una diferencia de 5.8 puntos porcentuales. Además, registró una tasa de alucinaciones notablemente baja de 0.03 por tarea, la mejor entre los modelos evaluados.

La actualización, anunciada el 17 de noviembre de 2026, también amplía el acceso a Astra para Derecho a través del Programa de Acceso Confiable de OpenAI para clientes de ChatGPT Enterprise. OpenAI planea ofrecer el modelo a través de API a socios, incluyendo a Harvey y Legora. Harvey ha expresado su entusiasmo por la actualización, señalando que Astra para Derecho 6.2 produce informes preferidos por los jueces sobre los de su predecesor aproximadamente el 90% de las veces.

En una evaluación separada por el Benchmark de Investigación Legal de Vals AI, Astra para Derecho logró una puntuación de crédito completo del 53.8% en preguntas de investigación, un aumento desde casi el 46% en septiembre. Si bien estos avances son prometedores, es importante señalar que una tasa de aprobación total del 20.8% indica que incluso el mejor modelo en este benchmark no logró completar aproximadamente cuatro de cada cinco tareas bajo criterios de puntuación estrictos.

FAQ

¿Qué es el benchmark Harvey LAB-AA?

El benchmark Harvey LAB-AA es una evaluación estandarizada que consiste en 120 tareas privadas derivadas de escenarios legales del mundo real en 24 áreas de práctica, diseñada para evaluar el rendimiento de modelos de IA en contextos legales.

¿Cómo se desempeñó Astra for Law 6.2 en el benchmark Harvey LAB-AA?

Astra for Law 6.2 logró una tasa de aprobación total con restricción de alucinaciones del 20.8%, convirtiéndose en el modelo líder en el benchmark, superando a otros modelos evaluados, incluido el GPT-6.2 Astra de OpenAI.

¿Qué mejoras se realizaron en Astra for Law 6.2 en comparación con su predecesor?

Astra for Law 6.2 muestra una mejora significativa con un aumento de 5.8 puntos porcentuales en la tasa de aprobación total y una tasa de alucinaciones notablemente baja de 0.03 por tarea.

¿Cuál es la importancia de la tasa de alucinaciones en los modelos de IA?

La tasa de alucinaciones indica con qué frecuencia un modelo de IA genera información incorrecta o sin sentido. Una tasa de alucinaciones más baja sugiere un modelo más confiable y preciso.

¿Cómo pueden los usuarios acceder a Astra for Law 6.2?

Astra for Law 6.2 está disponible a través del Programa de Acceso Confiable de OpenAI para clientes de ChatGPT Enterprise, y OpenAI planea ofrecer el modelo a través de API a socios, incluidos Harvey y Legora.

Relacionadas

Comentarios

Los comentarios se moderan antes de publicarse.

Aún no hay comentarios — sé el primero.

Comentar como invitado

Captcha