15 mar (Reuters) – La inteligencia artificial ahora puede superar a la mayoría de los graduados de la facultad de derecho en el examen de la barra, la extenuante prueba de dos días que los aspirantes a abogados deben aprobar para ejercer la abogacía en Estados Unidos, según un nuevo estudio publicado el miércoles.
GPT-4, el modelo de IA actualizado lanzado esta semana por OpenAI respaldado por Microsoft, obtuvo 297 en el examen de la barra en un experimento realizado por dos profesores de derecho y dos empleados de la empresa de tecnología legal Casetext.
Eso coloca a GPT-4 en el percentil 90 de los examinados reales y es suficiente para ser admitido para ejercer la abogacía en la mayoría de los estados, encontraron los investigadores.
El examen de la barra evalúa el conocimiento y el razonamiento e incluye ensayos y pruebas de desempeño destinadas a simular el trabajo legal, así como preguntas de opción múltiple.
“Los modelos de lenguaje extenso pueden cumplir con el estándar aplicado a los abogados humanos en casi todas las jurisdicciones de los Estados Unidos al abordar tareas complejas que requieren un conocimiento legal profundo, comprensión de lectura y capacidad de escritura”, escribieron los autores.
Últimas actualizaciones
Ver 2 historias más
Hace menos de cuatro meses, dos de los mismos investigadores concluyeron que el anterior modelo de lenguaje grande de OpenAI, ChatGPT, no logró aprobar el examen de grado, lo que destaca la rapidez con la que está mejorando la tecnología.
El GPT-4 más nuevo acertó casi el 76 % de las preguntas de opción múltiple del examen de la barra, frente al 50 % de ChatGPT, superando al examinado humano promedio en más del 7 %.
La Conferencia Nacional de Examinadores de Abogados, que diseña la sección de opción múltiple, dijo en un comunicado el miércoles que los abogados tienen habilidades únicas adquiridas a través de la educación y la experiencia que «AI actualmente no puede igualar».
El coautor del estudio, Daniel Martin Katz, profesor de la Facultad de Derecho de Chicago-Kent, dijo en una entrevista que estaba muy sorprendido por la capacidad de GPT-4 para producir ensayos y respuestas de pruebas de desempeño en gran medida relevantes y coherentes.
“Escuché a mucha gente decir: ‘Bueno, puede que obtenga la opción múltiple, pero nunca los ensayos’”, dijo Katz.
La IA también se ha desempeñado bien en otras pruebas estandarizadas, incluidos el SAT y el GRE, pero el examen de la barra ha atraído más atención. OpenAI promocionó su puntaje de aprobación cuando anunció el último modelo el martes.
El tutor del examen de la barra, Sean Silverman, atribuyó el enfoque en el examen de la barra a su dificultad ampliamente reconocida. La tasa de aprobación por primera vez de este año en el examen de licencia de abogado fue del 78% entre los examinados que pasaron tres años en la facultad de derecho.
Silverman dijo que la gente puede estar menos impresionada al saber que AI puede pasar una prueba diseñada para estudiantes de secundaria, como el SAT, «en lugar de la prueba para convertirse en abogado».
Información de Karen Sloan Edición de David Bario
Fuente Reuters.
karen sloan
