¿Cuánto sabe la inteligencia artificial sobre derecho colombiano?
DOI:
https://doi.org/10.21830/19006586.1380Palabras clave:
derecho, ética profesional, evaluación de conocimientos, inteligencia artificial, procesamiento de lenguaje naturalResumen
Este articulo evalúa la capacidad de tres modelos de lenguaje de gran tamaño (LLM) —ChatGPT 3.5, ChatGPT 4 y Gemini Pro— para responder consultas legales en el contexto colombiano. A través de un análisis exhaustivo de respuestas a preguntas en cinco áreas del derecho, se encontró que, si bien ChatGPT 4 obtuvo los mejores resultados generales, ninguno de los modelos logró alcanzar un nivel de precisión aceptable para su aplicación práctica en el ámbito jurídico. Los resultados sugieren que, aunque los LLM ofrecen un gran potencial para automatizar tareas legales, su uso en la práctica requiere de una supervisión humana rigurosa y de un desarrollo continuo de los modelos. Este estudio contribuye al debate sobre la ética y las implicaciones legales de la inteligencia artificial en el ámbito jurídico, destacando la necesidad de establecer marcos regulatorios adecuados para garantizar un uso responsable de estas tecnologías.
Descargas
Referencias bibliográficas
Abderahman, R., Karim, R., Appolloni, A., Treiblmaier, H., & Iranmanesh, M. (2024). Exploring the impact of ChatGPT on education: A web mining and machine learning approach. The International Journal of Management Education 22 (1): 100932. https://doi.org/10.1016/j.ijme.2024.100932.
Al Shloul, T., Mazhar, T., Abbas, Q., Iqbal, M., Yasin Ghadi, Y., Shahzad, T., Mallek, F., & Hamam, H. (2024). Role of activity-based learning and ChatGPT on students’ performance in education. Computers and Education: Artificial Intelligence 6 (junio): 100219. https://doi.org/10.1016/j.caeai.2024.100219.
Billion Polak, P., Prusa, J.D. & Khoshgoftaar, T.M. Low-shot learning and class imbalance: a survey. J Big Data 11, 1 (2024). https://doi.org/10.1186/s40537-023-00851-z
Bommarito, M.J., & Katz, D.M. (2022). GPT Takes the Bar Exam. SSRN Scholarly Paper. Rochester, NY. https://doi.org/10.2139/ssrn.4314839.
Castellanos-Cortés, O. E., & Arévalo-Robles, G. A. (2024). Explorando el impacto del metaverso en los derechos humanos: desafíos, amenazas y perspectivas. Revista Republicana, 36, 37-53.
Fan, Lizhou, Lingyao Li, Zihui Ma, Sanggyu Lee, Huizi Yu, & Libby Hemphill (2023). A Bibliometric Review of Large Language Models Research from 2017 to 2023. arXiv. https://doi.org/10.48550/arXiv.2304.02020.
Faúndez-Ugalde, A., & Mellado-Silva, R. (2023). Use of Robotic Process Automation by Tax Administrations and Impact on Human Rights. Revista Chilena de Derecho y Tecnología 12 (julio). https://doi.org/10.5354/0719-2584.2023.65457.
Katz, D.M., M.J. Bommarito, S. Gao, & P. Arredondo (2024). GPT-4 Passes the Bar Exam. Philosophical Transactions of the Royal Society A: Mathematical, Physical and Engineering Sciences 382 (2270). https://doi.org/10.1098/rsta.2023.0254.
Latif, E., & X. Zhai (2024). Fine-tuning ChatGPT for automatic scoring. Computers and Education: Artificial Intelligence 6. https://doi.org/10.1016/j.caeai.2024.100210.
Matiz-Rojas, A. H., & Fernández-Camargo, J. A. (2023). Del uso de la inteligencia artificial como medio y método en los conflictos armados. Revista Científica General José María Córdova, 21(42), 525–549. https://doi.org/10.21830/19006586.1151
Morocco-Clarke, A., Abubakar Sodangi, F., & Momodu, F. (2024). The Implications and Effects of ChatGPT on Academic Scholarship and Authorship: A Death Knell for Original Academic Publications? Information & Communications Technology Law, enero. https://www.tandfonline.com/doi/abs/10.1080/13600834.2023.2239623.
Pichai, S., & Hassabis, D. (2023). Introducing Gemini: Our Largest and Most Capable AI Model. Google. 6 de diciembre de 2023. https://blog.google/technology/ai/google-gemini-ai/.
Sigman, M., & Bilinkis, S. (2023). Artificial: La nueva inteligencia y el contorno de lo humano. Debate.
Vásquez, C., & Toro-Valencia, J. (2021). El derecho al control humano: Una respuesta jurídica a la inteligencia artificial. Revista Chilena de Derecho y Tecnología 10 (2): 211-28. https://doi.org/10.5354/0719-2584.2021.58745.
Vaswani, A., Shazeer, N., Parmar, J., Uszkoreit, L., Jones, A.N., Gomez, Ł., Kaiser. L., & Polosukhin, I. (2017). Attention Is All You Need. Neural Information Processing Systems 5999-6009.
Publicado
Cómo citar
Número
Sección
Licencia
Derechos de autor 2024 Revista Científica General José María Córdova
Esta obra está bajo una licencia internacional Creative Commons Atribución-NoComercial-SinDerivadas 4.0.
| Estadísticas de artículo | |
|---|---|
| Vistas de resúmenes | |
| Vistas de PDF | |
| Descargas de PDF | |
| Vistas de HTML | |
| Otras vistas | |
