Competencias internacionales para generar avances en inteligencia artificial

Mario Graff

INFOTEC

INFOTEC

Aguascalientes, México

INFOTEC

Centro Público de Investigación del Gobierno Federal, que contribuye a la Transformación Digital de México, a través de la investigación, la innovación, la formación académica y el desarrollo de productos y servicios TIC. Sus alcances abarcan al sector público y privado, habilitando caminos que conduzcan hacia un México moderno y de inclusión digital.

Introducción

Definiciones

Inteligencia Artificial (IA)

Conjunto de teorías, métodos y algoritmos para el desarrollo y estudio de sistemas que presentan un comportamiento que sería identificado como inteligente.

Aprendizaje Computacional

Aprendizaje Computacional es una subárea de Inteligencia Artificial que estudia el desarrollo e implementación de algoritmos capaces de aprender de datos de manera autónoma sin haber sido explícitamente programados.

Procesamiento de Lenguaje Natural

Conjunto de teorías, métodos y algoritmos para el desarrollo y estudio de sistemas que permitan el entendimiento, generación y manipulación del lenguaje humano.

Percepción de Inteligencia Artificial (IA)

Así la vemos

Así está

Aprendizaje computacional

Machine Learning

Tipos de aprendizaje computacional

  • Aprendizaje no supervisado
  • Aprendizaje supervisado
  • Aprendizaje por refuerzo

Aprendizaje no supervisado

Aprendizaje por refuerzo

  • Juegos
  • Actividades
  • Retroalimentación al final

Clasificadores lineales

Árboles de decisión

Problem

Classifier

Competencias

Definición

Jair Escalante y Kruchinina (2023)

Una competencia académica tiene el objetivo de responder preguntas científicas que idealmente empujen la frontera del conocimiento y tengan un impacto duradero y/o conjunto de prueba de referencia.

Ley de longitud de 1714

Una serie de premios monetarios para la persona que encontrara un método simple y práctico para la determinación precisa de la longitud geográfica de un barco en alta mar.

Sociales

Longitude Price

xprice

Robots

Conducción autónoma - 2004

Defense Advanced Research Projects Agency (DARPA)

  • 100 equipos
  • Un equipo logró 12km
  • 195 equipos
  • 5 equipos terminaron los 212km

Siguieron, conduciendo en la ciudad 2007… en simuladores (e.g, CARLA)

RoboCup

Iniciando 1990

Competencia de Netflix - 2000

1M al equipo ganador

  • Sistema de recomendación
  • Mejorar su sistema
  • Ganador mejoro en 10%

Aplicadas a la industria

ECMLPKDD - 1999

Discovery Challenge

Kaggle - 2009

Kaggle

Académicas

Codabench - 2013

Pavao et al. (2023)

Aprendizaje Computacional

ImageNet Large Scale Visual Recognition Challenge

  • Clasificación de imágenes
  • 1,000 categorías
  • Millones de imágenes de entrenamiento
  • Tercera edición nació AlexNet
  • CNN, VGG, GoogLeNet

AutoML 2025

  • Automatizar el ciclo de aprendizaje computacional
  • Competencias 2015 - 2018
  • Datos tabulares

ICDAR - 1991

ICDAR 2025

Text Retrieval Conference (TREC) - 1990

TREC

Conference and Labs of the Evaluation Forum - 2000

CLEF

Semantic Evaluation (SemEval)

SemEval 2025 (2026)

  • Semantic Relations
    • Entity-aware machine translation
  • LLM Capabilities
    • Unlearning sensitive content from LLM
  • Fact Checking and Knowledge Verification
    • Question-Answering over Tabular Data
  • Knowledge Representation and Reasoning
    • Bringing the Gap in Text-Based Emotion Detection

IberLEF

IberLEF 2025

FIRE 2024

Dravidian-CodeMix

Conclusiones

Sociales

Robots

Aplicadas a la industria

Multimodal

Texto principalmente

Plataformas

Referencias

Jair Escalante, Hugo, y Aleksandra Kruchinina. 2023. «Academic competitions». arXiv e-prints, arXiv-2312.
Pavao, Adrien, Isabelle Guyon, Anne-Catherine Letournel, Dinh-Tuan Tran, Xavier Baro, Hugo Jair Escalante, Sergio Escalera, Tyler Thomas, y Zhen Xu. 2023. «CodaLab Competitions: An Open Source Platform to Organize Scientific Challenges». Journal of Machine Learning Research 24 (198): 1-6. http://jmlr.org/papers/v24/21-1436.html.

¡Gracias!