Seminario de Inteligencia Artificial y Ciencia de Datos. Juan Manuel Pérez: "De word2vec a ChatGPT: un repaso a la última década en NLP"

Título del evento: Seminario de Inteligencia Artificial y Ciencia de Datos

Día y Horario: martes 13 de Junio, 11 a 12:30 h

Speaker: Juan Manuel Pérez, UBA/CONICET/UDESA

Modalidad: Híbrida

En modalidad presencial los esperamos en el Garage del Vehículo Autónomo en Campus Victoria (Vito Dumas 284 - Victoria, Pcia. de Bs. As.) 

Una vez finalizada la inscripción quienes deseen participar vía zoom, recibirán el link correspondiente en su correo electrónico.

Título de la charla:

De word2vec a ChatGPT: un repaso a la última década en NLP

Abstract:

En los últimos diez años, el avance en el área del procesamiento del lenguaje natural (NLP por sus siglas en inglés) ha sido meteórico, transformando nuestra interacción con estas tecnologías y expandiendo sus fronteras a un ritmo impresionante. Desde la irrupción de word2vec hasta los modelos de lenguaje como BERT, GPT y ChatGPT, la capacidad de estos modelos de (aparentemente) entender y generar lenguaje ha avanzado a un paso sorprendente, logrando masificar el uso de estas tecnologías: desde análisis de sentimientos a agentes conversacionales, pasando por traducción automática y búsqueda de información. 

La disponibilidad de grandes cantidades de datos y el acceso a dispositivos de cálculo especializados –como las GPUs y TPUs– han sido factores clave en el progreso del NLP. Estos avances tecnológicos, sumados al desarrollo de algoritmos eficientes para entrenar redes neuronales, han permitido entrenar modelos de lenguaje más grandes y profundos, llevándolos a una escala difícil de imaginar tiempo atrás. Estos “grandes modelos de lenguaje” (LLMs por sus siglas en inglés) son –o aparentan ser– capaces de capturar patrones sutiles y generar representaciones ricas del lenguaje, y desempeñarse en múltiples tareas con cierta solvencia.

En esta charla haremos un recorrido de los avances más notables en esta década. Además de explorar algunos de estos hitos, comentaremos algunas áreas de investigación actuales en esta disciplina.

Bio: 

Juan Manuel Pérez  es Doctor en Ciencias de la Computación por la Universidad de Buenos Aires. Investigador Postdoctoral en el Instituto de Ciencias de la Computación, Facultad de Ciencias Exactas, UBA/CONICET, y Profesor en la Maestría en Ciencias de Datos de la Universidad de San Andrés. Trabaja en técnicas de detección de discurso de odio y minería de opiniones en redes sociales utilizando técnicas de NLP.