No te pierdas esta conferencia/Workshop: Evaluación práctica de LLMs: Cómo elegir el modelo adecuado para tu app.

En la actualidad, el rápido avance de los Modelos de Lenguaje Grandes (LLMs) presenta un desafío: la abundancia de opciones y características dificulta la selección del modelo adecuado.

Más allá de los benchmarks estándar, es crucial realizar evaluaciones personalizadas para determinar el rendimiento real de estos modelos en aplicaciones específicas.

Esta charla se centrará en la importancia y las metodologías de evaluación de LLMs. Abordaremos:

1. Fundamentos de la evaluación de LLMs: Por qué es esencial evaluar estos modelos.

2. Casos de uso: Ejemplos prácticos de la evaluación de LLMs en diversos escenarios.

3. Métricas de evaluación: Un análisis de métricas generales, métricas de NLP, métricas para agentes y métricas para RAGs.

Demostraciones prácticas:

• Evaluación de resultados sin conjuntos de datos predefinidos.

• Evaluación de resultados utilizando conjuntos de datos.

• El objetivo es destacar que la evaluación debe ser un componente crítico en el proceso de selección de LLMs, permitiendo comparaciones objetivas entre modelos y proveedores, y asegurando que la elección se alinee con las necesidades específicas de cada aplicación.