GDG #33 : Réduire la latence des Agents et des LLMs en production : Architecture AIOps & LLMOps

Le Village By CA Le Mans, 19 Boulevard Marie et Alexandre Oyon, Le Mans, 72100

GDG Le Mans

💡 Vous déployez des LLMs ou des agents en production… et la latence explose sous charge ?🎯 Au programme : les patterns d...

Apr 23, 4:30 – 6:30 PM (UTC)

17 RSVP'd

Key Themes

AI

About this event

💡 Vous déployez des LLMs ou des agents en production… et la latence explose sous charge ?

🎯 Au programme : les patterns d’architecture AIOps et LLMOps pour reprendre le contrôle sur la latence :

→ caching sémantique
→ routing multi-modèles
→ streaming (SSE)
→ observabilité
→ redimensionnement du serveur
→ gestion des workers
→ évaluation continue

Speaker

  • Kassoum Sanogo

    Artificial Intelligence and Data Engineer

Partners

Le Village By CA Le Mans logo

Le Village By CA Le Mans

CGI logo

CGI

Organizers

  • Jérémy Voisin

    Apside TOP

    AI Lead & Cloud Architect

  • Nicolas CHAMPION

    GDG Organizer

  • Alexis Dalle

    Apside

    AI Consultant

  • Julien Lesourd

    Freelance

    Headhunter

  • Edwin Simonnet

    Apside TOP

    Tech Lead

  • Khava Ousmanova

    Apside TOP

    GDG Organizer

  • Frédéric Vallejo

    Apside Top

    Cloud Azure Architect