LLMOps & Evaluation: из песочницы в продакшн

Суть
Сборка рабочего контура для LLM-приложения: от RAG и агентов до оценки качества, мониторинга и контроля затрат
На выходе
Построить RAG-систему с автоматической оценкой качества; Настроить метрики и мониторинг; Сравнить версии промптов в A/B-тестах; Подготовить итоговый отчёт; Собрать собственный фреймворк оценки
Навыки
LangSmith · Ragas · OpenAI Evals · PromptLayer · A/B-тестирование промптов · Настройка алёртов на дрейф
Предзаказ без оплаты

Как работает предзаказ

Запись бесплатная: сейчас ничего оплачивать не нужно.

  1. 1
    Запишитесь бесплатно

    Оставьте почту — банковская карта и оплата не нужны.

  2. 2
    Дождитесь старта

    Мы отправим письмо, когда складчина начнётся.

  3. 3
    Решите после старта

    Только тогда можно внести взнос и присоединиться к складчине.