🔍 Запустил агента? А доказать, что он работает?

Миллионы строят AI-агентов, но почти никто не может доказать их эффективность.

TraceVerse — экосистема из четырёх open-source проектов: от трассировки до анализа с помощью ИИ. Она превращает бардак логов в воспроизводимые датасеты, метрики и инсайты. Каждый вызов LLM, тулла или GPU-метрика фиксируется через OpenTelemetry.

Система генерирует 4 структурированных датасета на каждый прогон: результаты, трассировки, лидерборд, метрики. Всё публикуется в Hugging Face Hub. MCP-сервер с 11 инструментами использует Gemini для анализа данных: сравнения моделей, отладки, оценки стоимости. А интерфейс TraceMind-AI позволяет задавать вопросы агенту: "Почему тест упал?" — и получать разбор с цепочкой рассуждений.

Система уже используется в продакшене: 5K+ загрузок TraceVerde, 2K+ — SMOLTRACE.

#ai_agents #mcp #huggingface #observability #evaluations #opentelemetry