evidentlyai/evidently

Что это?

Ключевые возможности

• 01Встроенные метрики для обнаружения дрейфа и оценки качества данных, классификации, регрессии, ранжирования и рекомендаций.
• 02Оценка LLM с помощью текстовых дескрипторов и оценщиков LLM-as-a-judge.
• 03Reports и Test Suites с условиями pass/fail для CI/CD и регрессионных проверок.
• 04Экспорт результатов в HTML, JSON или словари Python.
• 05Самостоятельно разворачиваемый интерфейс мониторинга для отслеживания метрик во времени.

Сценарии использования

• Проверка того, изменилось ли распределение входных данных в эксплуатации относительно обучающих данных.
• Запуск регрессионных тестов для ответов LLM или результатов RAG в CI-пайплайне.
• Проверка качества данных перед обучением модели или запуском пакетных пайплайнов.
• Мониторинг производительности развернутой ML-модели во времени с помощью дашборда.

Быстрый старт

1. 1

   Установите Evidently из PyPI

   pip install evidently
2. 2

   Запустите интерфейс Evidently с демонстрационными проектами

   evidently ui --demo-projects all
3. 3

   Откройте localhost:8000 в браузере, чтобы перейти к интерфейсу

Что важно знать

• !Некоторые расширенные функции, например оповещения, управление наборами данных и пользователями, а также оценка без кода, доступны только в платном Evidently Cloud, но не в версии с открытым исходным кодом.

Темы

Частые вопросы

Что такое evidently?

Открытый Python-фреймворк для оценки, тестирования и мониторинга ML- и LLM-систем: более 100 встроенных метрик и обнаружение дрейфа. Evidently — открытая Python-библиотека для оценки, тестирования и мониторинга систем машинного обучения и LLM — от экспериментов до эксплуатации. Она работает с табличными и текстовыми данными и позволяет оценивать прогнозные задачи, такие как классификация и регрессия, а также генеративные задачи, например RAG и качество ответов LLM.

evidently можно использовать бесплатно? Какая у него лицензия?

evidently распространяется с открытым исходным кодом под лицензией Apache-2.0. Перед использованием в коммерческих продуктах проверьте условия лицензии.

evidently всё ещё поддерживается?

Активно поддерживается. Последний коммит в evidently — 29 сент. 2026 г..

Для чего можно использовать evidently?

Проверка того, изменилось ли распределение входных данных в эксплуатации относительно обучающих данных. Запуск регрессионных тестов для ответов LLM или результатов RAG в CI-пайплайне. Проверка качества данных перед обучением модели или запуском пакетных пайплайнов. Мониторинг производительности развернутой ML-модели во времени с помощью дашборда.

Как установить evidently?

Установите Evidently из PyPI: pip install evidently Запустите интерфейс Evidently с демонстрационными проектами: evidently ui --demo-projects all Откройте localhost:8000 в браузере, чтобы перейти к интерфейсу

Где скачать evidently?

Исходный код и инструкции по установке — на GitHub: https://github.com/evidentlyai/evidently