llm/core/evals

Core Evals

Общие правила оценки качества моделей.

Eval-наборы должны позволять сравнить:

• базовую модель;
• модель с RAG;
• модель с адаптером;
• разные версии адаптеров.

Для каждого плагина могут быть собственные eval-наборы.