к содержимому

BanchLegal

Воспроизводимая оценка правового рассуждения моделей

Pythonавгуст 2026 г.LegalBench-RUоценка моделейправо

О проекте

В BanchLegal развивается LegalBench-RU — набор русскоязычных юридических задач и инструменты для сопоставимых прогонов моделей. Для корпуса фиксируются версия и состав, ответы оцениваются детерминированным скорером, а панель показывает охват, ошибки и результаты по категориям.

Рейтинг не собирается из неполных или несопоставимых запусков. Опубликованные в проекте оценки считаются предварительными до экспертной юридической проверки заданий и ответов.

Что внутри

  • Версионированный корпус и проверяемый манифест релиза
  • Единый протокол запуска и детерминированный скоринг
  • Панель результатов с охватом и разбором по типам задач