Качество и покрытие

Качество и покрытие Janus.Guru

Здесь указан текущий публичный срез: доступные корпуса, объём документов и фрагментов, пройденный retrieval gate и зоны, которым нужна редакционная работа.

Проверяем текущий реестр корпусов…

Метрики

Что проверено автоматически

Benchmark измеряет качество поиска по подключённым корпусам, а не полноту всей юридической базы Казахстана. Хорошие метрики не означают, что покрытие завершено.

Контроль поиска

Версионируемое качество выдачи

  • проверочные вопросы хранятся в versioned fixture
  • availability, Hit@1/3/5, Recall@5, MRR@5 и nDCG@5 считаются для каждого запуска
  • публичная страница не подменяет текущий срез старым hard-coded score
Гигиена источников

Контроль источников

  • стабильный upstream document id и source anchor сохраняются в ссылке
  • retrievable и архивные документы показываются раздельно
  • блокеры lifecycle видны до production promotion

Структура данных

Где находится поисковый объём

Диаграмма строится по публичному реестру и показывает индексированные фрагменты. Так проще заметить дисбаланс корпусов до запуска сценария.

Живой реестр

Индексированные фрагменты по корпусам

Загружаем реестр…
  1. Загрузка данных

Корпуса

Текущая база знаний

Открытый контур включает несколько типов данных с разной зрелостью. Учитывайте это при пилоте и внешней демонстрации.

KRK

Конституция Республики Казахстан

ID: krk_2026

69 документов, 1 636 фрагментов, языки ru / kk / en. Самый аккуратный демонстрационный слой для конституционных вопросов.

Реестр: 2026-03-26

Статус источника: не зафиксирован в публичном реестре

Готовность: ожидает фиксации метаданных

Владелец источника: не зафиксирован

Проверка источника: не зафиксирована

Покрытие: требуется уточнение для production-корпуса

Следующий gate: требуется уточнение

До production-ready: обязательные gates ожидают закрытия

Открыть корпус
RE

Публичные тезисы и выступления

ID: reestr_texts

Итоги загрузятся из живого реестра; язык ru. Публичные документы и атомизированные тезисы Qaz.Vision собраны в компактные фрагменты одного документа; пустые редакционные материалы не становятся поисковым доказательством.

Реестр обновляется

Статус источника загружается

Готовность загружается

Владелец источника загружается

Проверка источника загружается

Покрытие загружается

Следующий gate загружается

Production-ready ограничения загружаются

Открыть корпус
REG

Регионы Казахстана

ID: regions_kz

1 документ, 181 фрагмент, язык ru. Региональный слой работает как точная демонстрационная база для карты и сравнений.

Реестр: 2026-03-27

Статус источника: не зафиксирован в публичном реестре

Готовность: ожидает фиксации метаданных

Владелец источника: не зафиксирован

Проверка источника: не зафиксирована

Покрытие: требуется уточнение для production-корпуса

Следующий gate: требуется уточнение

До production-ready: обязательные gates ожидают закрытия

Открыть корпус
TAX

Налоговый кодекс 2025

ID: tax_code_2025

1 документ, 848 фрагментов, язык ru. Налоговый слой сейчас демонстрирует точечную работу с большим доменным документом.

Реестр: 2026-03-27

Статус источника: не зафиксирован в публичном реестре

Готовность: ожидает фиксации метаданных

Владелец источника: не зафиксирован

Проверка источника: не зафиксирована

Покрытие: требуется уточнение для production-корпуса

Следующий gate: требуется уточнение

До production-ready: обязательные gates ожидают закрытия

Открыть корпус

Ограничения

Что нельзя выдавать за готовое покрытие

Следующий слой данных

Что добавлять дальше

Приоритет не в количестве фрагментов, а в проверяемых корпусах с понятным происхождением и контрольными вопросами.

  1. Официальные НПА и редакции документовРасширить authoritative legal corpus, добавить версии, даты действия и ссылки на первоисточник.
  2. Практические материалыСудебная практика, разъяснения госорганов, FAQ услуг и процедур после отдельной проверки пригодности.
  3. QazLake/QazGeo/QazFinance-слоиПодключать только через provenance, language coverage и retrieval-eval gates, чтобы демонстрации не превращались в набор неподтвержденных цифр.

Практический вывод

Сильная RAG-система начинается с честного покрытия

Janus уже показывает рабочий retrieval-контур, но следующий рост должен идти через корпусную дисциплину, benchmark qrels и публично понятные ограничения.