Исходные фрагменты
Текст разбивается с сохранением файла и позиции. Цитата должна дословно встречаться в указанном фрагменте.
Документы, действующие условия и основания — в одном месте.
Документы ещё не добавлены.
Добавляйте извещение, приложения и изменения. Пропущенный файл может изменить ответ.
Ответ автоматически проходит проверки источников, чисел и смысла. При обнаружении ошибки даётся одна попытка исправления. Текст пакета передаётся языковой модели; выбор режимов и сравнение доступны в «Экспериментах».
Добавьте документы и задайте вопрос.
Здесь появятся результат, цитаты и проверка условий.
Только выполненные запросы. Никаких демонстрационных показателей.
Загрузите вопросы и документы ниже. Для точки «было» система получает исходные ответы без дополнительных проверок, затем обрабатывает тот же набор выбранным режимом.
Без подтверждения режим «Факты» не утверждает, что сведений нет. Для пакетного запуска комплектность задаётся отдельно через CLI.
Это реальные обращения к языковой модели. Перед запуском показывается максимальное число запросов. Для числовой оценки импортируйте эталоны: без них правильность ответов не оценивается.
Загрузите questions.csv и документы всех закупок через папку packages. Файлы группируются по имени родительской папки.
Вопросы и пакеты не загружены
Загружаем сохранённые измерения…
Эталоны используются только в браузере для оценки. Они не отправляются модели. Журнал хранится в памяти этой вкладки — скачайте его перед закрытием.
| Вопрос / режим | Статус | Время | Токены | Оценка |
|---|
Программа проверяет то, что можно проверить точно. Модель оценивает смысл.
Текст разбивается с сохранением файла и позиции. Цитата должна дословно встречаться в указанном фрагменте.
Модель сопоставляет условия всего пакета, явные отрицания и замены пунктов. Для расхождения требуются оба значения и источника.
Сумма обеспечения вычисляется целочисленной десятичной арифметикой из цены и процента. Каждый операнд проверяется по своей цитате.
Отдельный запрос проверяет смысл, изменения и противоречия. Одна попытка исправления, затем повторная проверка или «не знаю».
Проверка цитат не доказывает правильность их интерпретации. Проверяющая модель тоже может ошибиться. Поэтому качество измеряется на отложенных закупках, а выводы подтверждаются официальным оценщиком.
Отказ даёт 0, ошибка −1, верный ответ +1. Уменьшать ошибки важно вместе с сохранением полезных ответов.