Оценки

Платформа превращает обычную работу в сравнимые сигналы качества: быстрые отзывы на ответы, слепые поединки арены с таблицей Elo и повторно используемые наборы, выполняемые как воспроизводимые постоянные задания. Всё работает под вашей идентичностью и учётными данными, а чувствительные снимки, комментарии, промпты и результаты зашифрованы в покое.

Отзывы о сообщениях

Оценка ответа сохраняет больше значка: панель предлагает теги (точность, стиль, неполнота, вред, форматирование) и комментарий, а Libre создаёт снимок обмена — промпта и ответа — чтобы запись пережила правки или удаление чата. На пользователя и сообщение существует одна строка; повторная оценка заменяет её, очистка удаляет. Набор находится в Evaluations → Feedback; администраторы могут читать набор экземпляра для курирования. Приватные сеансы не создают отзывов.

Арена и рейтинг

Поединок отправляет промпт двум выбранным моделям и показывает ответы случайно. Идентичности скрыты до голоса — первая, вторая, ничья или обе плохие — пользователь голосует раз. Рейтинг воспроизводит голоса по порядку через детерминированный Elo (K=32, база 1000), поэтому пересчёт одинаков; «обе плохие» учитывает участие без изменения рейтинга.

Наборы и выполнения

Набор — именованный список до 50 промптов. Запуск на модели является постоянным заданием: промпты выполняются последовательно с вашими данными, прогресс виден, ошибка записывается на элемент и не прерывает всё, отмена помечает запуск отменённым. Завершение хранит точную модель, результаты и задержку элементов в шифрованном виде и экспортируется в JSON для сравнений и отслеживания регрессий модели, промпта или поставщика.