AI Gateway Admin Cabinet

Инженерный срез по тем же данным, что уже лежат в базе: чем бот работал, как часто отвечал вместо него локальный шаблон, как часто отказывал сам провайдер моделей, сколько выдумок поймали заслоны, часто ли спрашивают постороннее и где шаг проводит время. Период и застройщик берутся из фильтров вкладки выше. Сутки в этом подразделе считаются по московскому времени, и по Москве же режется порог «5 % за сутки». Диаграммы расхода выше и карточки диалогов с журналом аудита пока показывают UTC: событие в 01:00 МСК стоит там в корзине «22» предыдущего дня. Сдвиг тех экранов — отдельная задача, здесь он не сделан.

Отвечает на вопрос «плохой ответ пришёл до правки роли или после»: смотрите последнее появление прежнего хэша и первое появление нового. Хэш считается по голове промпта, а размер — по полному: один хэш при 2 800 и при 46 000 токенов — не совпадение хэшей, а разный объём подставленных данных.

Покажет медиану и хвост размера prompt, затем числовой вклад его блоков. Данные появятся только после выкладки измерения; текст промпта, URL и данные покупателей в кабинет не передаются.

Разрез по застройщику и версии — в таблице «Отпечаток промпта» выше: её последний столбец покажет P50 / P95, когда сервер начнёт их сохранять.

Доля ответов, которые клиент получил отпиской движка, потому что модель не ответила. Тихая деградация выглядит для покупателя как «бот отупел». Предупреждение зажигается по суткам, а не по всему окну: за месяц один провальный день растворяется в среднем.

Как часто каскад не смог получить ответ модели — независимо от того, что увидел клиент. Ход, где провайдер отказал, а покупателя спасла придержанная справка FAQ, в срез выше не идёт намеренно: человек получил ответ по существу. Здесь такой ход считается — это ранний сигнал платформе, а не жалоба покупателя. Знаменатель тот же, что у среза выше («промпт ушёл провайдеру»), поэтому две доли сравнимы напрямую. Нормы для этой доли не установлено: порог назначат, когда наберётся статистика, — до тех пор ни одна цифра здесь не означает «всё ровно».

Каждое срабатывание — ложь модели, до клиента не дошедшая. Голое число ни о чём не говорит, поэтому рядом едет знаменатель: двадцать пойманных выдумок на двести ходов и на две тысячи — разные новости. У части заслонов доля к числу ответов модели не считается принципиально — они срабатывают и на тех ходах, где модель для ответа не звали вовсе, так что числитель и знаменатель описывали бы разные множества. Пометку об этом ставит сервер, и видна она в те окна, когда заслон срабатывал; у заслона, не сработавшего ни разу, доли нет вовсе — ни посчитанной, ни отменённой. Оговорка стоит здесь постоянно, чтобы не исчезать вместе со строкой.

Часто ли покупатели спрашивают не про недвижимость и что бот на это отвечает. Отсечка до модели известна коду точно: видно и чем отсекли, и отказали ли. Отказы, которые модель формулирует сама по директиве границы темы, сюда не попадают вовсе — код о них не знает, а угадывать их по тексту ответа в этом проекте запрещено опытом. Пустая клетка в такой строке означает «не измеряется», а не «ни разу не было»: сегодня это как раз основной механизм.