Основной запрос
Убедитесь, что пути, совместимые с Gemini OpenAI, могут стабильно возвращаться.
pangolin проверяет реле Gemini через API-интерфейсы, совместимые с OpenAI, на предмет протокола, возможностей и передачи метаданных об использовании.
Ориентирован на совместимый протокол и поведение по умолчанию, а не на идентификацию уровня подписи Claude.
Измеряет реальное поведение Gemini на конечных точках, совместимых с OpenAI, используемых сторонними ретрансляторами.
Наиболее близко к тому, как на самом деле используются реле Gemini сторонних производителей.
Обновления с глубиной сканирования выше. Полный режим охватывает все применимые проверки. Зонды с длинным контекстом требуют дополнительного согласия.
Убедитесь, что пути, совместимые с Gemini OpenAI, могут стабильно возвращаться.
Проверьте объявление модели, структуру ответа и форму содержимого-кандидата.
Проверьте имя вызова функции, объект параметра и структуру вызова.
Проверьте, действуют ли ограничения схемы ответа/вывода JSON.
Проверьте такие поля, как «кандидаты», «finishReason», «security», «useMetadata» и т. д.
Сравните выходные и конечные причины потока и непотока для обеспечения согласованности.
Проверьте целостность поля токена useMetadata и отношения измерения.
В том же вопросе сравнивается потребление ресурсов и поведение реакции между каналами и официальным (или базовым уровнем).
Модель просят дословно воспроизвести фиксированную отметку, проверяя, насколько детерминированно выполняются инструкции.
Сравнивайте user only с явным system+user, проверяя, не переопределяются ли фиксированные слова скрытыми директивами.
Используйте минималистские запросы, чтобы определить, является ли входной_токен аномально высоким, и выявить неявное внедрение системы.
Используйте готовые аргументирующие вопросы, чтобы проверить, верны ли проверяемые ответы.
Случайные варианты перепроверяются на наличие аномальных сигналов, таких как утечки nonce, фиксированные ответы и подозрительное повторное использование кэша.
Проверьте, стабильна ли политика безопасности, используя сценарии отказа в ответе и варианты перезаписи/кодирования/прогрессивных вариантов.