Temel istek
Sohbet Tamamlama temel isteklerinin istikrarlı bir şekilde geri dönebildiğini doğrulayın.
OpenAI API geçişi algılama
Protokol / yetenek
OpenAI API geçiş protokolünü ve yeteneklerini doğrulayın
pangolin GPT taklidi yapanlar için Sohbet Tamamlama şeklini, araç çağrılarını, akış tutarlılığını ve kullanım parmak izlerini kontrol eder.
Sohbet Tamamlamaları
İşlev Çağırma
Yapılandırılmış Çıktı
parmak izi kullanımı
OpenAI'nin Claude tarzı sunucu sahteciliğe karşı imzası yoktur, bu nedenle bu sayfa yüksek güvenliğe sahip protokol ve yetenek kontrollerine odaklanmaktadır.
OpenAI'nin öne çıkan özellikleri: protokol sızıntılarını ve yetenek kesintilerini yakalayın
GPT uyumlu uç noktaların OpenAI şekillerini takip edip etmediğini ve temel yetenekleri gerçekten geçip geçmediğini değerlendirin.
- Protokol şekliKimlik, nesne, seçimler, bitiş_nedeni, kullanım ve diğer Sohbet Tamamlama alanlarını kontrol eder.
- Yetenek geçişiYalnızca kabuk rölelerini tespit etmek için İşlev Çağrısı ve Yapılandırılmış Çıkış araştırmaları.
- Kullanım parmak iziGPT olarak sarılmış Claude / Gemini arka uçlarına ihanet eden jeton ölçümü ve alan kalıntısı.
Kripto düzeyinde kimlik kanıtı olmasa da adaptör sızıntılarının ve eksik yeteneklerin çoğunu tespit etmeye yeterlidir.
Çalıştırılacak kontroller
Yukarıdaki Tarama derinliği ile güncellemeler. Tam mod, geçerli tüm kontrolleri kapsar. Uzun bağlam araştırmalarının ekstra bir katılıma ihtiyacı vardır.
model tutarlılığı
Eşleşip eşleşmediklerini görmek için istek modeli ve yanıt modeli alanlarını karşılaştırın.
işlev çağrısı
tool_calls'ı, işlev adını, JSON parametresini ve çağrı yapısını kontrol edin.
Yapılandırılmış çıktı
JSON Şeması/katı çıktı kısıtlamalarının etkin olduğunu doğrulayın.
Protokol normatifliği
Kimlik, nesne, seçimler, bitiş_nedeni, kullanım vb. alanların şeklini doğrulayın.
akış tutarlılığı
Tutarlılık için akışlı ve akışsız metin ve belirteç kullanımını karşılaştırın.
Jeton faturalandırma
İstem/tamamlama/toplam belirteç ölçümü ilişkisini kontrol edin.
Aynı başlığın resmi karşılaştırması
Aynı soru, kanallar ile resmi (veya temel) arasındaki girdi tüketimini ve yanıt davranışını karşılaştırır.
Doğru komut çoğaltımı (karşı koruma)
Talimatların ne kadar belirleyici bir şekilde takip edildiğini kontrol ederek modelden sabit bir işareti kelimesi kelimesine yeniden üretmesi istenir.
Sistem çakışması testi
Sabit sözcüklerin gizli yönergeler tarafından geçersiz kılınıp kılınmadığını kontrol ederek kullanıcıyı yalnızca açık sistem+kullanıcıyla karşılaştırın.
Minimalist Giriş Jetonu Denetimi
input_tokens'ın anormal derecede yüksek olup olmadığını gözlemlemek ve örtülü Sistem enjeksiyonunu tanımlamak için minimalist istekleri kullanın.
Aşırı muhakeme yeteneği (sayı teorisi sayma)
Doğrulanabilir yanıtların doğru olup olmadığını kontrol etmek için hazır akıl yürütme sorularını kullanın.
Enjeksiyon algılamayı gizle
Rastgeleleştirilmiş değişkenler, tek seferlik sızıntılar, sabit yanıtlar ve şüpheli önbellek yeniden kullanımı gibi anormal sinyalleri çapraz kontrol eder.
Güvenlik reddi ve politika istikrarı
Yanıt reddi senaryolarını ve yeniden yazma/kodlama/aşamalı değişkenleri kullanarak güvenlik politikasının istikrarlı olup olmadığını kontrol edin.