Permintaan dasar
Konfirmasikan bahwa jalur yang kompatibel Gemini OpenAI dapat dikembalikan secara stabil.
pangolin menyelidiki relai Gemini melalui API yang kompatibel dengan OpenAI untuk protokol, kemampuan, dan penggunaan Metadata pass-through.
Berfokus pada protokol yang kompatibel dan perilaku berpikir secara default — bukan identitas tingkat tanda tangan Claude.
Mengukur perilaku Gemini yang sebenarnya pada titik akhir yang kompatibel dengan OpenAI yang digunakan oleh relay pihak ketiga.
Paling dekat dengan cara penggunaan relay Gemini pihak ketiga.
Pembaruan dengan kedalaman Pindai di atas. Mode penuh mencakup semua pemeriksaan yang berlaku. Penyelidikan konteks panjang memerlukan keikutsertaan ekstra.
Konfirmasikan bahwa jalur yang kompatibel Gemini OpenAI dapat dikembalikan secara stabil.
Periksa response.model dan bentuk choices[].message Chat Completions.
Periksa nama panggilan fungsi, objek parameter, dan struktur panggilan.
Verifikasi apakah skema respons/batasan keluaran JSON berlaku.
Verifikasi id, object, choices, finish_reason, usage, serta sidik jari lintas protokol di usage.
Bandingkan keluaran dan alasan akhir aliran dan non-aliran untuk konsistensi.
Periksa integritas bidang prompt / completion / total token di usage dan hubungan pengukurannya.
Pertanyaan yang sama membandingkan konsumsi input dan perilaku respons antara saluran dan pejabat (atau baseline).
Model diminta untuk mereproduksi tanda tetap secara verbatim, memeriksa seberapa deterministik instruksi yang diikuti.
Bandingkan pengguna hanya dengan sistem+pengguna eksplisit, periksa apakah kata-kata tetap ditimpa oleh arahan tersembunyi.
Gunakan permintaan minimalis untuk mengamati apakah input_tokens sangat tinggi dan mengidentifikasi injeksi Sistem implisit.
Gunakan pertanyaan penalaran terekam untuk memeriksa apakah jawaban yang dapat diverifikasi benar.
Varian acak memeriksa ulang sinyal abnormal seperti kebocoran nonce, balasan tetap, dan penggunaan kembali cache yang mencurigakan.
Periksa apakah kebijakan keamanan stabil menggunakan skenario penolakan jawaban dan varian penulisan ulang/pengkodean/progresif.