الطلب الأساسي
تأكد من إمكانية إرجاع المسارات المتوافقة Gemini OpenAI بثبات.
pangolin يستكشف Gemini مرحلات عبر واجهات برمجة التطبيقات المتوافقة مع OpenAI للبروتوكول والإمكانيات وتمرير البيانات الوصفية.
يركز على البروتوكول المتوافق وسلوك التفكير الافتراضي - وليس هوية درجة توقيع Claude.
يقيس سلوك Gemini الحقيقي على نقاط النهاية المتوافقة مع OpenAI والتي تستخدمها مرحلات الطرف الثالث.
الأقرب إلى كيفية استخدام مرحلات Gemini التابعة لجهة خارجية فعليًا.
التحديثات مع عمق المسح أعلاه. يغطي الوضع الكامل جميع الفحوصات المعمول بها. تحتاج تحقيقات السياق الطويل إلى الاشتراك الإضافي.
تأكد من إمكانية إرجاع المسارات المتوافقة Gemini OpenAI بثبات.
تحقق من إعلان النموذج وبنية الاستجابة وشكل محتوى المرشح.
تحقق من اسم استدعاء الوظيفة وكائن المعلمة وبنية الاتصال.
تحقق مما إذا كانت قيود إخراج مخطط الاستجابة/JSON سارية أم لا.
تحقق من الحقول مثل المرشحين، وسبب النهاية، والسلامة، وبيانات تعريف الاستخدام، وما إلى ذلك.
قارن بين أسباب الإخراج والنهاية للتيار وغير الدفق من أجل الاتساق.
تحقق من تكامل حقل الرمز المميز لبيانات الاستخدام وعلاقات القياس.
يقارن نفس السؤال استهلاك المدخلات وسلوك الاستجابة بين القنوات والمسؤول (أو خط الأساس).
يُطلب من النموذج إعادة إنتاج علامة ثابتة حرفيًا، والتحقق من مدى حتمية اتباع التعليمات.
قارن المستخدم فقط بمستخدم النظام + المستخدم الصريح، وتحقق مما إذا كانت الكلمات الثابتة قد تم تجاوزها بواسطة التوجيهات المخفية.
استخدم الطلبات البسيطة لملاحظة ما إذا كانت رموز الإدخال مرتفعة بشكل غير طبيعي وتحديد حقن النظام الضمني.
استخدم الأسئلة المنطقية الجاهزة للتحقق من صحة الإجابات التي يمكن التحقق منها.
تقوم المتغيرات العشوائية بالتحقق من وجود إشارات غير طبيعية مثل التسريبات غير المتوقعة، والردود الثابتة، وإعادة استخدام ذاكرة التخزين المؤقت المشبوهة.
تحقق مما إذا كانت سياسة الأمان مستقرة باستخدام سيناريوهات رفض الإجابة وإعادة الكتابة/التشفير/المتغيرات التقدمية.