Yêu cầu cơ bản
Xác nhận rằng các đường dẫn tương thích Gemini OpenAI có thể được trả về ổn định.
Phát hiện chuyển tiếp API Gemini
Giao thức tương thích
Xác minh khả năng và giao thức chuyển tiếp API của Gemini
pangolin thăm dò chuyển tiếp Gemini thông qua các API tương thích với OpenAI để biết giao thức, khả năng và khả năng truyền Siêu dữ liệu sử dụng.
Đường dẫn tương thích với OpenAI
Gọi hàm
cách sử dụngSiêu dữ liệu
Gemini 3 nhận thức được
Tập trung vào giao thức tương thích và hành vi suy nghĩ theo mặc định — chứ không phải danh tính cấp chữ ký của Claude.
Điểm nổi bật của Gemini: đường dẫn tương thích và cách sử dụngSiêu dữ liệu
Đo lường hành vi thực tế của Gemini trên các điểm cuối tương thích với OpenAI được sử dụng bởi các rơle của bên thứ ba.
- Đường dẫn tương thíchThăm dò /chat/hoàn thành bao gồm Google /v1beta/openai và bên thứ ba phổ biến /v1.
- Gemini 3Tài khoản cho mã thông báo suy nghĩ mặc định và các cạnh đầu ra trống trên Gemini 3.
- Trường sử dụngKiểm tra tính đầy đủ, tính nhất quán và độ ổn định của mô hình phản hồi.
Gần nhất với cách sử dụng rơle Gemini của bên thứ ba.
Kiểm tra sẽ chạy
Cập nhật với độ sâu Quét ở trên. Chế độ đầy đủ bao gồm tất cả các kiểm tra áp dụng. Các thăm dò ngữ cảnh dài cần có thêm lựa chọn tham gia.
Hình dạng phản hồi của mô hình
Kiểm tra khai báo model, cấu trúc phản hồi và hình dạng nội dung ứng viên.
gọi hàm
Kiểm tra tên lệnh gọi hàm, đối tượng tham số và cấu trúc lệnh gọi.
Đầu ra có cấu trúc
Xác minh xem các ràng buộc về lược đồ phản hồi/đầu ra JSON có hiệu lực hay không.
Tính quy chuẩn của giao thức
Xác minh các trường như ứng viên, kết thúcLý do, an toàn, siêu dữ liệu sử dụng, v.v.
tính nhất quán phát trực tuyến
So sánh lý do đầu ra và lý do cuối cùng của luồng và không phải luồng để đảm bảo tính nhất quán.
Sử dụng mã thông báo
Kiểm tra tính toàn vẹn của trường mã thông báo siêu dữ liệu và mối quan hệ đo lường.
So sánh chính thức của cùng một tiêu đề
Câu hỏi tương tự so sánh mức tiêu thụ đầu vào và hành vi phản hồi giữa các kênh và kênh chính thức (hoặc đường cơ sở).
Tái tạo lệnh chính xác (chống vỏ)
Mô hình được yêu cầu tái tạo nguyên văn một dấu cố định, kiểm tra mức độ tuân theo các hướng dẫn xác định.
Kiểm tra xung đột hệ thống
Chỉ so sánh người dùng với hệ thống + người dùng rõ ràng, kiểm tra xem các từ cố định có bị ghi đè bởi các lệnh ẩn hay không.
Kiểm tra mã thông báo đầu vào tối giản
Sử dụng các yêu cầu tối giản để quan sát xem liệu input_tokens có cao bất thường hay không và xác định việc tiêm Hệ thống tiềm ẩn.
Khả năng suy luận cực cao (đếm lý thuyết số)
Sử dụng các câu hỏi lý luận soạn sẵn để kiểm tra xem các câu trả lời có thể kiểm chứng được có đúng hay không.
Ẩn phát hiện tiêm
Các biến thể ngẫu nhiên kiểm tra chéo các tín hiệu bất thường như rò rỉ không liên tục, phản hồi cố định và sử dụng lại bộ đệm đáng ngờ.
Từ chối bảo mật và ổn định chính sách
Kiểm tra xem chính sách bảo mật có ổn định hay không bằng cách sử dụng các kịch bản từ chối trả lời và viết lại/mã hóa/các biến thể lũy tiến.