Sprawdz, zanim zaufasz
Tester modeli API AI
Sprawdz, czy punkt koncowy udostepnia prawdziwy deklarowany model. Dziala w przegladarce, twoj klucz nie jest wysylany na nasze serwery.
Brak testow. Uruchom jeden, aby zbudowac historie.
Dlaczego ten tester jest inny
Każda kontrola pasuje do konkretnego sygnału w odpowiedzi, więc nie oznaczamy prawdziwych modeli jako podróbek tak, jak robi to statystyczne pobieranie odcisków. Przeczytaj dokładny kod.
Wynik trafia na publiczną tablicę dopiero po tym, jak nasz serwer sam ponownie przeprowadzi cały test, więc rankingów nie da się sfałszować.
Każdy werdykt pokazuje wysłane polecenie, surową odpowiedź i pasujący tekst, który go wywołał. Nic nie jest ukrywane.
- Niejasność wersji prawdziwy model potwierdza dostawcę i poziom, ale często nie jest pewny dokładnej wersji. Samo to nigdy nie jest porażką, jedynie oznaczane jako informacja pomocnicza.
- Błędy przejściowe limity szybkości (429), 5xx i przekroczenia czasu oznaczają przebieg jako niezweryfikowany, nigdy jako podejrzany. Prawdziwy punkt końcowy mający gorszy moment nie jest karany.
- Nazwy hostów chmurowych podanie AWS Bedrock, Google Vertex lub Azure jako hosta jest akceptowane, ponieważ są to uprawnione sposoby odsprzedaży prawdziwego modelu.
- Przekształcanie protokołu tłumaczenie między chat-completions a natywnym formatem messages to normalne zachowanie bramki i nie jest sygnałem oszustwa, gdy sam model jest prawdziwy.
- Jedna kapryśna sonda trzy z czterech zaliczonych sond wystarczą, by uznać model za prawdziwy, więc pojedyncza nietrafiona odpowiedź nie skazuje uczciwego punktu końcowego.
Cały ten tester jest open source. Przeczytaj dokładnie, które sondy działają i dlaczego: Zobacz kod wykrywania
Masz pomysł na lepszą sondę? Zaproponuj go tutaj:Otwórz issue na GitHubieZgłoś na Discordzie
Otwarty kod. Zweryfikuj i ulepsz.
Kod testow jest otwarty. Zobacz dokladnie, ktore sondy dzialaja i dlaczego, zaproponuj nowe testy lub przedyskutuj wykrywanie na naszym Discordzie.