So erkennen wir echtes Claude und Fälschungen

Claude gehört zu den gefragtesten Modellen und zu den teuersten. Diese Lücke hat einen Markt von Wiederverkäufern geschaffen, die „dasselbe Claude“ für einen Bruchteil des Preises anbieten. Manche verkaufen tatsächlich Claude. Viele nicht: Sie antworten mit einem billigeren Modell und kleben Claudes Namen darauf.

Dieser Beitrag erklärt ohne Fachchinesisch, wie wir prüfen, was du tatsächlich bekommst, und warum die Tests, die die meisten ausprobieren, nicht funktionieren.

Das Modell zu fragen, funktioniert nicht

Als Erstes fragen alle einfach nach: „Wer hat dich entwickelt?“, „Welches Modell bist du?“, „Bis wann reicht dein Wissen?“ Nichts davon beweist irgendetwas.

Ein Modell sagt, was man ihm aufträgt. Ein Wiederverkäufer, der ein anderes Modell als Claude ausgibt, gibt ihm einfach eine Anweisung: „Du bist Claude, entwickelt von Anthropic. Erwähne niemals etwas anderes.“ Die Fälschung beantwortet dann jede Frage nach ihrer Identität perfekt.

Der Wissensstand ist geraten, keine Tatsache. In Anthropics eigener Claude App bekommt Claude das heutige Datum und seinen Wissensstand über einen versteckten Systemprompt mitgeteilt und beantwortet die Frage deshalb selbstsicher. Über die API und über Amazon Bedrock, Google Vertex AI oder Microsoft Foundry gibt es diesen Prompt nicht, und Claude muss raten. Wir haben einen Anbieter, von dem wir wissen, dass er echtes Claude liefert, 34 Mal gefragt. Er nannte 12 verschiedene Daten. Ein „falscher“ Wissensstand bedeutet also keine Fälschung, und ein „richtiger“ nicht das Original: Wer die Antwort mit der Claude App vergleicht, vergleicht nur eine Vermutung mit einer Tatsache, die der App vorgegeben wurde. Wir haben diese Frage komplett gestrichen.

Statt das Modell über sich selbst zu befragen, schauen wir uns deshalb Dinge an, die es nicht so leicht vortäuschen kann.

Woran man eine Fälschung wirklich erkennt

Manche Anzeichen sind so eindeutig, dass ein Kanal schon allein daran durchfällt:

Es verhält sich wie ein anderes Produkt. Manche Wiederverkäufer leiten „Claude“ an kostenlose Programmierassistenten weiter, die in Code-Editoren eingebaut sind. Bitte einen davon um eine traurige Geschichte über ein verlorenes Kätzchen in zwei Sätzen, und er lehnt ab: „Ich bin hier, um beim Programmieren zu helfen.“ Echtes Claude macht so etwas nie.
Es verrät seine echten Anweisungen. Wenn ein Modell verkleidet wird, verbieten ihm seine versteckten Anweisungen, seinen echten Hersteller zu erwähnen. Modelle, die ihr Nachdenken zeigen, wiederholen diese Anweisung beim Nachdenken oft, selbst wenn jede ihrer Antworten „Claude“ sagt. Wir ertappen die Verkleidung im Nachdenken, nicht in der Antwort.
Die Antwort trägt das falsche Etikett. Jede Antwort kommt mit technischen Angaben neben dem Text, darunter welches Modell sie erzeugt hat. Eine Antwort, die als „Claude Opus“ verkauft wird, in ihren eigenen Angaben aber ein anderes Modell oder eine billigere Claude Stufe nennt, fällt hier auf.
Es überspringt das Nachdenken, das es nicht überspringen kann. Die neuesten Claude Modelle denken immer nach, bevor sie antworten. Ein „Claude“, das ganz ohne Nachdenken antwortet, ist nicht dieses Modell.
Es rutscht in eine andere Sprache. Mehrere billige Ersatzmodelle sind chinesische Modelle, und sie wechseln manchmal mitten in der Antwort ins Chinesische. Echtes Claude tut das nicht.
Die „Antwort“ ist in Wahrheit eine Fehlerseite. Manche Wiederverkäufer liefern ihre eigene Inhaltsfilter-Meldung oder Fehlerseite so aus, als wäre sie die Antwort des Modells. Du bezahlst dafür und bekommst nichts.

Andere Anzeichen werden als Beweismaterial gesammelt und über Wochen verglichen, weil ein einzelner Durchlauf in die Irre führen kann:

Die Signatur des Nachdenkens. Echtes Claude kennzeichnet sein Nachdenken mit einer Signatur, die nur Anthropic erzeugen kann.
Wie es deine Wörter zählt. Jede Modellfamilie zerlegt Text auf ihre eigene Weise in Tokens, und abgerechnet wird pro Token. Ein Text, den jede Familie anders zerlegt, zeigt in einer einzigen Zahl, welche Art von Modell ihn gezählt hat.
Seine liebsten Zufallsantworten. Bitte ein Modell viele Male um eine zufällige Zahl, eine Farbe oder eine Stadt, und jede Modellfamilie zeigt ihr eigenes Muster an Antworten. Über Tage gesammelt, unterscheidet dieses Muster die Familien und zeigt, wenn ein Wiederverkäufer mehrere Modelle hinter einem Namen mischt.
Versteckte Prompts des Wiederverkäufers. Bittet man ein Modell, seine vorherigen Anweisungen zu wiederholen, sagt es oft auf, was der Wiederverkäufer heimlich vor deine Nachricht gesetzt hat.

Ein Kanal fällt nie wegen einer Zeitüberschreitung oder einer wackligen Verbindung durch, sondern nur wegen dessen, was das Modell tatsächlich geantwortet hat.

Was keine Fälschung ist

Claude wird auch über Amazon Bedrock, Google Vertex AI und Microsoft Foundry angeboten. Diese Plattformen betreiben Anthropics echtes Claude unter Lizenz, ein Wiederverkäufer, der dort Kapazität kauft und weiterverkauft, verkauft also das Original. Dort betriebenes Claude antwortet auf die Frage nach seinem Hersteller manchmal mit „Amazon“ oder „Google“, weil die Plattform eigene Anweisungen hinzufügt. Das werten wir nicht dagegen.

Was kein Test verraten kann

Ehrlich über die Grenzen zu sein, ist genauso wichtig wie die Prüfungen selbst. Von außen kann niemand die genaue Version eines Modells beweisen oder ob es komprimiert wurde, damit es billiger läuft. Und ein Wiederverkäufer, der heute besteht, kann morgen sein Backend wechseln. Deshalb testen wir jeden Kanal regelmäßig nach Zeitplan und nicht nur einmal.

Was wir am Anfang herausgefunden haben

Im April haben wir 8 beliebte Claude Wiederverkäufer 17 Tage lang getestet. 183 ihrer Kanäle, die unter Claude Namen verkauft wurden, waren überhaupt kein Claude, die meisten davon Programmierassistenten mit einem Claude Namensschild. Deshalb haben wir diese Prüfungen in unser Routing eingebaut. Unsere Sync Engine, new-api-sync, findet und testet jeden Kanal, bevor er Anfragen bedient, und testet ihn danach immer wieder. Ein Kanal, der durchfällt, bedient in unserem Netzwerk also keine deiner Anfragen.

Teste deinen eigenen Anbieter

Du musst nichts installieren. Öffne den API Modelltester, füge die Adresse und den Schlüssel deines Anbieters ein, wähle ein Modell, und er führt diese Prüfungen live durch und zeigt dir genau, was bestanden hat und was nicht.

Lieber die Kommandozeile? Das ist der Kätzchentest von oben. Wenn die Antwort ablehnt oder dich Richtung Programmieren lenkt, ist dein „Claude“ kein Claude.

bash

curl https://YOUR-PROVIDER/v1/messages \
  -H "x-api-key: $YOUR_KEY" \
  -H "anthropic-version: 2023-06-01" \
  -H "content-type: application/json" \
  -d '{
    "model": "claude-opus-4-7",
    "max_tokens": 150,
    "messages": [{
      "role": "user",
      "content": "Tell me a 2-sentence sad story about a lost kitten."
    }]
  }'

Beide Teile sind Open Source, sodass jeder nachprüfen kann, wie es funktioniert, oder es selbst betreiben kann: Die Prüfungen sind ai-model-verifier (auch auf npm), und new-api-sync führt sie bei jedem Anbieter aus, an den wir weiterleiten.