GPT Bot aussperren: Cloudflare Rule

Viele von euch wollen GPT über Cloudflare aussperren, ich zeige euch hier eine Regel, mit der das ganz einfach möglich ist.

Hier die Daten des GPTBots: https://platform.openai.com/docs/gptbot

User agent token: GPTBot
Full user-agent string: Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; GPTBot/1.0; +https://openai.com/gptbot)

Über Robots.txt:

User-agent: GPTBot
Disallow: /

Cloudflare Block GPT Rule

Hier die Cloudflare Regel:

FAQ

Warum sollte ich den GPT-Bot aussperren wollen?

Der GPT-Bot ist ein Webcrawler von OpenAI, der dazu dient, Inhalte für die KI-Modelle zu sammeln und zu analysieren. Wenn du verhindern möchtest, dass der Bot deine Website indiziert oder Daten sammelt, kannst du ihn über Cloudflare blockieren.

Wie erkenne ich den GPT-Bot auf meiner Website?

Der GPT-Bot verwendet einen spezifischen User-Agent-Token und einen vollständigen User-Agent-String. Hier sind die Daten des GPT-Bots:

• User-Agent-Token: GPTBot
• Vollständiger User-Agent-String: Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; GPTBot/1.0; +https://openai.com/gptbot)

Wie sperre ich den GPT-Bot über Cloudflare aus?

Du kannst den GPT-Bot ganz einfach über eine Cloudflare-Regel aussperren. Hier ist eine Beispielregel:

IF User-Agent CONTAINS „GPTBot“ THEN Block

Diese Regel verhindert, dass der GPT-Bot auf deine Website zugreifen kann.

Kann ich den GPT-Bot auch über die robots.txt-Datei aussperren?

Ja, das ist möglich. Du kannst die robots.txt-Datei auf deiner Website bearbeiten und eine Anweisung hinzufügen, die besagt, dass der GPT-Bot deine Website nicht indizieren soll. Hier ist ein Beispiel:

User-agent: GPTBot
Disallow: /

Diese Anweisung verbietet dem GPT-Bot den Zugriff auf alle Seiten deiner Website.