AI-Crawler-Referenz
PerplexityBot: der Such-Crawler
PerplexityBot macht Websites in den Suchergebnissen von Perplexity sichtbar und verlinkbar. Perplexity gibt klar an, dass er nicht dazu dient, Inhalte für KI-Basismodelle zu sammeln – ihn zuzulassen ist also eine Zitationsentscheidung, keine Trainingsentscheidung. Für Publisher eine ungewöhnlich saubere Wahl.
Die Fakten
Entnommen der Dokumentation von Perplexity.
- robots.txt-Token
- PerplexityBot
- Betreiber
- Perplexity
- Wofür er sammelt
- Suchindex
- Befolgt robots.txt
- Ja. Perplexity nennt robots.txt als die Steuerung.
- User-Agent-String
- Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; PerplexityBot/1.0; +https://perplexity.ai/perplexitybot)
Was jede Entscheidung kostet
Keine der beiden Optionen ist umsonst. Das ist der Handel.
Wenn Sie ihn zulassen
Ihre Seiten können in Perplexity-Antworten auftauchen und verlinkt werden. Perplexity zitiert stark, das ist also ein direkter Weg zu sichtbarer Nennung.
User-agent: PerplexityBot Allow: /
Wenn Sie ihn blockieren
Sie geben Zitationen in einem Produkt auf, das um das Zitieren von Quellen herum gebaut ist – und gewinnen auf der Trainingsseite nichts, weil dieser Bot kein Training speist.
User-agent: PerplexityBot Disallow: /
Das gemeinsam mit den übrigen Bots zu entscheiden ist an einer Stelle leichter: die ganze Datei bauen.
Wissenswert
- Die Aussage, nicht für Training zu sammeln, macht dies zur einfachsten Zulassungsentscheidung auf dieser Liste.
- Perplexity zeigt seine Quellen prominent, eine Zitation hier ist für Lesende also sichtbarer als bei den meisten Assistenten.
- Perplexity-User ist getrennt und verhält sich anders – er ignoriert robots.txt in aller Regel.
Verifizieren
Ein User-Agent-Header allein beweist nichts, denn den kann jeder senden. Perplexity veröffentlicht die IP-Bereiche seiner Bots – eine Anfrage ist nur dann echt, wenn die Quell-IP dort auftaucht.
Fragen
Bedeutet Zulassen, dass mit unseren Inhalten trainiert wird?
Perplexity gibt an, dass PerplexityBot nicht dazu dient, Inhalte für Basismodelle zu sammeln. Zulassen betrifft die Sichtbarkeit in der Suche.
Was kostet das Blockieren?
Die Berechtigung zur Zitation in einem Produkt, dessen Antworten mit Quellen beginnen. Ein Trainingsvorteil steht dem nicht gegenüber.
Wie verifizieren wir ihn?
Gleichen Sie die Quell-IP mit perplexity.com/perplexitybot.json ab.
Die Engine, der er dient
Leitfäden dazu
Wie Allswap das misst
Bereit, die KI-Suche zu dominieren?
Jetzt loslegen
Allswap