So funktioniert KlaviyoAIBot

Erfahre mehr über KlaviyoAIBot, einschließlich:

• Was es ist und was es crawlt
• So erkennst du authentische Anfragen
• Wie Crawling Website-Regeln beachtet und wie du es steuerst

Dieser Artikel richtet sich an alle, die Traffic von KlaviyoAIBot sehen und bestätigen möchten, ob er legitim ist, oder anpassen möchten, wie er crawlen darf.

Was ist KlaviyoAIBot?

KlaviyoAIBot ist ein User-Agent, der von Klaviyos KI-Funktionen verwendet wird, einschließlich Customer Agent. Für Customer Agent ruft KlaviyoAIBot öffentlich verfügbare Seiten von Domains und URLs ab, die mit deinem Konto verbunden sind. Durch die Indexierung dieser Inhalte kann Klaviyo KI-Erlebnisse sowohl auf deiner Website als auch innerhalb von Klaviyo anpassen. Dies ist nützlich für Content-Generierung, KI-Antworten und Produktempfehlungen.

Du kannst Quellen über deinen primären Storefront hinaus hinzufügen, darunter Help Center (wie Zendesk), Blogs und Nachrichtenartikel. KlaviyoAIBot meldet sich nicht an, um auf Seiten hinter einer Authentifizierung oder einer Paywall zuzugreifen.

So funktioniert es

• Zustimmung und Umfang
  Customer Agent scannt deinen verbundenen Shop und zusätzliche Quellen, die du hinzufügst. Zum Beispiel kann er öffentliche Shopify-Seiten crawlen, die mit deinem Klaviyo Konto verbunden sind, aber er durchsucht Wikipedia nicht nach verwandten Inhalten.
• Beachtung von Website-Regeln
  Customer Agent prüft robots.txt, wenn er Seiten aus der Sitemap deiner Website auswählt. Das Robots Exclusion Protocol (REP) ist in RFC 9309 definiert.
• Höflichkeit
  Wenn eine Seitenanfrage HTTP 429 erhält, wartet Customer Agent, bevor es einen weiteren Versuch unternimmt, mit längeren Wartezeiten zwischen den Versuchen. Diese Wiederholungsversuche verwenden nicht den Retry-After -Header, um die Wartezeit festzulegen.
• Erneute Besuche
  Customer Agent durchsucht Quellen regelmäßig erneut, wenn die automatische Synchronisierung aktiviert ist. Die Häufigkeit variiert je nach Änderungssignalen und deiner Konfiguration.

So identifizierst du KlaviyoAIBot

Der User-Agent identifiziert Crawler-Traffic, während HTTP-Nachrichtensignaturen helfen, seinen Ursprung zu verifizieren.

Betrachte Anfragen als nicht verifiziert, sofern du ihre Signaturen nicht validieren oder ihre Identität über Cloudflare bestätigen kannst. Ein user-agent string allein beweist nicht, dass eine Anfrage von Klaviyo stammt.

Benutzer-Agent

KlaviyoAIBot/1.0 (+https://help.klaviyo.com/hc/de-de/articles/40496146232219)

Nach einer HTTP-400- oder 403-Antwort kann Customer Agent eine Seitenanfrage ohne diesen user-agent erneut versuchen, wenn robots.txt den Zugriff erlaubt. Verwende Signaturverifizierung, um diese Anfragen zu identifizieren.

HTTP-Nachrichtensignaturen (Web-Bot-Authentifizierung)

Customer Agent signiert seine Seiten-, Sitemap- und robots.txt-Anfragen mit HTTP Message Signatures RFC 9421 und Cloudflare’s Web Bot Auth. Du kannst dies verwenden, um zu überprüfen, dass die Anfrage tatsächlich von KlaviyoAIBot stammt, ohne dich auf IP-Allowlistings zu verlassen.

Signierte Anfragen enthalten die Header Signature-Agent, Signature-Input und Signature. Validiere die Signatur anhand von Klaviyos Verzeichnis öffentlicher Schlüssel; das alleinige Vorhandensein dieser Header ist kein Authentizitätsnachweis.

Tipp: Wenn deine Website hinter Cloudflare liegt und die Web Bot Auth-Verifizierung aktiviert ist, kann Cloudflare die Signaturen von Klaviyo validieren und verifizierten Traffic mit cf.bot_management.verified_bot markieren = true. Dieses Feld identifiziert verifizierte Bots allgemein; es ist nicht speziell für Klaviyo. Berücksichtige diesen Umfang, wenn du es in WAF-Regeln verwendest.

Ich sehe Traffic, der angibt, KlaviyoAIBot zu sein. Woher weiß ich, dass er echt ist?
Wenn du Cloudflare verwendest, prüfe den verifizierten Status der Anfrage und die Bot-Identität. Wenn du Cloudflare nicht verwendest, validiere die HTTP Message Signature-Header anhand von Klaviyos öffentlichem Schlüsselverzeichnis gemäß RFC 9421 und Web Bot Auth.

Was KlaviyoAIBot crawlt

• Dein E-Commerce-Shop
  Die E-Commerce-Domain, die mit Klaviyo verbunden ist.
• Zusätzliche Quellen
  Andere Quellen, die du zu Customer Agent hinzufügst, wie Help Center (z. B. Zendesk), Dokumentationsportale, Wissensdatenbanken, Blogs und Nachrichtenartikel.
• Öffentliche Inhalte
  Nutze öffentlich zugängliche Seiten als Quellen. Robots-Regeln steuern Website-Scans; sie schützen keine privaten Inhalte. Verwende Authentifizierung oder andere Zugriffskontrollen für private Seiten.

So steuerst oder begrenzt du das Crawling

• Robots.txt
  Füge robots-Regeln für den KlaviyoAIBot-user-agent hinzu oder aktualisiere sie, um zu steuern, welche Sitemap-Seiten in Website-Scans einbezogen werden. Erfahre mehr über robots.txt und REP.
• Vorübergehende Verlangsamungen
  Gib HTTP 429 zurück, damit Customer Agent vor dem erneuten Versuch von Seitenanfragen wartet. Verlasse dich nicht auf 503-Antworten oder Retry-After, um diese Wiederholungsverzögerung festzulegen.
• Wähle aus, was verbunden ist
  Du kannst die mit Customer Agent in Knowledge verbundenen Domains und URLs hinzufügen oder entfernen.

Um eine Quelle zu entfernen, benötigst du die Berechtigung, Customer Agent zu bearbeiten. Das Löschen einer Website-Quelle entfernt auch ihre indexierten Unterseiten.

1. Öffne Customer Agent > Knowledge und wähle die Quelle aus, die du entfernen möchtest.
2. Öffne Weitere Aktionen und wähle Löschen aus. Die Quelle wird entfernt, und du kehrst zur Seite „Knowledge“ zurück.

Kann ich einen bestimmten Abschnitt meiner Website blockieren?
Ja. Verwende robots-Regeln für KlaviyoAIBot in robots.txt, um diese Pfade bei Website-Scans zu verbieten. Wenn du Hilfe beim Bearbeiten der Datei benötigst, wende dich an deine*n Website-Administrator*in. Um Inhalte zu entfernen, die bereits in Customer Agent indexiert wurden, lösche die Quelle aus Knowledge.

Befolgt der Bot temporäre Verlangsamungssignale?
Customer Agent wartet, bevor Seitenanfragen erneut gesendet werden, die HTTP 429 zurückgeben. Die Wartezeit erhöht sich zwischen den erneuten Versuchen. Retry-After wird nicht verwendet, um diese Verzögerung festzulegen, und eine 503-Antwort löst nicht dasselbe Wiederholungsverhalten für Seitenanfragen aus.

Datennutzung und Datenschutz

KlaviyoAIBot ruft Inhalte ab, um KI-Funktionen zu unterstützen, z. B. für die Inhaltserstellung, KI-Antworten und Produktempfehlungen. Gecrawlte Inhalte sind mit deinem Konto verknüpft und folgen deinen Einstellungen.

Automatische Synchronisierung ermöglicht es Customer Agent, indexierte Inhalte regelmäßig anhand öffentlich verfügbarer Quellseiten zu aktualisieren. Quellen, für die die automatische Synchronisierung nicht aktiviert ist, benötigen eine manuelle Resynchronisierung, um ihre Inhalte zu aktualisieren. Um eine Quelle zu aktualisieren, öffne sie in Knowledge und wähle Resynchronisieren aus.

Während einer abgeschlossenen Website-Neusynchronisierung entfernt Customer Agent indexierte Unterseiten, die nicht mehr in der Sitemap der Website enthalten sind oder durch robots.txt ausgeschlossen werden. Die Entfernung hängt davon ab, wann die Website erfolgreich neu synchronisiert wird, daher entfernt eine Änderung auf deiner Website indexierte Inhalte nicht sofort. Um Inhalte direkt zu entfernen, lösche die Quelle aus Knowledge.

Wenn du eine Quelle aus Customer Agent löschst, entfernt Klaviyo diese Quelle und ihre indexierten Unterseiten aus der Wissensdatenbank deines Kontos.

Veröffentlicht ihr IP-Bereiche?

Nein. Die Verifizierung basiert auf kryptografischen Signaturen und dem Verified-Bots-Programm von Cloudflare, statt auf statischen IP-Zulassungslisten.

Weitere Ressourcen