INTEGRITY Dokumentace

← AI Crawl Control / ai-crawl-control / features / pay-per-crawl / use-pay-per-crawl-as-ai-owner

Ověřte svůj AI prohledávač

graph LR
A[Set up your<br>Cloudflare Account] --> B[Verify your<br>AI crawler]:::highlight
B --> C[Discover<br>payable content]
C --> D[Connect to<br>Stripe]
D --> E[Crawl pages]
classDef highlight fill:#F6821F,color:white

Jakmile propojíte svůj účet Stripe, nastavte svého AI robota jako ověřený bot.

Omezení přístupu k obsahu

Když se AI prohledávač pokusí získat přístup k obsahu chráněnému pay per crawl, obdrží stavový kód HTTP 402. Ten signalizuje, že je vyžadována platba. HTTP hlavička odpovědi obsahuje cenu obsahu.

Hlavička odpovědi pak může vypadat například takto:

HTTP/2 402
date: Fri, 06 Jun 2025 08:42:38 GMT
content-type: text/plain; charset=utf-8
crawler-price: USD 0.01
server: cloudflare

Pro přístup k tomuto obsahu musíte ověřit svůj AI crawler.

1. Dodržujte protokol Web Bot Auth

Ujistěte se, že se váš AI prohledávač identifikuje pomocí požadovaných hlaviček pro Web Bot Auth.

Postupujte podle kroků uvedených v Web Both Auth.

2. Dodržujte zásady pro ověřené roboty

Ujistěte se, že váš AI prohledávač dodržuje zásady Verified Bots.

3. Odešlete žádost o ověření

Vyplňte formulář a přidejte svůj AI crawler na seznam ověřených botů Cloudflare.

  1. V Cloudflare dashboardu přejděte na Manage Account > Nastavení.

    Přejděte na Konfigurace ↗

  2. Přejděte na Bot Submission Form kartě.

  3. Vyplňte formulář těmito požadovanými údaji:

    • Vyberte typ botu: Zvolte buď Verified Bot nebo Signed Agent.
    • Metoda ověření: Vyberte Signatura požadavku.
    • Hodnoty hlavičky User-Agents: Zadejte řetězec (řetězce) User-Agent, které váš robot používá.
    • User-Agents Match Pattern: Zadejte vzory podřetězců, které odpovídají vašemu User-Agent (například GoogleBot | GoogleScraper).

  4. Vyberte Odeslat.