Pro správce webů a hostingy

Puluno Explorer — náš crawler

Když někdo na puluno.io spustí průzkum webu, náš server jednorázově stáhne veřejnou stránku a vyhodnotí technické SEO a zdraví. Tady najdete vše pro ověření, povolení nebo zablokování našeho crawleru.

Identita crawleru

User-Agent: Mozilla/5.0 (compatible; Puluno-Explorer/1.0; +https://puluno.io/crawler)
Odchozí IP adresa: 167.233.253.72
Hostname (reverse DNS): crawler.puluno.io

Jak ověřit, že jsme to opravdu my

Používáme forward-confirmed reverse DNS — stejný princip jako Googlebot. Nikdo cizí ho nedokáže zfalšovat:

Reverse DNS (PTR) naší odchozí IP vrátí hostname končící na crawler.puluno.io.
Forward DNS (A záznam) pro crawler.puluno.io vrátí zpět tutéž IP.

Když obojí sedí, je to náš legitimní crawler.

Jak se chováme

Stahujeme jen stránku, kterou uživatel zadá (homepage a volitelně vzorek z vaší sitemap).
Respektujeme robots.txt (pravidla pro Googlebota i vlastní).
Nízká frekvence, žádné přihlašování, žádné zápisy ani odesílání formulářů.
Čteme pouze veřejný obsah — nic za přihlášením.

Jak nás povolit (doporučeno)

Pokud náš sken blokuje bezpečnostní vrstva (Imunify360, LiteSpeed, firewall), přidejte nás do výjimek podle User-Agentu nebo IP uvedené výše. Po ověření přes reverse DNS je bezpečné nás povolit.

Jak nás zablokovat

Nechcete-li, abychom web skenovali, přidejte do robots.txt pravidlo pro Puluno-Explorer nebo zablokujte náš User-Agent či IP na firewallu. Respektujeme to.

Příklad pro robots.txt:

User-agent: Puluno-Explorer
Disallow: /

Kontakt a žádost o výjimku

Dotazy k crawleru nebo žádost o whitelist pošlete na info@puluno.io.