BizKitHub

VikiTron Bot

Z BizKitHub Docs, znalostní báze platformy

VikiTronBot je veřejný internetový crawler za VikiTron. Nepřetržitě navštěvuje webové stránky, aby vytvořil technický záznam, který VikiTron zpřístupňuje jako bezplatné nástroje a veřejné JSON API — DNS záznamy, TLS certifikáty, IP adresy, subdomény a robots.txt soubory.

Identifikace

  • User-Agent: VikiTronBot/1.0 (+https://vikitron.com/bot)
  • Kontakt pro webmastery:
  • [email protected] — DMCA a zprávy o zneužití
  • [email protected] — technické dotazy
  • IP rozsahy: budou zveřejněny na této stránce. Doporučujeme povolit na úrovni CIDR, jakmile budou rozsahy oznámeny.

Politika pro procházení

VikiTronBot respektuje robots.txt, noindex a nofollow direktivy.

Ohleduplnost procházení

  • Adaptivní rychlost, default 1–2 požadavky za sekundu na hostitele
  • Zohledňuje čas odezvy a chybovost před zvýšením tlaku
  • Exponenciální zpětný odchod s maximem 3 pokusů o opakování

Čerstvost

  • Hlavní stránky jsou kontrolovány častěji
  • Víceúrovňový harmonogram založený na tom, jak často se každý zdroj mění

Shromážděná data

Sbíráme

  • DNS záznamy (veřejné zóny pouze)
  • robots.txt soubory
  • Certifikáty ze TLS handshake
  • Veřejné HTTP metadat (hlavičky, stavové kódy)
  • Úryvky z logů certifikátů Transparency
  • Reverzní DNS data

Neskladujeme

  • Obsah za autentizací
  • Osobní údaje zaslané prostřednictvím formulářů

Opt-out a omezení

Blokovat VikiTronBot v robots.txt

User-agent: VikiTronBot
Disallow: /

Snížit rychlost procházení

Použijte direktivu Crawl-delay.

Ochrana citlivých adresářů

Kombinujte Disallow se serverovými pravidly (401/403), aby blokované cesty nebyly dosažitelné ani když klient ignoruje robots.txt.

Otestujte svůj robots.txt

Můžete ověřit, jak VikiTronBot interpretuje vaše pravidla pomocí Robots.txt Checker na vikitron.com.

Ověření bota

VikiTronBot posílá hlavičky From: a User-Agent podle výše uvedené Identifikace.

Na žádost můžeme získat ověřovací token z dobře známé URL na vaší doméně, například:

https://example.com/.well-known/vikitron-verify.txt

Stránka byla naposledy upravena 24. července 2026.