# Kereskedelmi SEO-crawlerek: nem hoznak latogatot, csak terhelnek. User-agent: AhrefsBot User-agent: Amazonbot User-agent: SemrushBot User-agent: DataForSeoBot User-agent: MJ12bot User-agent: DotBot User-agent: BLEXBot User-agent: Barkrowler User-agent: serpstatbot User-agent: ZoominfoBot User-agent: PetalBot User-agent: Bytespider Disallow: / User-agent: * Disallow: /api/ Disallow: /admin/ Disallow: /search Disallow: /login Disallow: /logout Disallow: /register Disallow: /tmp/ Disallow: /debug/ # A heti és a régi napi archívumot a view 301-ezi a havi kanonikusra. # A robots.txt ezért NEM tiltja őket: a Google csak így tudja recrawlolni # a Search Console-ban felgyűlt tiltott/noindex/404 URL-eket, és összevonni. Sitemap: https://meteon.hu/sitemap.xml