User-agent: *
Host: https://whois.ru
#{sitemap}
Sitemap: https://whois.ru/freeing_sitemap1.xml
Sitemap: https://whois.ru/freeing_sitemap2.xml
Sitemap: https://whois.ru/freeing_sitemap3.xml
Sitemap: https://whois.ru/freeing_sitemap4.xml
Sitemap: https://whois.ru/freeing_sitemap5.xml
#{!sitemap}
User-agent: Baiduspider
Disallow: /
User-agent: DataForSeoBot
Disallow: /
User-agent: PetalBot
Disallow: /
User-agent: Applebot
Disallow: /
User-agent: AhrefsBot
Disallow: /
User-agent: DataForSeoBot
Disallow: /
User-agent: bingbot
Disallow: /
User-agent: SemrushBot
Disallow: /