aşağıda vermiş olduğum dosya stabil bir robots.txt dir. işinizi fazlasıyla görecektir.
Kod:
User-agent: *
Disallow: /misc/
Disallow: /misc/style/
Disallow: /install/
Disallow: /admin.php
Disallow: /misc/cookies
Disallow: /misc/style-variation
Sitemap: https://siteniz.com/sitemap.xml
