User-agent: *
Disallow: /cgi-bin/ # блокирует доступ к страницам начинающимся с '/cgi-bin'
Disallow: /xx/

User-agent: *

Disallow: /admin_real
Disallow: /baner
Disallow: /cgi-bin/
Disallow: /admin_fun
Disallow: /secureimage
Disallow: /xx/

http://cazinovip.ru/sitemap.xml
Sitemap: http://cazinovip.ru/sitemap.xml
Sitemap: http://cazinovip.ru/sitemap.html