Děkuji za odpověď, ještě se zeptám, pokus mám v robots.txt odkaz na sitemap a budu chtít zakázat dvě složky, tak to bude vypadat takto?
sitemap http://www.example.com
User-agent: *
Disallow: / images/avatars/upload
Disallow: / images2/avatars2/upload2