Cum lucrează împreună sitemap-ul și fișierul robots.txt.

Exemple: când vrei ca un URL să fie în sitemap, dar să fie blocat din crawl.

Cazuri de evitat: excluderi care anulează efectul sitemap-ului.