K čemu slouží sitemap
Soubor sitemap.xml je seznam adres, které chcete mít ve vyhledávači. Pomáhá robotům objevit i stránky, na které nevede mnoho odkazů, a urychluje jejich indexaci.
Co řeší robots.txt
Soubor robots.txt naopak říká robotům, které části webu nemají procházet – například administraci nebo interní vyhledávání. Pozor: neslouží k utajení obsahu, jen k usměrnění procházení.
Sitemap odkazuji přímo v robots.txt a registruji ve Search Console, aby ji Google našel co nejdřív.