robots.txt
Reguli0
sitemap.xml
URL-uri0
Cum funcționează generatorul robots.txt și sitemap
robots.txt le spune motoarelor de căutare ce pot citi. sitemap.xml le dă lista de pagini pe care vrei să le indexeze. Completezi adresa site-ului, regulile și URL-urile, apoi descarci cele două fișiere în rădăcina domeniului (exemplu.ro/robots.txt și exemplu.ro/sitemap.xml).
Poți scrie drumuri relative (/despre) sau URL-uri complete. Lastmod, changefreq și priority se aplică tuturor, dacă nu le pui pe linie: url | lastmod | changefreq | priority. Totul rămâne în browser.
robots.txt
Allow și Disallow
Controlezi ce foldere pot fi citite, plus un link către sitemap.
sitemap.xml
Lista de pagini
Fiecare URL primește lastmod, frecvență și prioritate, gata de Google Search Console.
SEO
Fără server
Generezi textul aici, apoi îl încarci tu pe hosting. Nu se publică nimic automat.
Important:
robots.txt nu este o parolă. Un Disallow nu ascunde pagina de oameni, doar cere bot-ilor să n-o citească. Paginile private rămân în spatele autentificării.
Note utile
- Pune ambele fișiere în rădăcina domeniului, nu într-un subfolder, ca Google să le găsească la /robots.txt și /sitemap.xml.
- În Search Console poți trimite sitemap-ul după ce e live. Verifică că fiecare <loc> răspunde cu 200.
- Crawl-delay nu e respectat de Google. E util pentru alți bot-i mai politicoși.
- Poți adăuga pe o linie: /blog | 2026-10-19 | weekly | 0.8 ca să depășești valorile implicite.
- Nimic nu se salvează pe server. Dacă reîncarci pagina, câmpurile se golesc.