Robots.txt Editor
Wat doet het en wat levert het jou op?
Bewerk robots.txt vanuit WordPress. Je bepaalt welke pagina's zoekmachines mogen crawlen en voegt de sitemap-URL toe.
Hoe gebruik je het?
- Ga naar Sitemaps → Robots.txt.
- Bekijk de huidige inhoud.
- Voeg regels toe of pas ze aan, bijv.
Disallow: /wp-admin/. - Zorg dat er een regel
Sitemap: https://jouwsite.nl/sitemap.xmlstaat. - Klik Save.
Voorbeeld
Je hebt een PDF-map die niet geïndexeerd hoeft te worden. Je voegt toe: Disallow: /pdf/. Je zorgt dat Sitemap: wel blijft staan.
Mogelijke problemen & oplossingen
- Hele site wordt geblokkeerd: pas op met
Disallow: /. Test altijd met de URL/robots.txten de robots.txt-tester in GSC. - Wijzigingen worden niet opgeslagen: controleer of je serverbestandsrechten toestaan dat WordPress robots.txt serveert.
