Robots.txt Generator
Maak een robots.txt-bestand dat bepaalt wat zoekmachines en AI-crawlers mogen bezoeken.
- Gratis
- Geen registratie
- Draait in je browser
- Werkt op mobiel
Robots.txt Generator in een oogopslag
- Invoer
- Regels, paden en sitemaps
- Uitvoer
- robots.txt
- Privacy
- Alles gebeurt op je apparaat. Er wordt niets geüpload.
- Prijs
- Gratis, zonder account, zonder watermerk.
Hoe Robots.txt Generator te gebruiken
- 1Kies of crawlers de site mogen bezoeken.
- 2Lijst van te blokkeren paden, uitzonderingen en sitemaps.
- 3Download robots.txt en plaats het in de hoofdmap van uw site.
Functies
- Regels niet toestaan en toestaan.
- Sitemapregels.
- Eén klik om bekende AI-trainingscrawlers te blokkeren.
- Paden gevalideerd.
Robots.txt Generator Veelgestelde vragen
Waar gaat het bestand naartoe?
In de root van uw domein: https://example.com/robots.txt.
Verbergt robots.txt pagina's?
Nee. Het vraagt van goed opgevoede crawlers om niet te bezoeken; geblokkeerde pagina's kunnen nog steeds worden geïndexeerd als ze elders worden gelinkt. Gebruik noindex om een pagina buiten de zoekresultaten te houden.
Wordt er iets verzonden?
Nee. Het draait volledig in uw browser, dus niets wat u typt, wordt naar onze server verzonden of ergens opgeslagen.
Gerelateerde tools
SitemapgeneratorZet een lijst met pagina-URL's om in een geldige XML-sitemap voor Google en Bing.Website Metadata CheckerControleer de SEO van een pagina en het delen van metadata: titel, beschrijving, canoniek, koppen, gestructureerde gegevens en meer.Open Graph PreviewBekijk hoe een link eruit zal zien wanneer deze wordt gedeeld op Facebook, LinkedIn, X, Slack en WhatsApp, en welke tags ontbreken.BarcodegeneratorMaak EAN, UPC, Code 128 en andere barcodes als PNG of SVG.
Meer url & web tools-toolsLaatst bijgewerkt