Robots.txt Generator
Creați un fișier robots.txt care controlează ce motoarele de căutare și crawlerele AI pot vizita.
- Gratuit
- Fără înscriere
- Se rulează în browser
- Funcționează pe mobil
{nume} dintr-o privire
- Intrare
- Reguli, căi și hărți de site
- Ieșire
- robots.txt
- Confidențialitate
- Totul se întâmplă pe dispozitivul tău. Nu este încărcat nimic.
- Preț
- Gratuit, fără cont, fără filigran.
Cum se folosește Robots.txt Generator
- 1Alegeți dacă crawlerele pot vizita site-ul.
- 2Listați căile de blocat, excepții și hărți de site.
- 3Descărcați robots.txt și puneți-l la rădăcina site-ului dvs.
Caracteristici
- Permiteți și permiteți regulile.
- linii de hartă site.
- Un clic pentru a bloca crawlerele de antrenament AI cunoscute.
- Căi validate.
Robots.txt Generator Întrebări frecvente
Unde se duce fișierul?
La rădăcina domeniului dvs.: https://example.com/robots.txt.
Robots.txt ascunde paginile?
Nu. Le cere crawlerilor bine comportați să nu viziteze; paginile blocate pot fi în continuare indexate dacă sunt legate în altă parte. Utilizați noindex pentru a menține o pagină în afara căutării.
Se trimite ceva?
Nu. Se rulează în întregime în browserul dvs., așa că nimic din ceea ce introduceți nu este trimis la serverul nostru sau stocat oriunde.
Instrumente înrudite
Sitemap GeneratorTransformați o listă de adrese URL de pagini într-o hartă de site XML validă pentru Google și Bing.Verificator de metadate ale site-ului webVerificați SEO și partajarea metadatelor unei pagini: titlu, descriere, canonic, titluri, date structurate și multe altele.Deschideți Previzualizarea graficuluiVedeți cum va arăta un link atunci când este distribuit pe Facebook, LinkedIn, X, Slack și WhatsApp și ce etichete lipsesc.Generator de coduri de bareFaceți EAN, UPC, Codul 128 și alte coduri de bare ca PNG sau SVG.
Mai multe url & web toolsUltima actualizare