Robots.txt Generator
Gumawa ng robots.txt file na kumokontrol kung anong mga search engine at AI crawler ang maaaring bisitahin.
- Libre
- Walang sign-up
- Gumagana sa iyong browser
- Gumagana sa mobile
Robots.txt Generator sa isang sulyap
- Input
- Mga panuntunan, landas at sitemap
- Output
- robots.txt
- Pagkapribado
- Lahat ay nangyayari sa iyong device. Walang na-upload.
- Presyo
- Libre, walang account, walang watermark.
Paano gamitin ang Robots.txt Generator
- 1Piliin kung maaaring bisitahin ng mga crawler ang site.
- 2Maglista ng mga landas upang harangan, mga pagbubukod at mga sitemap.
- 3I-download ang robots.txt at ilagay ito sa root ng iyong site.
Mga Tampok
- Huwag payagan at payagan ang mga panuntunan.
- Mga linya ng sitemap.
- Isang pag-click upang harangan ang mga kilalang AI training crawler.
- Na-validate ang mga landas.
FAQ ng Robots.txt Generator.
Saan napupunta ang file?
Sa ugat ng iyong domain: https://example.com/robots.txt.
Nagtatago ba ng mga pahina ang robots.txt?
Hindi. Hinihiling nito sa mga crawler na hindi bumisita; ang mga naka-block na pahina ay maaari pa ring ma-index kung naka-link sa ibang lugar. Gumamit ng noindex upang panatilihing wala sa paghahanap ang isang pahina.
May ipinadala ba?
Hindi. Ito ay gumagana nang buo sa iyong browser, kaya walang naipadala sa aming server o iniimbak kahit saan.
Mga kaugnay na tool
Tagabuo ng SitemapGawing wastong XML sitemap ang isang listahan ng mga URL ng page para sa Google at Bing.Tagasuri ng Metadata ng WebsiteSuriin ang SEO ng page at pagbabahagi ng metadata: pamagat, paglalarawan, kanonikal, mga heading, structured data at higit pa.Buksan ang Graph PreviewTingnan kung ano ang magiging hitsura ng isang link kapag ibinahagi sa Facebook, LinkedIn, X, Slack at WhatsApp, at kung aling mga tag ang nawawala.Tagabuo ng BarcodeGawing PNG o SVG ang EAN, UPC, Code 128 at iba pang barcode.
Higit pang url & web toolsHuling na-update