【在线robots.txt文件生成工具】
留空为无
googlebot
baiduspider
msnbot
yahoo-slurp
teoma
twiceler
gigabot
scrubby
robozilla
nutch
ia_archiver
naverbot, yeti
googlebot-image
googlebot-mobile
yahoo-mmcrawler
psbot
asterias
yahoo-blogs/v3.9
在线robots.txt文件生成工具 - 样例

# robots.txt generated at http://www.qyyshop.com/


User-agent: Googlebot

Disallow: 


User-agent: baiduspider

Disallow: /


User-agent: *

Disallow: 


Crawl-delay: 5


Disallow: /cgi-bin/

Disallow: /app-themes/


Sitemap: http://www.yoursite.com/sitemap.xml


在线robots.txt文件生成工具 - 使用过的工具
在线robots.txt文件生成工具 - 概述
根据输入内容,在线robots文件生成工具。
在线robots.txt文件生成工具 - 说明

这款在线robots.txt生成器提供多种常见的设置选项供站长选择使用,可根据具体需要生成符合robots协议的robots文件,是一款非常实用的SEO工具

在线robots.txt文件生成工具 - 更新

第一版本发布

相关资源

在线robots.txt文件生成工具 - 相册

;

在线robots.txt文件生成工具 - 使用反馈:

欢迎留言您的反馈会引导我们改进的方向。

【次】
访问次数

27

【次】
使用次数

7

0

点踩