在線網站robots.txt文件生成器 - aTool在線工具

默認 - 所有機器人是:
檢索間隔:
Sitemap: (留空為無)

普通搜索機器人: Google googlebot
  Baidu baiduspider
  MSN Search msnbot
  Yahoo yahoo-slurp
  Ask/Teoma teoma
  Cuil twiceler
  GigaBlast gigabot
  Scrub The Web scrubby
  DMOZ Checker robozilla
  Nutch nutch
  Alexa/Wayback ia_archiver
  Naver naverbot, yeti

特殊搜索機器人: Google Image googlebot-image
  Google Mobile googlebot-mobile
  Yahoo MM yahoo-mmcrawler
  MSN PicSearch psbot
  SingingFish asterias
  Yahoo Blogs yahoo-blogs/v3.9

限制目錄: 路徑是相對的,但每個路徑之前都要包含:"/"
 
 
 
 
 

百人牛牛游戏开发 www.zztnl.icu

什么是robots.txt文件 | What Is Robot.txt

robots.txt文件內容 | Content Of Robot.txt

關于robots.txt文件生成器 | Robot.txt Generator

推薦功能 / 猜你喜歡 | Suggest

評論 | Comments

扑克牌三公玩法与技巧 龙江风采22选5坐标走势图 时时彩历史记录查询 1分快三的投注技巧 时时彩后一100稳赚 排列三组选2468 pk10玩法及中奖规则 龙虎预测软件免费 控制重庆时时彩开奖 腾讯分分计划软件哪个好 重庆老时时开奖走势图 118手机平特论坛 老时时360开奖票 快三大小技巧 pk10前三基本走势图 炸金花的技巧与经验