消息通知
▲

最近使用

热门推荐

当前位置： 站长工具 >

robots.txt生成

限制目录：

每个路径之前都要包含："/"

(留空为无)Sitemap：

谷歌为xml格式，百度为html格式

检索间隔：
不限
所有搜索引擎：
  • ##
    允许
    拒绝
国内搜索引擎
  • 百度
    默认
    允许
    拒绝
  • SOSO
    默认
    允许
    拒绝
  • 搜狗
    默认
    允许
    拒绝
  • 有道
    默认
    允许
    拒绝
国外搜索引擎
  • 谷歌
    默认
    允许
    拒绝
  • Bing
    默认
    允许
    拒绝
  • 雅虎
    默认
    允许
    拒绝
  • Ask/Teoma
    默认
    允许
    拒绝
  • Alexa/Wayback
    默认
    允许
    拒绝
  • Cuil
    默认
    允许
    拒绝
  • MSN Search
    默认
    允许
    拒绝
  • Scrub The Web
    默认
    允许
    拒绝
  • DMOZ
    默认
    允许
    拒绝
  • GigaBlast
    默认
    允许
    拒绝
特殊搜索引擎(机器人)
  • Google Image
    默认
    允许
    拒绝
  • Google Mobile
    默认
    允许
    拒绝
  • Yahoo MM
    默认
    允许
    拒绝
  • Yahoo Blogs
    默认
    允许
    拒绝
  • MSN PicSearch
    默认
    允许
    拒绝

请将以下结果保存到记事本,命名为robots.txt上传到网站根目录
工具简介

Robots.txt 是存放在站点根目录下的一个纯文本文件。虽然它的设置很简单，但是作用却很强大。它可以指定搜索引擎蜘蛛只抓取指定的内容，或者是禁止搜索引擎蜘蛛抓取网站的部分或全部内容。

相关功能
域名类
WHOIS查询 DNS查询 过期域名查询 NsLookup查询 域名删除时间 备案查询 友链查询 SEO综合查询
IP类
IP 查询 IP 批量 IP反查域名 IP WHOIS查询 百度真假蜘蛛 IP所在地批量 友链同IP检测 端口扫描
百度相关
关键词排名 关键词挖掘 反链查询 百度PC权重 收录查询 关键词优化分析 Meta信息挖掘 百度移动权重
测速监控
PING检测 网站被黑检测 国内网站测速 海外网站测速 网站历史记录 SEO历史记录 国内网速对比 SEO报告

关于站长之家 | 联系我们 | 广告服务 | 友情链接 | 网站动态 | 版权声明 | 人才招聘 | 帮助

© CopyRight 2002-2024, CHINAZ.COM, Inc.All Rights Reserved.闽ICP备08105208号增值电信业务经营许可证闽B2-20120007号亿速云提供云服务器支持