Robots.txt工具集 - 生成&检测搜索引擎规则 | 4759.cn

Robots.txt 工具集

🚀 配置Robots规则

1. 选择搜索引擎

2. 允许爬取的路径（每行一个）

3. 禁止爬取的路径（每行一个）

4. Sitemap 地址（可选）

5. 爬取延迟（秒，可选）

📄 预览结果

# 点击生成查看结果

Robots.txt 在线检测

网站域名

Robots.txt 内容

📊 检测结果

请点击检测

⚡ 网站测速检测网站访问速度 📶 PING 检测 ICMP/TCP协议连通性测试 Hot 📍 IP 查询 IP地址归属地查询 IPv6 IPv4 🌐 DNS解析查询解析域名DNS记录 🔍 综合查询查询域名综合信息 🗺️ 路由查询追踪网络访问路由 🔒 SSL检测检测SSL证书有效性 New 📋 ICP备案查询域名备案信息 📡 HTTP状态检测HTTP响应状态 New 📝 JSON格式化 JSON数据格式化校验 🔏 JS混淆加密 JS代码加密保护 Dev

📡 HTTP状态检测HTTP响应状态 🗺️ 路由查询追踪网络访问路由 🚫 被墙检测检测域名是否被屏蔽 📶 超级Ping 多节点PING连通测试 📱 微信/QQ拦截检测检测微信/QQ链接是否被拦截 Hot

🛡️ DNS劫持检测检测DNS是否被劫持 🔍 DNS污染检测检测DNS是否被污染 🌐 DNS解析查询解析域名DNS记录

🔍 域名查IP 查询域名绑定的IP地址 IPv6 IPv4 📍 IP批量查询支持 IPv4/IPv6 地址归属地批量查询 IPv6 IPv4 🔍 Whois查询查询域名注册信息 🌐 子域名查询一键扫描域名所有子域名 New

🗺️ Robots地图生成Robots协议文件 🕷️ 蜘蛛真伪验证验证搜索引擎蜘蛛 🔗 URL批量生成批量生成指定URL链接 🔐 Base64编解码 Base64数据编码解码 🔏 JS混淆加密 JS代码加密与还原 Dev ⏳ 时间戳转换 Unix 时间戳与日期互转 💻 网页源码调试前端调试必备，查看响应头与网页结构 Dev 🔌 API接口获取工具API调用方式 Dev

🏠 房贷计算器计算房贷还款金额常用 📝 繁简字转换繁简体文字互转 ⛽ 今日油价查询最新油价信息 Hot 💱 汇率换算实时外币汇率换算 ♈ 星座查询查询星座运势信息 🖼️ ICO制作在线制作ICO图标实用 📱 二维码工具生成/解析二维码 🌈 颜色查询对照表十六进制/RGB/HSL颜色值互转、配色查询 New