# ═══════════════════════════════════════════════════════════════════════════ # 翻咔 Finka · robots.txt(站群精品模板) # ─────────────────────────────────────────────────────────────────────────── # 部署说明 # 1) 将本文件与 sitemap.xml 中占位符 http://www.ynhongyaoyl.com 替换为「站点根 URL」 # 须含协议、无末尾斜杠,示例:https://www.example.com # 2) 或使用发布脚本 / CDN 边缘「子串替换」在上线时注入当前域名。 # 3) 若暂不替换 Sitemap 行,可先注释该行,改在站长平台手动提交 sitemap。 # ═══════════════════════════════════════════════════════════════════════════ User-agent: * Allow: / # 主流抓取:全站允许(无后台路径时可保持极简) User-agent: Googlebot Allow: / User-agent: Bingbot Allow: / User-agent: Baiduspider Allow: / # 可选:屏蔽无意义参数(按需取消注释) # Disallow: /*?*utm_ # 站点地图(占位符上线前必须替换,否则爬虫会请求无效 URL) Sitemap: http://www.ynhongyaoyl.com/sitemap.xml