User-agent: * # 允许访问Sitemap Allow: /sitemap.xml$ # 禁止爬虫访问后台、登录、用户中心等敏感路径 Disallow: /admin/ Disallow: /eddhou/ Disallow: /merchant/ Disallow: /api/ Disallow: /user/ Disallow: /login Disallow: /register # 声明sitemap的完整URL(必须与实际访问地址一致) Sitemap: https://www.eddmall.com/sitemap.xml # 可选:单独针对Googlebot优化(增强兼容性) User-agent: Googlebot Allow: /sitemap.xml$ Sitemap: https://www.eddmall.com/sitemap.xml