# robots.txt - 华纳万宝路公司 官方网站 # 全面允许百度、搜狗、必应、Google 等搜索引擎蜘蛛抓取 # 抓取优先级:首页 > 关于我们/企业服务 > 新闻资讯 > 文章详情 > 联系/地图 User-agent: * Disallow: Allow: / Allow: /css/ Allow: /js/ Allow: /images/ # 百度蜘蛛(Baiduspider) User-agent: Baiduspider Disallow: Allow: / Allow: /css/ Allow: /js/ Allow: /images/ # 百度图片、新闻、快照蜘蛛 User-agent: Baiduspider-image Disallow: Allow: / User-agent: Baiduspider-news Disallow: Allow: / User-agent: Baiduspider-video Disallow: Allow: / # 搜狗蜘蛛(Sogou) User-agent: Sogou web spider Disallow: Allow: / Allow: /css/ Allow: /js/ Allow: /images/ User-agent: Sogou inst spider Disallow: Allow: / # 必应 User-agent: Bingbot Disallow: Allow: / # 移动端抓取 User-agent: Baiduspider-render Disallow: Allow: / User-agent: Sogou mobile spider Disallow: Allow: / # 360 搜索 User-agent: Yisouspider Disallow: Allow: / User-agent: 360Spider Disallow: Allow: / # 神马搜索 User-agent: YisouSpider Disallow: Allow: / # 头条搜索 User-agent: Bytespider Disallow: Allow: / # 搜索引擎优化站点地图 Sitemap: https://www.hn6616.com/sitemap.xml Sitemap: https://www.hn6616.com/sitemap.html # 抓取频率建议:首页 24h 一次,栏目页 72h 一次,文章页 168h 一次