收藏
回答

sitemap疑问?

这里的不被索引是指不会有微信爬虫去爬这个页面吗?还是指会有爬虫访问,但是对应页面不会放入索引中?可以理解成只有参数中带有a、b参数,爬虫才会去整整爬取对应页面吗?

回答关注问题邀请回答
收藏

1 个回答

  • Admin²⁰²¹
    Admin²⁰²¹
    2020-09-04

    谢邀:

    1、是指不爬

    2、 这个图中的规则可以简单「理解成只有参数中带有a、b参数,爬虫才会去整整爬取对应页面吗?

    2020-09-04
    有用 1
    回复 1
    • 小小发
      小小发
      2020-09-04
      好的,感谢解答
      2020-09-04
      回复
登录 后发表内容
问题标签