问答

如果说页面里url特别多的话,蜘蛛会不会有选择性的进行抓取?

fxone 发布于 6个月前 分类:seo

不会,他都会一个不漏给你提出来,但会把JS、CSS这样的链接给过滤掉。但请注意,全部抓取过来之后会进行筛选,并不是所有都会建库。

0个回复

  • 暂无回复

个人中心
购物车
优惠劵
今日签到
有新私信 私信列表
搜索