标签: 抓取
-
网络安全 使用 CloudFlare 后百度蜘蛛抓取错误，不收录问题
2022-10-10，时隔两个月后更新：因为CF被太多人用来翻墙，国内的搜索引擎查到网站在CF的IP下就不会继续抓取新内容了。--------好久没有注意到网站的收录情 ...小执念 发布于 2022-8-21 1 6K 最后回复 2022-8-21 17:34 -
编程语言 修复 discuz 蜘蛛不能抓取 tag 页面
discuz 有个 tag 功能，作用我就不多说了。这篇文章主要讲的是在默认情况下，discuz 会禁止蜘蛛抓取 tag 的页面，无图无证据，不信你们自己去抓取诊断一下（使用 ...小执念 发布于 2020-7-1 3 4.1K 最后回复 2020-7-2 10:50
更多...
