BookLink.Me:最有爱的小说搜索引擎 导入书架  |  
书名作者  
繁體  登录  注册  移动版  
  首页  临时书架  书单/短评/长评/单章点评  讨论  印象  /年新书榜|点击榜|收藏榜|评价榜  手气不错  我们每天都在开心的进步着

首页 > 讨论 > 飘天新和147的抓取好像出错了
  qwer1234  飘天新和147的抓取好像出错了回复5发表于2023-01-14 15:28:18 / 楼主
好几本都是更新了但是没显示

  5855555  发表于2023-01-14 19:58:46 / 2楼
可能是因为那些网站开了cloudflare盾。
【 在 qwer1234 的大作中提到: 】
: 好几本都是更新了但是没显示

  booklink  发表于2023-01-15 07:45:34 / 3楼
是的,上次研究过怎么处理这个,没搞定,有空再看看
【 在 5855555 的大作中提到: 】
: 可能是因为那些网站开了cloudflare盾。

  5855555  发表于2023-01-15 11:56:24 / 4楼
我因为被这个盾卡在验证页面,搜了好多相关资料,也去了cloudflare官网看了看。
这个东西直接内嵌进网站代码里,而且在dns上有个盾,访问网站先要访问它,被它解码以后在传回去,这还属于常规操作,主要是它对访问的劫持,网站真实ip被它挡住了。
这个东西直接把网站访问的用户数据截胡了,我不认可。但没卵用。
【 在 booklink 的大作中提到: 】
: 是的,上次研究过怎么处理这个,没搞定,有空再看看

  abc  发表于2023-01-15 13:55:59 / 5楼
其实挺好的一个服务,防ddos,还能用cdn省流量
【 在 5855555 的大作中提到: 】
: 我因为被这个盾卡在验证页面,搜了好多相关资料,也去了cloudflare官网看了看。
: 这个东西直接内嵌进网站代码里,而且在dns上有个盾,访问网站先要访问它,被它解码以后在传回去,这还属于常规操作,主要是它对访问的劫持,网站真实ip被它挡住了。
: 这个东西直接把网站访问的用户数据截胡了,我不认可。但没卵用。
: ............

  5855555  发表于2023-01-15 16:38:08 / 6楼
确实,它防ddos和爬虫好使,cdn一般,虽然它有个国内公司但看具体情况就是个办事处,数据还是走1.1.1.1的国际服务器。
【 在 abc 的大作中提到: 】
: 其实挺好的一个服务,防ddos,还能用cdn省流量





  联系我们  关于我们