求助火车头采集的问题

imyoy · 发表于 2018-9-12 17:24:39

有个图片站，浏览器访问正常，但是直接输入站内的图片地址403错误，本来打算火车头采集到图片地址直接下载下来的，发现全部403.
请问大佬们，是网站检测了来源网址还是什么手段？火车头怎么做才能下载图片成功？

kittyy487 · 发表于 2018-9-12 17:35:44

换蜘蛛的协议头看看谷歌图片百度图片

有些网站可以突破

cxd44 · 发表于 2018-9-12 17:37:48

我没这个技术，也可以去淘宝看看采集，看看他们能不能做，几十元到几百

cdwyd · 发表于 2018-9-12 17:41:14

对比下浏览器的请求自己火车头里面的请求信息，应该好解决。如果搞不定可提供付费咨询

miven · 发表于 2018-9-12 17:59:17

伪造refer可破

002 · 发表于 2018-9-12 18:01:18

cookie 换成chrome 浏览器..

521vps · 发表于 2018-9-12 19:03:48

99%是检查来路网址伪造一下就好

揽月 · 发表于 2018-9-12 19:30:52

这个简单，设置一下 referer 即可，过段时间搞个上万套图的图片站、自动更新十年

慕大夜sora · 发表于 2018-9-12 19:56:51

应该是防盗链的refer吧，很多人都说可以伪装的，可以搜下关键词。简单, php curl referer了解一下. 写一个.php放到本地, 把采集到的图片传参再下载就可以了. 现在图片都不保存本地了. 直接就外链加缓存, 跟本地没区别. 搬家起来也方便, 根本不需要打包.

imyoy · 发表于 2018-9-12 20:03:54

sora 发表于 2018-9-12 20:13

简单, php curl referer了解一下. 写一个.php放到本地, 把采集到的图片传参再下载就可以了. 现在图片都不保 ...
大佬有例子或参考文章么？谢谢

		自动登录	找回密码
密码			立即注册