直接用在网页中显示不了 403,复制链接粗来直接访问显示的出来,再刷新之前的就可以显示了 这是为什么呢
1
vainl1 2018-01-18 05:13:03 +08:00 via iPhone
http refer ?
|
3
Telegram 2018-01-18 08:07:33 +08:00 via iPhone
|
4
xiaobai987 2018-01-18 08:25:43 +08:00
豆瓣之前没有防盗链。
|
5
MaxBear 2018-01-18 08:31:50 +08:00 via Android
知乎反正是防盗链的
好像豆瓣最近也放防盗链了。。。 |
6
bigggge 2018-01-18 09:14:51 +08:00
加上 <meta name="referrer" content="never">
|
7
Jackeriss 2018-01-18 09:27:24 +08:00
You may need this: https://github.com/jpgerek/referrer-killer
|
8
scriptB0y 2018-01-18 12:12:24 +08:00
https://github.com/laixintao/douban-movie
我也写过一个 douban 电影的爬虫,你可以看一下。这个是抓我自己看过的列表的。一般我不管有没有用都把浏览器的 headers 防爬虫里面,反正就跑一两次。 |
9
waczx 2018-01-18 16:55:20 +08:00
也遇到图片 403 了
|
10
mnhkahn 2018-01-18 17:10:42 +08:00 1
用 https,refer 会强制隐藏,豆瓣也拦不了你了
|