防盗链referer:
一种反爬方式。一些网站在响应之前会先溯源,检查请求的网址X,是从哪个链接进入的(即上一级网址是谁),比如:通过网址A--->进入网址X,那么上一级就是A。如果发现上一级网址不存在,或者错误,则认为是其他歪门邪道来的,就不给你数据。这个就是防盗链referer。
# 防盗链的信息查看:F12 --- requests headers --- referer
# 破解防盗链:自己在请求头headers里加上referer即可。
代理proxies:理解为一种网络马甲。改变IP等等。
# 使用方式:找到一个代理IP,然后在请求的时候参数中加上proxies即可。
标签:headers,爬虫,代理,---,网址,referer,防盗链
From: https://www.cnblogs.com/abloger/p/18243737