今天爬一个数据是大拇指网发布的数据,它的站点图片是防盗链,所以导致图片无法入库,怎么办?在查阅一些资料后,找到解决办法,在此分享下:
URL url = new URL(""); // 获得连接 URLConnection connection = url.openConnection(); connection.setRequestProperty("Referer", "http://www.xxx.com");
因为它是通过referer的值来判断,所以在请求头上添加Referer属性即可解决。
本站文章如无特殊说明,均为本站原创,如若转载,请注明出处:爬虫爬取图片解决防盗链方法 - Python技术站