现在的大网站都是多层次解析或者设置了用户cookies。如果你技术够,慢慢挖,就能挖出真实的图片来。
有技术就可以
爬得的什么网站,爬不到,响应回来的网页一般有提示在里面。看用了啥反爬技术。再做对策,不一定是请求头和ip的问题。
有可能和header、cookie相关
从技术上来说,一般都是可以通过技术的研究实现的,但是如果人家的网站有防采集机制,建议题主不要费力气去研究这个技术了。无非是两种情况:
1.花费大量时间精力,最后研究失败
2.花费大量时间精力,最后研究成功,但是人家不允许通过这种方式获取自己的数据,到时候对簿公堂