代理IP有什么用?做什么用的?

Python爬虫就是一个探测机器，它的基本操作就是模拟人的行为去各个网站溜达，把看到的信息背回来。就像一只虫子在一幢楼里不知疲倦地爬来爬去。

HTTP代理的分类

根据代理ip的匿名程度，代理IP可以分为下面四类：

• 透明代理：能够直接“隐藏”你的ip地址，但是还是可以查到你是谁。

• 匿名代理：匿名代理比透明代理进步了一点，别人只能知道你用了代理，无法知道你是谁。

• 混淆代理：与匿名代理相同，假设使用混淆代理，别人还是能知道你在用代理，但是会得到一个假的IP地址，伪装的更逼真

• 高匿代理：可以看出来，高匿代理让别人根本无法发现你是在用代理，所以是最好的选择。

在使用的使用，毫无疑问使用高匿代理效果最好

而且，进行大批量的爬虫时，仅仅使用一两个代理是完全不够用的，ip一定被封就无法继续抓取数据了，所以需要大量的高匿IP。

HTTP和HTTPS的不同


http是非常常见的应用层协议，是超文本传输协议的简称，其传输的内容都是明文的。

http是HTTP协议运行在TCP之上。所有传输的内容都是明文，客户端和服务器端都无法验证对方的身份。

代理服务器英文全称是Proxy Server，其功能就是代理网络用户去取得网络信息。形象的说：它是网络信息的中转站。在一般情况下，我们使用网络浏览器直接去连接其他Internet站点取得网络信息时，是直接联系到目的站点服务器，然后由目的站点服务器把信息传送回来。代理服务器是介于浏览器和Web服务器之间的另一台服务器，有了它之后，浏览器不是直接到Web服务器去取回网页而是向代理服务器发出请求，信号会先送到代理服务器，由代理服务器来取回浏览器所需要的信息并传送给你的浏览器。

大部分代理服务器都具有缓冲的功能，就好象一个大的Cache，它有很大的存储空间，它不断将新取得数据储存到它本机的存储器上，如果浏览器所请求的数据在它本机的存储器上已经存在而且是最新的，那么它就不重新从Web服务器取数据，而直接将存储器上的数据传送给用户的浏览器，这样就能显著提高浏览速度和效率。

更重要的是：代理服务器是 Internet链路级网关所提供的一种重要的安全功能，它的工作主要在开放系统互联 (OSI) 模型的对话层，从而起到防火墙的作用。

鉴于上述原因，代理服务器大多被用来连接INTERNET（局域网）和INTRANET（国际互联网）。在国内，所谓中国多媒体公众信息网和教育网都是独立的大型国家级局域网，是与国际互联网隔绝的。出于各种需要，某些集团或个人在两网之间开设了代理服务器，如果我们知道这些代理服务器的地址，就可以利用它到达网外网，例如从169到达163。代理服务器就象是连接两岸的桥梁，但是169与163之间的代理服务器一般的都被设置了访问密码，或者要收代理费用，阿Z搜索并提供的是完全免费的代理服务器地址，完全没有任何限制，不需缴交任何额外费用！

■ 为何要开设代理服务器？

1、连接Internet与Intranet 充当firewall（防火墙）：因为所有内部网的用户通过代理服务器访问外界时，只映射为一个IP地址，所以外界不能直接访问到内部网；同时可以设置IP地址过滤，限制内部网对外部的访问权限；另外，两个没有互联的内部网，也可以通过第三方的代理服务器进行互联来交换信息。

2、节省IP开销：如前面所讲，所有用户对外只占用一个IP，所以不必租用过多的IP地址，降低网络的维护成本。这样，局域局内没有与外网相连的众多机器就可以通过内网的一台代理服务器连接到外网，大大减少费用。当然也有它不利的一面，如许多网络黑客通过这种方法隐藏自己的真实IP地址，而逃过监视。

3、提高访问速度：本身带宽较小，通过带宽较大的proxy与目标主机连接。而且通常代理服务器都设置一个较大的硬盘缓冲区（可能高达几个GB或更大），当有外界的信息通过时，同时也将其保存到缓冲区中，当其他用户再访问相同的信息时，则直接由缓冲区中取出信息，传给用户，从而达到提高访问速度的目的。 使用代理服务器有那些好处？

在我国，上网分为163和169两种。169用户又分为三类（全国各地分类口径可能不同），一类用户拥有网外权，可以直接享受国际互联网的所有服务；另一类为注册用户，使用注册的帐号上网，第三类称为GUEST用户，使用公用的账号上网，采取主叫记费制。无网外权用户的收费低廉，但只能与中国多媒体信息网中的（IP地址以10开头）的网站连接。所谓"畅游网络世界"只不过是句空话！您是否也经历过这样的痛苦：由于钞票所限，每天只能徘徊在169上，仰头望着163中一堆堆的国际互联网信息、资源和免费大餐，口水直流……哎！

现在好了，有了代理服务器，我们大家就可以任意出国，用169的低廉代价得到163中的服务了！正如前面讲到的，如果我们知道这些代理服务器的地址，就可以利用它到达网外网，从169到达163。阿Z搜索并提供的是完全免费的代理服务器地址，完全没有任何限制，不需缴交任何额外费用！INTERNET上的免费电子信箱、主页空间、ICQ、FTP、各种信息资源……统统敞着来吧！你仍然只需支付169的低廉上网费用！另外，由于目的服务器只能查出你所使用的代理服务器的IP，所以还有一些不言而喻的好处，例如在聊天室不容易轻易被人踢出去了！ 使用代理的上网速度怎样？

代理服务器实际上是一个网络上的高速缓存，它接受终端申请后先对网络服务器提出要求并接受传送来的文件，然后再发送到终端。当信息第一次经过这样一个中转站时，速度可能或多或少的打了点折扣。

但是代理服务器本身相当于一个高速缓存，如果您要浏览的网页不久前有人浏览过，而且代理服务器上保存的时最新的纪录的话，代理服务器就不用再到主机上申请数据，而是直接把网页发送给您，这样的话速度又会比较直接联上目的服务器快很多！特别是代理服务器本身有高速出口、而服务器档次又很高的话，对速度的影响几乎可以忽略不记！经过测试，好的代理从发出申请到接收到文件的时间不到10毫秒，一般的也只有0.5－1秒，而且速率可以达到5－6K。从实际操作中，几乎区别不出使用代理和直接用163的差别，某些地区还会出现169+代理服务器要快于163的现象！

当然，如果代理服务器不行的话，可能等上几分钟一个页面还不能完全显示出来，您不得不关掉浏览器的多媒体和其他功能，面对一个枯燥的网络世界！本站的目的就是尽可能的为您提供更快更好的代理服务器，经常来看看，保证您大有收获！

■ 使用代理服务器合法吗？

代理服务器除了网络服务商为了各种目的而开设外，大部分是新建网络服务器设置的疏漏！虽然法律尚无具体规定，但没有经过允许而使用他人的服务器当然还是不太好！虽然目的主机一般只能得到您使用的代理服务器IP，似乎有效的遮掩了你的行程，但是值得一提的是：网络服务商开通的专业级代理服务器一般都有路由和流程记录，因此可以轻易的通过调用历史纪录来查清使用代理服务器地址的来路。

当然，利用多层代理会增加被捕获的难度，但也不是不可能的。去年报上就有报道有人使用代理服务器进攻"天府热线"，进行非法活动而被抓的消息。因此，建议菜鸟级的黑客们不要利用代理服务器来进行特别行动！只要你不使用代理进行非法活动，一般是没有关系的。

■ 搜索代理服务器

代理服务器的存在一般是不公开的，特别是中国公众多媒体信息网（169）上的更是在地下活动！要得到代理服务器一般有如下的途径：代理服务器的管理员公开或秘密传播；网友在聊天室或BBS热情提供；自己搜索；从专门提供代理服务器地址的站点获得。

搜索代理服务器域要专门的软件，比如：NewProxy、ProxyVer等。搜索的原理很简单：向IP地址发送请求信息，如果服务器能够传回正确的反馈，则证明该服务器是可用的。

当然，搜索代理服务器并不简单。您有可能在花费了数个小时的搜索后，仍然得不到一个可用的代理服务器！白白花费了时间和金钱。本站就是为了解决您的这个烦恼，从此您不必再白白浪费精力、时间和金钱，只要经常到本站一游，保证您总有新的收获！

■ 使用代理服务器要交费吗？

代理服务器一般有收费和免费两种。收费的大部分是ISP开设的，我们就不管他了。阿Z提供的都是免费代理服务器，这意味着您除了正常的169使用费之外，不必付出任何其它费用，这正是169代理服务器的魅力之所在！提醒各位的是：您必须非常清楚您所在地的网络服务和收费情况。中国电信各地169提供的服务各不相同，使用代理服务器能够节省费用的前提是您所在地电信提供的169服务收费要比163低。否则，您就没有必要使用代理服务器上网了！

■ 挑挑拣拣选个好代理

对大家来说，选择一个好的代理，可以提高上网速度、访问一些原本访问不了或是访问速度极慢的网站。不过，有的网友使用诸如ProxyHunter、PortScanner之类的代理搜索软件，经常是损人不利己：它们不但会加重你的ISP的负担，而且影响其他用户的上网速度。下面，将自己选择代理服务器的经验介绍给大家，以期达到交流经验的目的。
这也是我看别人的，现抄下来给你看希望对你有用。

1.能够促进对网站的访问速度
代理服务器接收远程服务器提供的信息存储到自己的硬盘上，倘若大量用户同时使用这个代理服务器，那么他们对因特网站点全部的要求全是经过这一台代理服务器，当有人浏览过某一个站点后，所浏览站点上的信息便会被存储到代理服务器的硬盘上，假若下次还有人浏览该站点，这些信息随时能够 在代理服务器中抓取，而不再需要重新连接远程服务器。因此 ，它可以节省带宽、加速网站浏览速度。
2.降低IP花费
代理服务器同意采用大批对的伪IP地址，节省网站资源，换句话说使用代理服务器可以节约对IP地址的需要量。
3.当做防火墙
代理服务器可以保障局域网的安全，当做防火墙的功能，针对利用代理服务器的局域网而言，通过外部来看仅是代理服务器可见，其它局域网的用户对外是不可见的。代理服务器为局域网的安全来讲具有护盾的功能。此外，利用代理服务器，用户可以设置IP地址过滤，限制内部网对外网的浏览权限。一样，代理服务器也可以用作限止封锁IP地址，严禁用户对一些页面的浏览。
4.提升访问速度
通常代理服务器都设置一个较大的硬盘缓冲区，当有外界的信息通过时，同时也将其保存到缓冲区，当其他用户再访问相同的信息时，则直接由缓冲区中取出信息，传给用户，以提升访问速度。
5.管理网络资源
代理IP大的好处能够 利用IP管理网络资源，限制一部分网络资源进入特定的区域用户，保护资源的地域性。如今随着互联网的发展，用户能够 随时使用代理IP来满足自己的需求。

代理ip是现在工作的种工具，可以帮助我们顺利地完成工作，同时在我们上网的时候维护我们的网络安全，保护我们的个人信息。
1、自己使用的ip被网限制使用，不能再进行网站的访问。可以更换代理ip继续进行网站的浏览或者进行工作。
2、当我们进行如投票，抢购等皖网速过慢可以使用代理ip提高我们的网络速度。
3、想要访问一些内部的网站。
在使用过程中完全不必担心会有任何的隐私信息泄露，是因为使用了代理以后，用户自己的个人ip是处于一种隐藏状态，直接可见的ip是属于代理服务器的。

代理IP即代理服务器Proxy Server）代理IP就是我们上网过程中的一个中间平台，是由你的电脑先访问代理IP，之后再由代理IP访问你点开的页面，所以在这个页面的访问记录里留下的是就是代理IP的地址，而不是你的电脑本机IP。
想了解的话可以试试雷电IP，他们有免费试用，我正在试用，感觉很好。