登錄 注冊

　　使用ip代理爬蟲的好處其中一點就是我們不用擔心我們的IP被網站封禁了，ip代理更換IP，這樣我們就能夠繼續訪問網站了，爬蟲程序也能夠繼續進行。

　　ProxyHandler處理(代理服務器)，使用ip代理，是爬蟲的常用手段，通常使用UserAgent 偽裝瀏覽器爬取仍然可能被網站封了IP，但是我們使用ip代理就不怕它封了我們的IP了。

　　基本使用步驟：

　　1、設置代理地址

　　2、創建ProxyHandler

　　3、創建Opener

　　4、安裝Opener# 使用代理服務器訪問貓眼

　　以下是代碼部分：

　　# https://maoyan.com/

　　from urllib import request,error

　　'''

　　'''

　　if __name__ == '__main__':

　　url = "https://baidu.com/"

　　# 1.設置代理地址

　　proxy = {'http': '218.60.8.83:3129'}

　　# 2.創建ProxyHandler

　　proxy_handler = request.ProxyHandler(proxy)

　　# 3.創建Opener

　　opener = request.build_opener(proxy_handler)

　　# 4.安裝Opener

　　request.install_opener(opener)

　　# 下面再進行訪問url就會使用代理服務器

　　try:

　　rsp = request.urlopen(url)

　　html = rsp.read().decode()

　　print(html)

　　except error.HTTPError as e:

　　print(e)

　　except Exception as e:

　　print(e)

　　上面IP海介紹了一個比較基礎的爬取貓眼電影的操作，大家可以通過這幾個步驟來了解ip代理的使用。