這篇文章主要介紹python urllib模塊的使用方法，文中介紹的非常詳細(xì)，具有一定的參考價值，感興趣的小伙伴們一定要看完！

亭湖ssl適用于網(wǎng)站、小程序/APP、API接口等需要進(jìn)行數(shù)據(jù)傳輸應(yīng)用場景，ssl證書未來市場廣闊！成為創(chuàng)新互聯(lián)建站的ssl證書銷售渠道，可以享受市場價格4-6折優(yōu)惠！如果有意向歡迎電話聯(lián)系或者加微信：18980820575（備注：SSL證書合作）期待與您的合作！

urllib 是一個 python 內(nèi)置包，不需要額外安裝即可使用，包里面包含了以下幾個用來處理 url 的模塊：

l urllib.request可以用來發(fā)送request和獲取request的結(jié)果

l urllib.error包含了urllib.request產(chǎn)生的異常

l urllib.parse用來解析和處理URL

l urllib.robotparse用來解析頁面的robots.txt文件

1、urllib.request 模塊

urllib.request 模塊定義了以下幾個函數(shù)。

語法：

urllib.request.urlopen(url, data=None, [timeout, ]*, cafile=None, capath=None, cadefault=False, context=None)

意義：

該函數(shù)主要用于模擬網(wǎng)站請求，返回一個 HTTPResponse 類型的對象。

2、urlopen 函數(shù)返回類型

urlopen 函數(shù)請求返回一個 HTTPResponse 響應(yīng)上下文，或者請求異常拋出 URLError 協(xié)議錯誤，一般有如下屬性：

l geturl()，返回檢索的 url，通常用于判定是否進(jìn)行了重定向。

l info()，返回網(wǎng)頁的頭信息。

l getcode()，返回 HTTPResponse 響應(yīng)的狀態(tài)碼。

3、urllib.error.URLError 異常

URLError 類繼承自 OSError 類，是 error 異常模塊的基類，由request模塊產(chǎn)生的異常都可以通過捕獲這個類來處理。URLError 只有一個屬性 reason，即返回錯誤的原因。

應(yīng)用實(shí)例：

# 在請求連接時候捕獲網(wǎng)址錯誤引發(fā)的異常
from urllib import request, error
try:
    response = request.urlopen('https://www,baidu,com')
except error.URLError as e:
print(e.reason)

4、urllib.parse 模塊

urllib.parse 模塊定義了一個處理 url 的標(biāo)準(zhǔn)接口，用來實(shí)現(xiàn) url 字符串的抽取、合并以及鏈接轉(zhuǎn)換。

5、urllib.robotparse 模塊

rebotparser 模塊提供了一個 RobotFileParser 類，主要用來解析網(wǎng)站上發(fā)布的 robots.txt，然后根據(jù)解析內(nèi)容判斷爬蟲是否有權(quán)限來爬取這個網(wǎng)頁。

以上是python urllib模塊的使用方法的所有內(nèi)容，感謝各位的閱讀！希望分享的內(nèi)容對大家有幫助，更多相關(guān)知識，歡迎關(guān)注創(chuàng)新互聯(lián)行業(yè)資訊頻道！

分享題目：pythonurllib模塊的使用方法-創(chuàng)新互聯(lián)
網(wǎng)站路徑：http://weahome.cn/article/cchdeo.html