Python初学者的urlopen()详解

一. 简介

urllib.request.urlopen()函数用于实现对目标url的访问。

函数原型如下：urllib.request.urlopen(url, data=None, [timeout, ]*, cafile=None, capath=None, cadefault=False, context=None)

url: 需要打开的网址

data：Post提交的数据

timeout：设置网站的访问超时时间

使用 urllib.request 模块的 urlopen() 直接获取页面。页面的数据格式为bytes类型，需要通过decode()进行解码，转换成str类型。

二. 函数参数介绍

1. url参数：目标资源在网络上的位置。可以是表示 URL 的字符串（例如：http://www.pythontab.com/）；也可以是urllib.request对象，详情请跳转

2. data参数：data用于表示发送给服务器的请求中的附加参数信息（如在线翻译、在线答题等提交的内容），data默认为None，请求以GET方式发送这次;当用户给data参数改变时，以POST方式发送请求。

3. timeout：设置网站的访问超时时间

4. cafile, capath, cadefault 参数：实现可信CA证书的HTTP请求。 （基本上很少用）

5. context参数：实现SSL加密传输。（基本上很少用）

三. 返回处理方法详解

urlopen返回对象提供方法：

read() , readline() ,readlines() , fileno() , close() ：对HTTPResponse类型数据进行操作

info()：返回HTTPMessage对象，表示远程服务器返回的头信息

getcode()：返回 Http 状态码。如果是http请求，则200请求成功完成；找不到 404 网址

geturl()：返回请求的url

四. 版本区别， 注意事项

python2和python3在导入urlrequest的方式都不一样。

python2是这样：import urllib2

在python3中，urllib分为urlrequest和urlerror。这里我们只需要导入urlrequest。从 urllib.request 导入 urlopen

五. 实例

下面的程序实现了urlopen()函数的大部分功能，尤其是data参数。数据定制、数据格式转换、数据编码encode()和解码decode()。

#coding=utf-8
#Python3.x
'''
利用有道翻译进行在线翻译
'''
import urllib.request
import urllib.parse
import json
def traslate(words):
    #目标URL
    targetURL = "http://fanyi.youdao.com/translate?smartresult=dict&smartresult=rule&smartresult=ugc&sessionFrom=null"
    #用户自定义表单，words表示的是用户要翻译的内容。这里使用的是dict类型，也可以使用元组列表（已经试过的）。
    data = {}
    data['type'] = 'AUTO'
    data['i'] = words
    data['doctype'] = 'json'
    data['xmlVersion'] = '1.8'
    data['keyfrom'] = 'fanyi.web'
    data['ue'] = 'UTF-8'
    data['action'] = 'FY_BY_CLICKBUTTON'
    data['typoResult'] = 'true'
    #将自定义data转换成标准格式
    data = urllib.parse.urlencode(data).encode('utf-8')
    #发送用户请求
    html = urllib.request.urlopen(targetURL, data)
    #读取并解码内容
    rst = html.read().decode("utf-8")
    rst_dict = json.loads(rst)
    return rst_dict['translateResult'][0][0]['tgt']
if __name__ == "__main__":
    print("输入字母q表示退出")
    while True:
        words = input("请输入要查询的单词或句子:\n")
        if words == 'q':
            break
        result = traslate(words)
        print("翻译结果是：%s"%result)