爬虫所需要的功能，基本上在urllib中都能找到，学习这个标准库，可以更加深入的理解后面更加便利的requests库。
创新互联公司是一家专业提供
瑞昌企业网站建设,专注与成都网站设计、成都做网站、
外贸网站建设、
H5建站、小程序制作等业务。10年已为瑞昌众多企业、政府机构等服务。创新互联专业网站制作公司优惠进行中。
首先
在Pytho2.x中使用import urllib2——-对应的，在Python3.x中会使用import urllib.request，urllib.error
在Pytho2.x中使用import urllib——-对应的，在Python3.x中会使用import urllib.request，urllib.error，urllib.parse
在Pytho2.x中使用import urlparse——-对应的，在Python3.x中会使用import urllib.parse
在Pytho2.x中使用import urlopen——-对应的，在Python3.x中会使用import urllib.request.urlopen
在Pytho2.x中使用import urlencode——-对应的，在Python3.x中会使用import urllib.parse.urlencode
在Pytho2.x中使用import urllib.quote——-对应的，在Python3.x中会使用import urllib.request.quote
在Pytho2.x中使用cookielib.CookieJar——-对应的，在Python3.x中会使用http.CookieJar
在Pytho2.x中使用urllib2.Request——-对应的，在Python3.x中会使用urllib.request.Request
urllib是Python自带的标准库，无需安装，直接可以用。
urllib模块提供了如下功能：
- 网页请求(urllib.request)
- URL解析(urllib.parse)
- 代理和cookie设置
- 异常处理(urllib.error)
- robots.txt解析模块(urllib.robotparser)
urllib包中urllib.request模块
1、urllib.request.urlopen
urlopen一般常用的有三个参数，它的参数如下：
r = urllib.requeset.urlopen(url,data,timeout)
url：链接格式：协议://主机名:[端口]/路径
data：附加参数 必须是字节流编码格式的内容(bytes类型)，可通过bytes()函数转化，如果要传递这个参数，请求方式就不再是GET方式请求，而是POST方式
timeout: 超时 单位为秒
get请求
import urllib
r = urllib.urlopen('//www.jb51.net/')
datatLine = r.readline() #读取html页面的第一行
data=file.read() #读取全部
f=open("./1.html","wb") # 网页保存在本地
f.write(data)
f.close()另外有需要云服务器可以了解下创新互联scvps.cn，海内外云服务器15元起步，三天无理由+7*72小时售后在线，公司持有idc许可证，提供“云服务器、裸金属服务器、高防服务器、香港服务器、美国服务器、虚拟主机、免备案服务器”等云主机租用服务以及企业上云的综合解决方案，具有“安全稳定、简单易用、服务可用性高、性价比高”等特点与优势，专为企业上云打造定制，能够满足用户丰富、多元化的应用场景需求。
本文名称：python爬虫开发之urllib模块详细使用方法与实例全解-创新互联
浏览路径：
http://cdkjz.cn/article/ccijgs.html
