Python是一种高级编程语言，它有很多优秀的模块可供使用，其中urllib2模块是一个非常有用的模块，它可以帮助我们使用Python抓取HTML页面资源。本文将从多个角度分析Python使用urllib2模块抓取HTML页面资源的实例，并给出全文摘要和3个关键词。
一、urllib2模块简介
urllib2是Python内置的HTTP请求库，用于发送HTTP请求和获取HTTP响应。它支持HTTP、HTTPS、FTP等多种协议，可以用来访问Web页面和API等资源。使用urllib2模块可以方便地实现Web爬虫、数据采集、自动化测试等功能。
二、使用urllib2模块抓取HTML页面资源的实例
下面给出一个使用urllib2模块抓取HTML页面资源的实例：
```python
import urllib2
url = 'http://www.baidu.com'
response = urllib2.urlopen(url)
html = response.read()
print html
```
这段代码会向百度发起HTTP请求，获取响应并打印出响应内容。可以看到，使用urllib2模块非常简单，只需要调用urllib2.urlopen()方法传入URL即可。
三、urllib2模块的高级用法
虽然使用urllib2模块可以轻松地抓取HTML页面资源，但是在实际应用中，我们可能需要更加高级的功能，比如设置请求头、发送POST请求、处理重定向等。下面介绍几个常用的高级用法。
1. 设置请求头
有些网站可能会根据请求头的不同返回不同的内容或限制访问，因此在进行Web爬虫时，设置请求头是非常有必要的。可以通过urllib2.Request()方法创建一个请求对象，并添加请求头信息，示例代码如下：
```python
import urllib2
url = 'http://www.baidu.com'
headers = {'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/58.0.3029.110 Safari/537.3'}
req = urllib2.Request(url, headers=headers)
response = urllib2.urlopen(req)
html = response.read()
print html
```
这段代码中，我们创建了一个名为headers的字典对象，用来存储请求头信息。其中User-Agent是必须的，因为有些网站会根据User-Agent来判断是否为爬虫。然后我们通过urllib2.Request()方法创建一个请求对象，并传入URL和headers参数。最后使用urllib2.urlopen(req)方法发送请求。
2. 发送POST请求
在Web应用中，有时候需要提交表单数据或发送POST请求，可以使用urllib2模块来实现。需要创建一个名为data的字典对象，用来存储POST请求参数，然后使用urllib2.urlopen()方法发送请求，示例代码如下：
```python
import urllib
import urllib2
url = 'http://www.example.com/login'
data = {'username': 'admin', 'password': '123456'}
data = urllib.urlencode(data)
req = urllib2.Request(url, data)
response = urllib2.urlopen(req)
html = response.read()
print html
```
这段代码中，我们创建了一个名为data的字典对象，用来存储POST请求参数。然后使用urllib.urlencode()方法将data转换为URL编码形式，再创建一个请求对象并传入URL和data参数，最后使用urllib2.urlopen(req)方法发送请求。
3. 处理重定向
在使用urllib2模块抓取HTML页面资源时，可能会遇到重定向的情况，比如访问某些网站时会自动跳转到另一个页面。可以通过设置urllib2模块的HTTPRedirectHandler处理器来自动处理重定向，示例代码如下：
```python
import urllib2
url = 'http://www.example.com'
opener = urllib2.build_opener(urllib2.HTTPRedirectHandler)
response = opener.open(url)
html = response.read()
print html
```
这段代码中，我们使用urllib2.build_opener()方法创建一个名为opener的对象，并传入urllib2.HTTPRedirectHandler处理器。然后使用opener.open(url)方法打开URL并获取响应。
四、总结
本文介绍了Python使用urllib2模块抓取HTML页面资源的实例，并从多个角度分析了urllib2模块的高级用法。使用urllib2模块可以方便地实现Web爬虫、数据采集、自动化测试等功能，是Python编程中不可或缺的一部分。
