Python爬虫技术是网络信息采集的重要手段，而urllib2是Python 2.x版本中用于处理URL请求的标准库，它为用户提供了丰富的网络资源访问能力，包括向服务器发送请求以及处理响应。在Python 3.x版本中，urllib2被拆分为多个模块，urllib.request是处理URL请求的主要模块，类似于Python 2.x中的urllib2。
使用urllib2进行网页抓取，可以简单到只需几行代码。通过导入urllib2模块，然后使用urlopen方法发送请求，我们能够获取到网页的内容。示例代码如下：
```python
# -*- coding: utf-8 -*-
import urllib2
response = urllib2.urlopen("***")
html = response.read()
print(html)
```
上述代码运行的结果会将百度首页的源代码打印出来，与我们在浏览器中查看网页源代码时显示的内容相同。urllib2.urlopen方法用于打开一个URL地址，支持字符串或Request对象作为参数。如果提供了字符串，它会直接打开URL；如果提供了Request对象，则会发送该请求并接收响应。
在某些情况下，需要向服务器发送额外的数据或修改HTTP请求头，这时就涉及到Request类的使用。Request类允许我们构造包含额外数据的请求对象。例如，如果需要通过POST方法发送数据，我们可以这样写：
```python
from urllib2 import Request, urlopen
url = "***"
data = "param1=value1¶m2=value2"
headers = {
'User-Agent': 'Mozilla/5.0 (compatible; MSIE 9.0; Windows NT 6.1; Trident/5.0)'
}
request = Request(url, data=data.encode(), headers=headers)
response = urlopen(request)
response_body = response.read()
print(response_body)
```
在这个示例中，我们通过Request对象设置了要发送的数据（data）和HTTP头（headers）。通过encode方法将数据编码为适合传输的格式。
User-Agent是HTTP请求头部的一个字段，它用来告知服务器请求的来源客户端类型。在使用urllib2进行爬虫操作时，如果直接使用默认的User-Agent可能会被目标网站识别为爬虫而拒绝服务。为了更礼貌地请求网站资源，我们可以设置一个伪装的User-Agent，模拟一个常见的浏览器。在urllib2中，可以通过修改请求的headers来添加User-Agent：
```python
url = "***"
headers = {
'User-Agent': 'Mozilla/5.0 (compatible; MSIE 9.0; Windows NT 6.1; Trident/5.0)'
}
request = Request(url, headers=headers)
response = urlopen(request)
```
通过上述方法，我们可以更加灵活地对网络资源进行爬取和抓取，同时也能更好地控制爬虫的行为，以符合目标网站的请求规则。
需要注意的是，在使用爬虫技术时，应当遵守网站的robots.txt规则，尊重网站的爬虫协议，合理安排爬取频率和范围，避免对网站的正常服务造成干扰，同时遵循相关的法律法规。
