Question

python urllib2的用法

import urllib2
req = urllib2.Request('http://www.baidu.com')
response = urllib2.urlopen(req)
html = response.read()
1、urllib2.Request()的功能是构造一个请求信息，返回的req就是一个构造好的请求。为什么要构造一个请求信息。不要也能获取到网页的信息啊？

Answer 1

不构造无法获得网页信息。。

至于为什么要构造一个请求，这个问题我个人建议你暂时没必要不要去深究，只要记住需要这样做就行了，这是python这个模块的约定，你要用这个模块，就得遵守这个约定。。

一定要问为什么，你得去看python的urllib2是怎么写的，然后要看python的socket和http协议规范，
然后或许你还要问什么是socket，http协议为什么这样规定，这样下去就无休止了。

Answer 2

　　urllib2 默认会使用环境变量 http_proxy 来设置 HTTP Proxy。如果想在程序中明确控制 Proxy 而不受环境变量的影响，可以使用下面的方式:
　　import urllib2
　　enable_proxy = True
　　proxy_handler = urllib2.ProxyHandler({"http" : 'IP:8080'})
　　null_proxy_handler = urllib2.ProxyHandler({})
　　if enable_proxy:
　　opener = urllib2.build_opener(proxy_handler)
　　else:
　　opener = urllib2.build_opener(null_proxy_handler)
　　urllib2.install_opener(opener)
　　这里要注意的一个细节，使用 urllib2.install_opener() 会设置 urllib2 的全局 opener 。这样后面的使用会很方便，但不能做更细粒度的控制，比如想在程序中使用两个不同的 Proxy 设置等。比较好的做法是不使用 install_opener 去更改全局的设置，而只是直接调用 opener 的 open 方法代替全局的 urlopen 方法。