import urllib3

http = urllib3.PoolManager()
r = http.request('GET', 'https://www.baidu.com')
print(r.data)

生成PoolManager实例

• 设置工作的ConnectionPool数量

  http = urllib3.PoolManager(num_pools=10)
  # 默认10个ConnectionPool实例，当向不同主机发出请求时，增加此数量能提高性能。

• 设置连接池

  http = urllib3.PoolManager(maxsize=10)
  #当连接相同主机时，连接池初始化
  http = urllib3.HTTPConnectionPool('baidu.com', maxsize=10)

• 设置超时

  http = urllib3.PoolManager(timeout = 5)
  #分别设置连接超时与读超时
  http = urllib3.PoolManager(urllib3.Timeout(connect = 1, read = 3))

• 设置代理

  proxy = urllib3.ProxyManager('http://localhost:3128/')
  proxy.request('GET', 'https://www.baidu.com/')

发起请求

• GET请求

  r = http.request('GET','http://www.baidu.com')

• POST请求

  r = http.request(
    'POST',
    'http://httpbin.org/post',
    fields={'hello': 'world'}
    )

• 设置header请求头

  r = http.request(
     'GET',
     'http://httpbin.org/headers',
     headers={
         'X-Something': 'value'
     })

• 上传文件

  with open('example.txt') as fp:
     file_data = fp.read()
  r = http.request(
     'POST',
     'http://httpbin.org/post',
     fields={
         'filefield': ('example.txt', file_data，'text/plain'),
     })

• 设置重试次数

  http.requests('GET', 'http://httpbin.org/ip', retries=10) # retries = False 时不重试

处理结果

• 处理大量响应数据

  r = http.request('GET', 'https://www.baidu.com', preload_connect = False)
  for chunk in r.stream(32):
    print(chunk)
  r.release_conn() # 当preload_connect等于False时，必须释放

• 响应内容

  print(r.status)  #网页返回状态码，成功200
  print(r.data)    #网页返回数据
  print(r.headers) #网页返回头

参考文档

http://urllib3.readthedocs.io/en/latest/user-guide.html