python连接带有代理服务器,并且要输入用户名密码的网站的问题
以下是一段爬虫抓站的代码,但是由于本人在这里需要通过代理上网,并且有用户名密码,而以下代码只写了代理,没有用上用户名密码,想请教各位如何可以把用户名密码也用上。
import httplib
import re
import urllib2
proxy_support = urllib2.ProxyHandler({'http':'http://192.168.168.20/proxy/proxy.pac'})
opener = urllib2.build_opener(proxy_support,urllib2.HTTPHandler)
urllib2.install_opener(opener)
data1 = urllib2.urlopen('http://www.').read()
keyword = (r'<td valign="top" class="black">(.*?)</td>',re.U|re.S)
a = re.findall(keyword,data1)
b = re.sub('<br />','\n',a[0])
print b
conn.close()