标签类目:User-Agent

已阅读:6,103 次
Python httplib关于User-Agent导致的异常结果
ian | Python | 2012/01/31


在写爬虫抓取苏宁页面信息的过程中,遇到一个让人纠结的问题。最开始的代码如下: domin = "www.suning.com" subdomin = "/emall/prd____722554_.html" conn = httplib.HTTPConnection(domin) conn.request('GET',subdomin) result = conn.getresponse().read() print result 发现response状态为200,但是内容为空,这个问题很奇怪,一开始以为是代码出现异常,但是把域名换成其他网站的URL时,结果却是正常的。 于是,抓包看看HTTP请求是否正确,发现HTTP请求包......
Read more