V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX  ›  richiefans  ›  全部回复第 8 页 / 共 18 页
回复总数  351
1 ... 4  5  6  7  8  9  10  11  12  13 ... 18  
明显是gzip过的吧

def fetchHtml(url):
#url="http://www.baidu.com/s?wd="+urllib2.quote(keyword)
try:
request = urllib2.Request(url)
request.add_header('Accept-encoding', 'gzip')
opener = urllib2.build_opener()
f = opener.open(request)
isGzip = f.headers.get('Content-Encoding')
#print isGzip
if isGzip :
compresseddata = f.read()
compressedstream = StringIO.StringIO(compresseddata)
gzipper = gzip.GzipFile(fileobj=compressedstream)
data = gzipper.read()
else:
data = f.read()
return data
except exceptions,e:
print e
#returnhtml=urllib2.urlopen(url).read()
return fetchHtml(url)
我算赶上了吧 坐标北京
2014-01-15 06:53:06 +08:00
回复了 aladd 创建的主题 程序员 你还记得你第一个网站 or APP是做什么的吗? 叫什么名字吗?
之前一直做歌迷社区。。后来上学就放弃了

图片都找不到了 大概04年-07年换过一次域名~
https://web.archive.org/web/20040616204506/http://richiefans.com/

https://web.archive.org/web/20071104005108/http://www.renxianqi.net/
2014-01-09 14:08:41 +08:00
回复了 yoyicue 创建的主题 酷工作 [北京][硬件/大数据]美团新产品招聘特别技能点的你~
看到美团现在都很亲切了 哈哈
2014-01-08 11:41:47 +08:00
回复了 zhttty 创建的主题 问与答 大家都用哪个手指按enter键?
无名指、小指交替。。。。哈哈 看感觉
2014-01-05 19:37:33 +08:00
回复了 lehui99 创建的主题 程序员 分享一些腾讯内部的邮件
哎~亮瞎了~
2014-01-02 11:29:35 +08:00
回复了 dexter 创建的主题 程序员 谁有面试phper的经验?帮一下忙
不同类型的缓存机制 和应用场景
2013-12-31 21:58:07 +08:00
回复了 beric 创建的主题 问与答 求一个手机端显示新闻内容(包括图文)的样式风格
2013-12-31 08:32:23 +08:00
回复了 hedaors 创建的主题 V2EX V2EX 改版了?
果真是
2013-12-30 11:49:16 +08:00
回复了 314x 创建的主题 问与答 谁能用一句话说说用python编程做网站的本质是什么?
同意
@ipconfiger的~
request->response
2013-12-29 06:44:38 +08:00
回复了 zzfwusa 创建的主题 程序员 请教一下,如何批量获取公开的企业信息?(企业黄页信息)
应该是找到目标站点 定向抓取吧

python有个爬虫框架 Scrapy
木有产品类职位
2013-12-18 15:40:30 +08:00
回复了 xipan 创建的主题 酷工作 写给那些站在十字路口的技术同学们
可惜不在帝都
2013-12-18 13:57:42 +08:00
回复了 michaelye1988 创建的主题 问与答 谁能帮我算算看,我现在是否能买得起房?
北京 印象中是 公积金要评级 最差也能80万贷款啊
1 ... 4  5  6  7  8  9  10  11  12  13 ... 18  
关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   913 人在线   最高记录 6679   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 94ms · UTC 20:10 · PVG 04:10 · LAX 12:10 · JFK 15:10
Developed with CodeLauncher
♥ Do have faith in what you're doing.