闲来无聊写了个爬虫,抓了上万张 GIF 。(有空开源下(
平时有喜好看猎奇的 GIF 动画。不知道有没有同好 V 友。 比如 变态学教授无铭 之类的。。
所以写个了随机 GIF 网站。 http://iguooo.com/
如果想考验下浏览器,可以试下同时打开 1000 张 GIF 的连接。 http://iguooo.com/?s=1000
1
fashioncj 2017-01-19 22:09:43 +08:00 via iPhone
我爬了 bilibili 的动态图。现在也有几百张来吧
|
2
awanabe 2017-01-19 22:12:19 +08:00
同好。。。
挺爽的。。 |
3
darranhuang OP 有人开始测试 100000000000000000000000000 张
服 |
4
tscat 2017-01-19 22:17:51 +08:00
先测试下我的 16g 内存能不能吃满
|
5
fsgmhoward 2017-01-19 22:18:06 +08:00 via iPhone
事实证明 iPhone 的 CPU 可以。。。
|
6
tscat 2017-01-19 22:19:27 +08:00
不给力啊老湿,才 3.xg 内存
|
7
Laynooor 2017-01-19 22:23:30 +08:00
@darranhuang 然后楼主带宽炸了
|
8
7654 2017-01-19 22:25:11 +08:00
我曾经打开过 600 个标签页, Firefox
|
9
lfk0000 2017-01-19 22:35:10 +08:00
你这是自求 D 吧。。。 Chrome 无压力
下行一直在跑满了。。。。心疼楼主流量于是关了。。。 |
10
lisonfan 2017-01-19 22:36:38 +08:00 2
|
11
Lentin 2017-01-19 22:36:46 +08:00
为什么不用渣浪的图床
|
12
oxoxoxox 2017-01-19 22:37:45 +08:00 via iPhone
ip6s 看了快一百张之后 后台程序都被系统 kill 了 😂
|
13
hzwjm 2017-01-19 22:42:24 +08:00 via Android
这是在考验我的宽带
|
14
shurushuchu 2017-01-19 22:56:06 +08:00
真心请教大家,楼主这样的网站要想长期存在的话,是否需要解决图片版权的问题?如果需要,应该怎么解决图片版权的问题?
|
15
darranhuang OP @lisonfan 稳准狠
|
16
darranhuang OP |
17
darranhuang OP @hzwjm 也是考验我的流量费
|
18
darranhuang OP @oxoxoxox 😂
|
19
lyragosa 2017-01-19 23:02:59 +08:00
一大波人肉 ddos 即将抵达战场,请无关人员带好安全帽
|
20
tux 2017-01-19 23:12:09 +08:00
好厉害
|
21
JackyBao 2017-01-19 23:23:55 +08:00
lz 这样不是手动求 d 吗?
|
22
JackyBao 2017-01-19 23:31:45 +08:00
504 Gateway Time-out
挂掉了? |
23
hyuwang 2017-01-19 23:33:05 +08:00
打不开了
心疼 |
24
mildnes 2017-01-19 23:40:23 +08:00
打不开了,心疼。。。
|
25
Athrob 2017-01-19 23:40:32 +08:00
打不开了
|
26
toptyloo 2017-01-19 23:42:01 +08:00
心疼层主一秒 一加三无压力
|
27
iVeego 2017-01-19 23:43:33 +08:00 via Android
502,心疼。
|
28
chanssl 2017-01-20 00:16:53 +08:00 via Android
502 Bad Gateway
|
29
bojackhorseman 2017-01-20 00:29:27 +08:00 via Android
网速不好,图都加载不出来😂
|
30
RobertYang 2017-01-20 00:30:14 +08:00 via Android
楼主 502 了
|
31
kurtrossel 2017-01-20 00:31:12 +08:00
502
心疼,被肉 D 了...... |
32
artandlol 2017-01-20 00:32:52 +08:00 via Android
楼主 520
|
33
z742364692 2017-01-20 00:38:35 +08:00 via Android
502
|
34
0915240 2017-01-20 00:43:13 +08:00 via iPhone
挂了哦
502 |
35
tux 2017-01-20 01:37:02 +08:00
502
|
36
fecho 2017-01-20 02:30:46 +08:00
心痛 502
|
37
darranhuang OP @JackyBao
@hyuwang @mildnes @Athrob @toptyloo @iVeego @chanssl @RobertYang @kurtrossel @artandlol @z742364692 @0915240 @fecho 心痛, 被 D 了 1M 的阿里云小水管,分分钟就被你们击垮了。。。 |
38
yangyaofei 2017-01-20 07:43:36 +08:00 via Android
可能不是被 d 了,只是人太多,小水管会死而已,其实你可以用灵活配置,按照流量收钱的那个,省得 1m 小水管不爽,或者写个脚本用 新浪的图床
|
39
msg7086 2017-01-20 07:49:25 +08:00
1m 带宽都敢发出来?
|
40
darranhuang OP |
41
HGladIator 2017-01-20 08:25:36 +08:00 via iPhone
哈哈哈😄
|
42
zjqzxc 2017-01-20 08:26:11 +08:00
小水管都多余了。因为页面内容在“短时间”内是不变的而且并不会因人而异,完全可以静态化交给七牛
|
43
darranhuang OP @zjqzxc 每次图片刷新都会不一样,有个打散的过程。。这个就是做这个网站的好玩的地方
|
44
Mandown 2017-01-20 08:48:06 +08:00 via Android
想起来煎蛋无聊图(>ω<) 楼主看看阿 jandan.net
|
45
zjqzxc 2017-01-20 08:53:36 +08:00
@darranhuang 考虑到绝大多数人不可能在 1 秒内刷新两次,所以依然可以把它静态化交给七牛,缓存时间遵循源站并在源站上指定缓存时间为几秒,此时 server 的负载最多只有几 pv 每秒
|
46
init 2017-01-20 08:58:04 +08:00
我倒是想知道一些 gif 的出处
|
47
xman99 2017-01-20 09:00:57 +08:00
i5 4590 路过, chrome 最新版本, 4g 内存不到, cpu 40% 也上不去
|
48
xman99 2017-01-20 09:01:25 +08:00
建议多搭一个 redis 玩玩吧, 把图片都放进 redis 里面
|
49
csdreamdong 2017-01-20 09:03:14 +08:00
图片都走 cdn , http response 返回随机的图片 id , js 去加载图片。
|
50
Mbin 2017-01-20 09:07:30 +08:00
我踏马的看得停不下来了!
|
51
Deeer 2017-01-20 09:37:47 +08:00
真棒!!就是上班停不下来了😂
|
52
darranhuang OP @xman99 本来就没有用数据库 纯 redis 加 cdn 。 redis 存图片那图片流量都走服务器那带宽要很大诶
|
53
darranhuang OP @csdreamdong 图片现在就在 cdn 上 用异步请求也不错
|
54
darranhuang OP |
55
yangyaofei 2017-01-20 10:13:13 +08:00 via Android
@darranhuang 看出来了……手机打开一千图,还没来得及关,流量短信就来了😂😂😂, 4g 下 10m 每秒的跑
|
56
fthvgb1 2017-01-20 10:17:15 +08:00
用 firefox 打开完了,内容占了 2.8G,100 的宽带持续满了 5 分钟的样子
|
57
fthvgb1 2017-01-20 10:21:51 +08:00
刚刚不过向下滑几下,浏览器就崩溃了
|
58
amon 2017-01-20 10:30:06 +08:00
记得几年前,奥巴马开通 Github 账户,各国网友都去刷各种 gif 图,网页一打开就蒙蔽了,哈哈。
|
60
lovesan 2017-01-20 11:07:18 +08:00
根本停不下来啊 1000 张一会就看完了。。继续换。。继续换。。继续换。。。。
|
61
b821025551b 2017-01-20 11:12:31 +08:00
好像只有 2378 张图啊
|
62
kurtrossel 2017-01-20 11:13:26 +08:00
停不下来了,怎么办......
|
63
aitaii 2017-01-20 11:16:23 +08:00
|
64
darranhuang OP @aitaii 厉害, 才上传上去差不多这么多张, 还有好几千张在上传中
|
65
darranhuang OP @fthvgb1 😝
|
66
darranhuang OP @yangyaofei 流量党慎重啊
|
67
darranhuang OP @b821025551b 还有好几千张在上传中
|
68
Mbin 2017-01-20 12:16:33 +08:00
@darranhuang 楼主我从上午 9 点上班开始看到了现在还没停。。。咋办-_-
|
69
hnnxn 2017-01-20 12:27:37 +08:00 via Android
好棒的小站
|
70
hnnxn 2017-01-20 12:28:02 +08:00 via Android
果断收藏
|
71
darranhuang OP @Mbin 换个方式一张张看。。。
|
72
entimm 2017-01-20 12:52:08 +08:00
@darranhuang 一张张不给力了啊
|
73
darranhuang OP @entimm 流量一早上吃掉 50 块
|
74
Readme16 2017-01-20 13:18:34 +08:00 via iPhone
手机一点开两分钟跑了 600 多兆。。。
|
75
loff 2017-01-20 13:22:06 +08:00
七牛笑翻在地
|
76
langjiyuan 2017-01-20 13:23:22 +08:00
楼主 这是求 ddos 啊 //
|
77
darranhuang OP @loff 我已经泪目在地
|
78
darranhuang OP @langjiyuan 昨晚已经弄挂一次了。。不敢不敢
|
79
tscat 2017-01-20 14:46:19 +08:00 via iPhone
可以考虑微博图床
|
80
liliang13 2017-01-20 14:49:22 +08:00
期待开源这几千张图
|
81
goodryb 2017-01-20 15:04:15 +08:00
楼主机器爆炸了吗,这么慢
|
82
ctsed 2017-01-20 16:07:53 +08:00 via iPhone
楼主你的娇喘陪聊项目怎么样了
|
83
chunqiuyiyu 2017-01-20 16:12:01 +08:00
不敢,下一题
|
84
darranhuang OP @ctsed 妹子都去拍 gif 了
|
85
moonkiller 2017-01-20 16:44:00 +08:00
我想问 lz 你是妹子吗,不是的话,请阅读下本社区的声明指南
|
86
cutehalo 2017-01-20 16:48:34 +08:00
哈哈哈哈 楼主不要怂啊
|
87
wuhuaji 2017-01-20 17:22:33 +08:00
这里的图片都是去哪拿的?
|
88
darranhuang OP @liliang13 已经抓了 7k 张了。。
|
89
darranhuang OP |
90
darranhuang OP @wuhuaji 抓咯, 想爬虫总有机会的。 等我开源我的 spider 的时候就知道啦
|
91
wuhuaji 2017-01-20 17:26:54 +08:00
@darranhuang 我看到页面上挂了广告,这广告费应该能承担一部分成本吧?
|
92
darranhuang OP |
93
popu111 2017-01-20 17:32:07 +08:00 via Android
不出意料的故事系列
|
94
darranhuang OP @popu111 V 友太能刷
一开始没准备上广告, 后来觉得流量费太厉害。 再后来就发现广告有啥用 |
95
liliang13 2017-01-20 17:38:31 +08:00
@darranhuang 看这些动图根本停不下来啊。多么想一次看够
|
96
darranhuang OP @liliang13 看来我要求赞助。。然后继续一次 1 万张吧 😆
估计一天要 500 块 😁 |
97
KeepPro 2017-01-20 17:48:35 +08:00 via Android
同意 85 楼意见,请遵守 v 站规则,更换头像。
|
98
wuhuaji 2017-01-20 17:53:40 +08:00
@darranhuang 这么多次访问,才能获益 3rmb ?感觉不科学
|
99
darranhuang OP @wuhuaji V 友大多数都有 adblock 的呗,我自己都装的。所以没多少次展现
|
100
ebony0319 2017-01-20 19:34:18 +08:00 via Android
我居然一张张都看完了。
|