V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
mostkia
V2EX  ›  互联网

今天写了个爬虫,放到了主机上,结果没跑几小时就被墙了。郁闷

  •  
  •   mostkia · 2018-07-06 15:08:36 +08:00 · 3569 次点击
    这是一个创建于 2361 天前的主题,其中的信息可能已经有所发展或是发生改变。

    家中的电脑使用了 frp 和 vps 连接,由于在美国,所以速度很不理想,所以想购买一台香港主机。最近看上了搬瓦工的香港主机,G 口的网络很对胃口,无奈不是大佬,没太多闲钱,而且 9.9 刀的机器断货了,只能干等。忽然灵机一动,写了个爬虫,每 1 分钟爬一下这个页面,有货了就推送邮件给我。顺手就放到了家中的主机上,结果今天中午就登陆不上去了,超级 ping 了一下,果然被墙了。。噗噗噗...

    这破墙的脾气还真难摸透。。也没干什么违法的事情。甚至连魔法上网最近都没用。唯一的疑点可能就是用 frp 的服务器去跑了一下爬虫吧,也真是服气了。

    我感觉可能的地方是 frp 内网穿透(但用了很久了都没事,不太确定),或者是爬虫的关系(时间很吻合但我觉得可能性不大,因为爬的是国外的网站)。具体背墙原因也不是很清楚。各位大佬看看我翻车的情况,以后尽量避免吧。。T_T

    2 条回复    2018-07-08 12:39:23 +08:00
    banwagong
        1
    banwagong  
       2018-07-07 12:10:08 +08:00
    搬瓦工香港机房最低配置方案已经断货好久了,不过 ping 确实很低,速度还行,就是流量不多。
    mostkia
        2
    mostkia  
    OP
       2018-07-08 12:39:23 +08:00
    @banwagong 100G 对我这种轻度使用者来讲足够了。而且是罕见的 G 口,非常合适的一个套餐。可惜暂时没有库存了,7 月 6 日的时候咨询过官方,对方回复,最近没有,不过可以留意 8 月分,或许会补货,看来 8 月份得盯紧了。
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   3037 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 24ms · UTC 00:16 · PVG 08:16 · LAX 16:16 · JFK 19:16
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.