V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
explorer123
V2EX  ›  服务器

大概有 10 台闲置的云服务器,能做点什么?

  •  
  •   explorer123 · 2020-03-27 21:13:18 +08:00 · 11498 次点击
    这是一个创建于 1705 天前的主题,其中的信息可能已经有所发展或是发生改变。
    算了下如果按 1 核 2G 算大概能够 10 台 1 年的。如果降配会多几台,升配会少几台,如果是竞价实例会更多。
    我主要用 python,想做爬虫,但是爬什么呢?
    另外请教下,怎么方便得管理这 10 台服务器?比如本地修改程序后自动部署到这 10 台上,爬完后把数据汇总再下载到本地,如果大神们能推荐合适的轮子就不用自己再去造了。
    60 条回复    2022-04-08 20:01:54 +08:00
    susecjh
        1
    susecjh  
       2020-03-27 21:14:48 +08:00
    学习 k8s 啊,好机会!
    PhyllisLin
        2
    PhyllisLin  
       2020-03-27 22:25:06 +08:00   ❤️ 1
    hadoop 集群
    lshero
        3
    lshero  
       2020-03-27 22:40:22 +08:00 via Android
    当然是挂探针
    xpresslink
        4
    xpresslink  
       2020-03-27 22:41:51 +08:00
    挖矿
    huiyifyj
        5
    huiyifyj  
       2020-03-27 22:42:59 +08:00
    挖坑,探针,吃灰...🙃
    keepeye
        6
    keepeye  
       2020-03-27 22:44:13 +08:00
    我野路子,本地生成 pyc,然后打压缩包放到 oss 上,通过 pssh 批量控制服务器下载压缩包、解压缩、重启服务。大概几百台服务器就是这么管理的
    AllenBigBear
        7
    AllenBigBear  
       2020-03-27 22:44:27 +08:00
    想问下。。。为啥会买这么多服务器。。。
    levelworm
        8
    levelworm  
       2020-03-27 22:54:51 +08:00 via Android
    出租服务器让别人比如学 spark 这种。。。
    Ultraman
        9
    Ultraman  
       2020-03-27 23:04:11 +08:00 via Android
    给个 ssh 我义务帮你管理一台吧🙊
    majiaxin110
        10
    majiaxin110  
       2020-03-27 23:19:49 +08:00
    部署可以了解下 CI/CD,可以用一些工具比如 teamcity
    vus520
        11
    vus520  
       2020-03-27 23:20:30 +08:00
    批量管理机器用 salt 啊,或者 k8s
    locoz
        12
    locoz  
       2020-03-27 23:27:51 +08:00
    k8s 玩起来啊
    mumbler
        13
    mumbler  
       2020-03-27 23:47:11 +08:00 via Android
    有很多学生买不起服务器,你可以把服务器分割足够小且可用,免费给学生申请
    superrichman
        14
    superrichman  
       2020-03-27 23:58:25 +08:00 via iPhone
    你需要的是 scrapy-redis,不过可能性能过剩了
    timothyye
        15
    timothyye  
       2020-03-28 00:44:49 +08:00


    算了一下,我还有一台没加入监控,我也有 10 台……
    icecrack
        16
    icecrack  
       2020-03-28 03:36:43 +08:00 via Android
    @timothyye 这用的哪家的监控?
    kaiki
        17
    kaiki  
       2020-03-28 06:24:00 +08:00   ❤️ 1
    10 台相互发包并处理,直到其中 9 台瘫痪,剩下一台作为胜利者?
    noqwerty
        18
    noqwerty  
       2020-03-28 06:48:00 +08:00 via Android   ❤️ 3
    @icecrack uptimerobot,我关注了这个大佬的博客
    ufan0
        19
    ufan0  
       2020-03-28 07:31:22 +08:00 via Android
    @mumbler 服务器一年的价格还没有学生半个月的零花钱多。
    wzw
        20
    wzw  
       2020-03-28 07:31:43 +08:00 via iPhone
    @keepeye 为什么要生成 pyc
    efaun
        21
    efaun  
       2020-03-28 07:49:34 +08:00 via Android
    @mumbler 我觉得你小看了现在学生的消费水平😒
    miscnote
        22
    miscnote  
       2020-03-28 09:03:36 +08:00
    搭建个 dns 集群呗,做个 dns hosting 接口,有人用你就有收入了。类似于 dnsimple.com
    Kirscheis
        23
    Kirscheis  
       2020-03-28 09:04:10 +08:00 via Android
    当然是开 mc 服务器然后叫朋友来玩
    OllyDebug
        24
    OllyDebug  
       2020-03-28 09:09:21 +08:00
    挖矿
    locoz
        25
    locoz  
       2020-03-28 09:11:32 +08:00 via Android
    @Kirscheis #23 🤣多个低配机子干净玩不起来啊,原版还行,mod 服直接当场暴毙
    locoz
        26
    locoz  
       2020-03-28 09:12:01 +08:00 via Android
    #25 干净 -> 感觉
    Cyen
        27
    Cyen  
       2020-03-28 09:13:46 +08:00 via iPhone
    兄台能否借我一台😃
    timothyye
        28
    timothyye  
       2020-03-28 09:44:13 +08:00 via Android
    @icecrack uptimerobot
    star7th
        29
    star7th  
       2020-03-28 09:51:30 +08:00
    我也花过一段时间折腾过服务器,最后发现,如果用来做项目,拿这些服务器来根本没啥可干。服务器都只是项目的载体,自身没有足够大的项目再去扩容机器的话,就是浪费资源。
    LudwigWS
        30
    LudwigWS  
       2020-03-28 09:51:54 +08:00
    忽然想起来我在私有云,有数不清的虚拟机可以创建,另外还有三台裸机……我是不是该利用上
    star7th
        31
    star7th  
       2020-03-28 09:51:57 +08:00
    我也花过一段时间折腾过服务器,最后发现,如果不是用来做项目,拿这些服务器来根本没啥可干。服务器都只是项目的载体,自身没有足够大的项目再去扩容机器的话,就是浪费资源。
    star7th
        32
    star7th  
       2020-03-28 09:53:30 +08:00
    企图先扩容服务器再把项目做大是本末倒置的。是先有大项目,然后才需要服务器。而不是服务器扩容了,再去找项目(通常这个时候发现没啥好项目))
    opengps
        33
    opengps  
       2020-03-28 09:56:54 +08:00 via Android
    我因为业务原因也总是屯着一些闲置低配机器,食之无味,弃之可惜
    keepeye
        34
    keepeye  
       2020-03-28 10:03:09 +08:00
    @wzw 防止源码泄露呗
    wzw
        35
    wzw  
       2020-03-28 10:07:17 +08:00
    @keepeye #34 pyc 无法做到呀!
    celeron533
        36
    celeron533  
       2020-03-28 10:14:33 +08:00
    开 minecraft 服务器供群友玩耍
    icecrack
        37
    icecrack  
       2020-03-28 10:59:34 +08:00 via Android
    @timothyye 我也是用的这个,好像和我的里面不太一样,我去后台看看
    zyq2280539
        38
    zyq2280539  
       2020-03-28 11:03:45 +08:00
    如果自己业务没有需求的话,1.建议闲置机器跑点自己小项目 2,可以分享出来供大家做内网穿透使用,毕竟现在很多没有公网 ip 又想需要公网环境的还是挺多的,比如我之前也发过帖子求一个 zerotier 的国内 moon 节点。嘿嘿 3.可以拉一个讨论群集中大家的力量一起来做点啥项目
    dbskcnc
        39
    dbskcnc  
       2020-03-28 11:19:27 +08:00
    要是用过 gitlab,每台安装个 gitlab-runner,用 gitlab ci 管理也很方便
    xzwc
        40
    xzwc  
       2020-03-28 11:24:14 +08:00
    挖矿
    337136897
        41
    337136897  
       2020-03-28 11:43:15 +08:00
    @mumbler 学生买不起服务器? 你仿佛在逗我呢
    ackoly
        42
    ackoly  
       2020-03-28 11:45:43 +08:00 via iPhone
    @keepeye 在线就能反编译,亲测可行。
    tojonozomi
        43
    tojonozomi  
       2020-03-28 12:00:50 +08:00
    我有台 8 核 16G 的云服务器,真就开了 mc 给群友玩。
    (然后就没有干正经事了)一直闲置着 orz
    zro
        44
    zro  
       2020-03-28 12:16:29 +08:00
    部署一个 ADGuard Home?😎
    xsen
        45
    xsen  
       2020-03-28 12:41:37 +08:00
    嗯。。目前也有三台闲置( 4g 两台,1g 一台)。。。
    explorer123
        46
    explorer123  
    OP
       2020-03-28 13:13:15 +08:00
    ssh 给别人用的话他干啥我不可控,出事了就麻烦了,只考虑自用或者搭建一些服务提供给别人使用。

    关于统一管理我想到的一个办法是让所有主机有一块共享硬盘,用 git 或 ssh 同步文件到这一个硬盘上。然后用程序一台台自动登录机器(这个登录过程好像可以用 fabric 之类的 python 库)发送开始执行的指令,下载的文件也都下到共享盘上。

    有点笨,不是很高效,重在好理解,期待大家提供更好的办法。
    Jiolt
        47
    Jiolt  
       2020-03-28 13:17:54 +08:00
    开挖
    zealinux
        48
    zealinux  
       2020-03-28 13:38:03 +08:00
    @timothyye 我也试了 uptimerobot,但是没看到有`monitors`这个页面
    winglight2016
        49
    winglight2016  
       2020-03-28 14:20:25 +08:00
    开端口,弱密码,自然有黑客来告诉你可以做什么。。。
    realpg
        50
    realpg  
       2020-03-28 14:31:43 +08:00
    @mumbler #13 手机游戏上万氪金的大佬都是学生
    OneMan
        51
    OneMan  
       2020-03-28 14:38:21 +08:00
    拿着锤锤找钉钉呢
    cnzjl
        52
    cnzjl  
       2020-03-28 15:30:09 +08:00
    我囤了 4 台学生机,两台特价鸡,想找点好项目,但是没有.....
    lixonxp
        53
    lixonxp  
       2020-03-28 17:00:50 +08:00
    搞云计算 大数据 深度学习啊, 10 台少了点, 最好再买 10 台
    firejoke
        54
    firejoke  
       2020-03-28 19:15:53 +08:00
    @explorer123 #46 统一部署和管理可以用 ansible, 也是 python 库, 和 fabric 一样基于 ssh
    keepeye
        55
    keepeye  
       2020-03-28 20:53:42 +08:00
    @ackoly 没关系,源码都很难懂,反编译出来的东西能看懂也算本事
    keepeye
        56
    keepeye  
       2020-03-28 21:01:02 +08:00
    @ackoly 试过在线反编译,很多核心代码反编译不出来,这就足够了,防君子不防小人嘛
    sunny920
        57
    sunny920  
       2020-04-23 17:12:45 +08:00
    比如建博客,建个人网站等,拥有一台服务器很简单,国内云服务器厂家也有很多,但是服务器也需要经常运维,比如说它的 cpu,内存,网速等都需要定期查看修改增加,不然一旦当你服务器内容存储量或者访客量过多时你的网站将无法正常打开,在这里我推荐你可以试用服务器管理面板来进行运维,比如说云帮手,它可以帮你做到:

    1.批量管理多台云主机;

    2.兼容性强大,兼容市面基本所有的云商云主机,兼容操作系统;

    3.操作简单,可视化界面预览资源、一键修复、一键部署;

    4. 可以远程登录云主机 FTP 桌面,处理云主机上的文件;

    5.监控和,资源还有告警功能,这个是挺好的,不用盯着看;

    6.系统修复功能,这个是挺实用也比较必须的;

    7.免费使用。总得来说功能还是挺全的,不存在需要又要另外找软件的尴尬,一个云帮手软件基本满足了所有需求。
    11ssss
        58
    11ssss  
       2020-04-24 04:35:39 +08:00
    才疏学浅 探针是个什么东西
    b1tz
        59
    b1tz  
       2022-04-08 12:26:15 +08:00
    @lshero 好奇探针是什么?
    lshero
        60
    lshero  
       2022-04-08 20:01:54 +08:00
    @b1tz hostloc 的一个梗 ,就是一堆人买了 vps 吃灰,然后挂上 php 探针查看一下机器的性能和环境配置,http://www.liuzhanwu.com/4322.html
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   4462 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 37ms · UTC 04:05 · PVG 12:05 · LAX 20:05 · JFK 23:05
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.