• 请不要在回答技术问题时复制粘贴 AI 生成的内容
ppllss
V2EX  ›  程序员

大多数人一辈子都接触不到淘宝双 11 流量冲击?那么我们怎么去锻炼这样的能力?

  •  
  •   ppllss · Jan 25, 2022 · 10806 views
    This topic created in 1744 days ago, the information mentioned may be changed or developed.

    很多时候我在想,在写业务的我,怎么去提升自己,我毫不犹豫的回答自己那就是庞大的用户基数和每时每刻数以万计的流量产生。

    但是我们会遇到吗?也许(肯定)一辈子都遇不到吧。

    平时去实践都是写一个 demo ,更别谈数据量了

    比如我们把用户基数划为几个等级

    1. < 100
    2. < 1 万
    3. < 10 万
    4. < 100 万
    5. < 1000 万
    6. < 1 亿
    7. < 10 亿

    我相信你没有接触过更高等级的用户基数,你可能会忽略这方面的可能会采到坑,比如代码,表设计,中间使用等等。。

    无论我们怎么去模拟和实践,我相信现实问题,永远比你模拟的问题更加出乎意料。

    我也不是怂恿大家一定去大厂

    我只是觉得大家要接受一个平凡自己罢了。

    56 replies  •  2022-01-26 14:11:53 +08:00
    pupboss
    pupboss
    Jan 25, 2022❤️20
    1
    接触到又能怎么样呢? 5 年前研究出来的方案已经很成熟了,现在只要做好流量预估,各种预案,按照图纸施工就行,也挺平凡的
    julyclyde
    julyclyde
    Jan 25, 2022❤️17
    2
    既然都遇不到,何必要锻炼呢?
    murmur
    murmur
    Jan 25, 2022
    3
    淘宝已经觉悟了,双十一搞得大家都不爽,现在是从 10 月促销到 12 月,说明技术钻牛角尖还得用业务化解
    Building
    Building
    Jan 25, 2022 via iPhone
    4
    不可以模拟吗?
    NVDA
    NVDA
    Jan 25, 2022
    5
    这种能力也就是在面试的时候画虎烂罢了…
    Thresh
    Thresh
    Jan 25, 2022
    6
    @pupboss 说的对。我是感受过的
    xunxuntj
    xunxuntj
    Jan 25, 2022
    7
    人生苦短,用在有意义的事情上
    没有目标的精益求精,就是内卷
    MacDows
    MacDows
    Jan 25, 2022 via Android
    8
    为什么要假定一件不会遇到的事情呢
    hyq
    hyq
    Jan 25, 2022❤️65
    9
    根据我的经验总结,只需要牢记一些常识就行:
    1. mysql 的 tps 你就按 5000 算,每秒超过 5000 请求,直接用 myql 肯定不行
    2. 单机 redis 的 qps 可以到 100k ,把一些数据 /缓存,存到 redis ,能有效提高并发
    3. 利用消息队列实现削峰,实现生产与消费的解耦
    4. 保证处理逻辑可以并行,可以扩展,谨慎使用锁
    5. 尽量将服务做成无状态可扩展的,把状态扔给 redis 或者其他高效的存储
    hyq
    hyq
    Jan 25, 2022❤️1
    10
    6. 对于频繁访问的数据一定要做缓存,然后去解决缓存的雪崩,穿透,失效等问题
    MIUIOS
    MIUIOS
    Jan 25, 2022❤️3
    11
    又被公众号洗脑了?
    lscho
    lscho
    Jan 25, 2022
    12
    遇不到为什么要锻炼呢?很多能力都是在解决问题的时候积累的。遇不到问题,只锻炼是不行的。
    shyrock
    shyrock
    Jan 25, 2022
    13
    屠龙之术,习之何用
    js8510
    js8510
    Jan 25, 2022
    14
    10 亿以上用户的的服务也有很多啊。。。google.com, facebook.com. IG. Twitter, amazon.com ....

    service scale 大了以后,却是有很多问题是之前无法想象的。。举个几个简单又常见的两个小问题:
    1 ) 很多大型服务开发周期长,参与的团队太多,时间久了,executable 太大了以后会造成很多困难。比如 compiler overflow ,OOM 等等。
    2 ) 有时候遇到一些 bug 会很难复现。比如你有 100k 台机器的时候每天都有一两台有相同的 crash stacktrace. 你明明每天都看的到,但是因为 1/100k 太小了。logging sampling 往往没有那么凑巧可以抓到。结果就是往往每个大型服务都有一些长期修不好的东西。
    sadfQED2
    sadfQED2
    Jan 25, 2022 via Android❤️7
    15
    😂😂别觉得这么大的流量用户量有多牛逼,你接触以后可以会感叹,这屎山代码居然还能跑起来,还没挂
    utyyyreee
    utyyyreee
    Jan 25, 2022
    16
    中国人不骗中国人 😁
    wonderfulcxm
    wonderfulcxm
    Jan 25, 2022 via iPhone
    17
    不锻炼,就用 ab 测试一下
    CoderGeek
    CoderGeek
    Jan 25, 2022❤️1
    18
    经历 6 次了 不想加班 - - 想回家好好睡觉
    cat9life
    cat9life
    Jan 25, 2022
    19
    各自媒体吹的太猛了 仿佛“抵御”了双 11 。我们就是全球第一
    jones2000
    jones2000
    Jan 25, 2022❤️1
    20
    这个不需要锻炼, 砸钱买机器加带宽不就完事了。只要构架不太傻,支持分布式,剩下的就是钱的问题了。没钱再高的能力也没用。
    Remember
    Remember
    Jan 25, 2022❤️4
    21
    @sadfQED2 人类的本质是草台班子。参考上次 fb 宕机事故,不挂掉都没人知道几十亿用户的公司基础架构脆的跟纸一样。
    newmlp
    newmlp
    Jan 25, 2022❤️6
    22
    大多数人一辈子也娶不到林志玲,怎么能锻炼这种和女神相处的经验
    SGTeam
    SGTeam
    Jan 25, 2022
    23
    工人共情资本家的,纯粹就是贱的难受
    onikage
    onikage
    Jan 25, 2022
    24
    虽然我是个搞 java 的, 但是一直不喜欢 java 主流的这种唯高并发大后端的导向.
    我喜欢的是小而美的, 比如写个能切实用上的小工具之类的.
    0o0O0o0O0o
    0o0O0o0O0o
    Jan 25, 2022 via iPhone
    25
    我也经常想能接触到就好了,不是为了别人也不是为了钱,就是觉得自己的水平和那个量级好遥远好遥远
    whypool
    whypool
    Jan 25, 2022 via Android❤️1
    26
    业务化解
    所以就不要搞什么秒杀,抢购什么的
    直接送!
    hello2090
    hello2090
    Jan 25, 2022 via iPhone
    27
    工作了 10 几年还是用户<100 的水平,还好工资到位了,得过且过吧
    murmur
    murmur
    Jan 25, 2022❤️1
    28
    @js8510 技术不够可以业务凑,有的时候拟一套霸王条款和赔偿预案比 99.99 稳定管事

    网易炉石一个机房全炸了一套赔偿下来玩家直喊爹

    腾讯么,东西挂了就挂了,反正你找不到客服
    CallMeReznov
    CallMeReznov
    Jan 25, 2022❤️8
    29
    一身屠龙技,来穿杀猪衣.
    世间无凤凰,菜市来修鸡.

    横批:差不多得了.
    cnkuner
    cnkuner
    Jan 25, 2022
    30
    大部分楼房都是 100 米以下的,每年那么多人考证干嘛?图纸调出来改改外立面不就得了。
    ipwx
    ipwx
    Jan 25, 2022
    31
    屠龙之术,习之何用
    liuawei
    liuawei
    Jan 25, 2022
    32
    没见过的人还是想看一下那么大的并发量是怎么支撑的吧。
    x86
    x86
    Jan 25, 2022
    33
    这不就是面试造飞机,上班拧螺丝
    hejw19970413
    hejw19970413
    Jan 25, 2022
    34
    流量尽可能不要出现峰值,一切无事就是最好的事。
    vance123
    vance123
    Jan 25, 2022
    35
    我是一个建筑师,我一直在学习如何设计一个鸟巢级别的建筑。虽然我的老板一直骂我吃饱了没事干,但我相信,有一天他接到鸟巢单子的时候会想起我的
    RainCats
    RainCats
    Jan 25, 2022
    36
    作为一个彩笔 Javaer ,目前认为除了面试可以被面试官鄙视以外,所谓高并发没有任何作用,方案都有,无非是缓存、数据库分库分表、MQ 、集群巴拉巴拉,方案现成的一大堆
    aguesuka
    aguesuka
    Jan 25, 2022
    37
    写协议, 比如用 bt 协议 Sybil Attack 自己
    chaodada
    chaodada
    Jan 25, 2022❤️1
    38
    别觉得这么大的流量用户量有多牛逼,你接触以后可以会感叹,这屎山代码居然还能跑起来,还没挂
    thetbw
    thetbw
    Jan 25, 2022
    39
    自己没接触过什么大的流量,说一下我之前的同事吧,他现在在一个移动的外包,刚开始连数据结构都不晓得,代码各种脱裤子放屁,不过服务器用的 oracle,开发是 java,感觉完全就是靠服务器堆起来的。我现在公司服务器因为内存不足都有过几次事故了,再怎么优化估计效果都不大。
    lycpang
    lycpang
    Jan 25, 2022
    40
    我现在就在你说的那种亿级流量的顶流公司。。。但是这玩意都是基础服务。。也就那么几个核心人员负责那玩意。。。平时的开发基本用不到。双十一双十二都是提前准备的,有各种预案,压测啥的。压测 2wqps ,上不去就加机器。。。
    lycpang
    lycpang
    Jan 25, 2022
    41
    @lycpang 技术可能学不到什么,但是你的缺点会被流量放大 N 倍。。所以做事就要格外的谨慎。
    adoal
    adoal
    Jan 25, 2022 via iPhone
    42
    好好解决你自己业务场景中遇到的实际技术问题,多总结,多思考,学会解耦和抽象,提高面向业务的通用架构设计能力,培养技术品位和技术审美。
    eason1874
    eason1874
    Jan 25, 2022❤️1
    43
    当你需要一个人解决双 11 这样大的流量,你的年收入起码千万,不如先考虑一下每年上千万收入该怎么花才能花得有意义
    auxox
    auxox
    Jan 25, 2022
    44
    加压模拟呗
    mademing3322
    mademing3322
    Jan 25, 2022
    45
    技术里比高并发有意思且有更有挑战的事情多了去了,钻这牛角尖干啥,再说了,只要把横向扩展方案设计好,这就是堆机器的事
    whkvf
    whkvf
    Jan 25, 2022 via Android❤️3
    46
    硬件行业的核心是堆数量
    软件行业的核心是堆 buffer
    levelworm
    levelworm
    Jan 25, 2022
    47
    你想办法让自己变得有些价值,比如说去阿里云或者腾讯云上搞个有一定流量的服务,然后故意不买他们的盾服务,再请人去黑产网站上喊一嗓子,让大家都来 DDOS 你,就可以锻炼到了。
    verihy
    verihy
    Jan 25, 2022
    48
    流量不够,你把集群资源限制得狠一些就行了,最后落到单机上很多问题都是相似的。
    liuxu
    liuxu
    Jan 25, 2022 via Android
    49
    把你的站发到隔壁 loc ,200k/s cc 满足你的愿望
    ch2
    ch2
    Jan 25, 2022
    50
    首先你得有足够的机器,要不然只能一辈子单机,单机是开发不出来高并发的系统的
    proxychains
    proxychains
    Jan 25, 2022❤️2
    51
    发帖:大家好我新购了 64C128G 50G 高防小鸡,求打
    nicebird
    nicebird
    Jan 26, 2022
    52
    接触不到,说明需求不大,那就不用太在意。
    NeoZephyr
    NeoZephyr
    Jan 26, 2022
    53
    @Remember 他们是源码泄漏了还是咋地,你就知道了
    pkoukk
    pkoukk
    Jan 26, 2022
    54
    楼上+N ,只要你支持横向拓展,就是加机器的事儿
    只要你机器够预算够,Mysql 内存开到 500G ,有的场景下 redis 都可以不用
    gugugu233
    gugugu233
    Jan 26, 2022
    55
    喜欢提升自己的话,可以去研习研习其他门槛低的屠龙技,比如编译原理、图形学什么的(手动狗头
    diseng
    diseng
    Jan 26, 2022
    56
    软件行业是最缺乏规范的一个行业。金融业、建筑业、医疗行业都有非常多的规范,必须安全国家或者全球的规范来做事。随着软件行业越来越成为社会运转的基础设施,我相信在不久的将来,至少国家层面会出台软件行业的一系列规范,要求那些成为国家社会运转基础设施的软件供应商去满足这些规范,否则就要整改。

    就算国家不出台规范,只要成为了基础设施的软件自身出现了故障,公司内部也会制定各种规则制度,国家把这些规则制度再抽象一下,也就成了国家的规范。
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Privacy   ·   Solana   ·   2785 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 119ms · UTC 13:46 · PVG 21:46 · LAX 05:46 · JFK 08:46
    ♥ Do have faith in what you're doing.