V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
爱意满满的作品展示区。
locoz
V2EX  ›  分享创造

弄了一个分享爬虫的干货和黑科技的知乎专栏——手把手教你写爬虫,欢迎关注~

  •  5
     
  •   locoz · 2019-02-12 17:06:02 +08:00 · 3472 次点击
    这是一个创建于 2136 天前的主题,其中的信息可能已经有所发展或是发生改变。
    传送门: https://zhuanlan.zhihu.com/webspider
    历史文章:
    当你写爬虫时遇上 Flash+加密的解决方式 https://zhuanlan.zhihu.com/p/45508079
    当你写爬虫抓不到 APP 请求包的时候该怎么办? [初级篇] https://zhuanlan.zhihu.com/p/46433599
    当你写爬虫抓不到 APP 请求包的时候该怎么办? [中级篇] https://zhuanlan.zhihu.com/p/56397466

    因为之前没想着弄专栏的关系,45508079 这篇已经没法重投到这个专栏里了,不知道有没有知乎的大佬能帮忙解决一下,如果不行的话只能是重发一次到专栏里了。
    16 条回复    2019-05-23 16:30:58 +08:00
    rocketman13
        1
    rocketman13  
       2019-02-12 17:20:32 +08:00   ❤️ 1
    牛皮
    mokain
        2
    mokain  
       2019-02-12 20:17:35 +08:00   ❤️ 1
    牛皮啊!
    luckyswag
        3
    luckyswag  
       2019-02-12 20:48:34 +08:00   ❤️ 1
    🐂🍺
    GDC
        4
    GDC  
       2019-02-12 21:14:37 +08:00   ❤️ 1
    记得多年前批量下载虾米音乐的 mp3 时,他们也是 flash+加密,也是一样的方法解的。
    hhhfffhhh
        5
    hhhfffhhh  
       2019-02-12 21:20:47 +08:00   ❤️ 1
    慕课网这些加密的视频地址这么解密呢
    andylsr
        6
    andylsr  
       2019-02-12 21:24:27 +08:00 via Android   ❤️ 1
    学习~
    li27962278
        7
    li27962278  
       2019-02-13 08:36:51 +08:00   ❤️ 1
    学习 顶一下
    locoz
        8
    locoz  
    OP
       2019-02-13 10:08:16 +08:00
    @hhhfffhhh #5 没弄过诶,首先应该是要有权限看视频的账号在登录状态下进去播放页面,然后取视频地址就要看它是怎么加载的了,没带加密参数什么的话用最简单的嗅探视频文件的方式就能爬,带了的话就看看 JS。
    locoz
        9
    locoz  
    OP
       2019-02-13 10:08:59 +08:00
    谢谢各位的关注和收藏
    piloots
        10
    piloots  
       2019-02-13 11:29:31 +08:00   ❤️ 1
    请教楼主一个问题,chrome 从 58 之后包括 58 不能使用自签 comm*name 的证书了,有什么方式可以解决?
    locoz
        11
    locoz  
    OP
       2019-02-13 11:32:38 +08:00
    @yiome404 #10 降级呗。。多简单
    vtwoextb
        12
    vtwoextb  
       2019-02-13 14:44:15 +08:00   ❤️ 1
    牛皮
    locoz
        13
    locoz  
    OP
       2019-03-12 11:58:42 +08:00
    locoz
        14
    locoz  
    OP
       2019-04-22 10:11:17 +08:00
    locoz
        15
    locoz  
    OP
       2019-04-28 10:09:17 +08:00
    locoz
        16
    locoz  
    OP
       2019-05-23 16:30:58 +08:00
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   3508 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 24ms · UTC 04:53 · PVG 12:53 · LAX 20:53 · JFK 23:53
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.