V2EX = way to explore
V2EX 是一个关于分享和探索的地方
Sign Up Now
For Existing Member  Sign In
bozong
V2EX  ›  问与答

请教一个异步爬数据的问题,《天眼查》。

  •  1
     
  •   bozong · Mar 7, 2017 · 2949 views
    This topic created in 3344 days ago, the information mentioned may be changed or developed.
    bozong
        1
    bozong  
    OP
       Mar 7, 2017
    不好意思,又麻烦大神们了
    http://www.tianyancha.com/v2/company/22822.json
    http://dis.tianyancha.com/dis/getInfoById/22822.json?
    这两个地址可以通过 http://www.tianyancha.com/company/22822 抓包得到。
    试过多中办法,都不行。
    反爬机制好严格啊。
    请大神们指教
    bozong
        2
    bozong  
    OP
       Mar 7, 2017
    bozong
        3
    bozong  
    OP
       Mar 7, 2017
    bozong
        4
    bozong  
    OP
       Mar 7, 2017
    klxq15
        5
    klxq15  
       Mar 7, 2017 via Android   ❤️ 1
    你试试带上 cookie
    bozong
        6
    bozong  
    OP
       Mar 7, 2017
    @klxq15 #5 不行。它的 cooike 每次请求都会变。很麻烦
    bozong
        7
    bozong  
    OP
       Mar 7, 2017
    @klxq15 #5 且请求一次就时效。烦
    bozong
        8
    bozong  
    OP
       Mar 7, 2017
    @klxq15 #5 https://www.v2ex.com/t/345712#reply3 来这个吧。我发了两遍。
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   2515 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 29ms · UTC 06:49 · PVG 14:49 · LAX 23:49 · JFK 02:49
    ♥ Do have faith in what you're doing.