V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
爱意满满的作品展示区。
matrixyuri
V2EX  ›  分享创造

众人拾柴火焰高,一起来开发一个自动化的社交网络信息收集工具吧!

  •  
  •   matrixyuri ·
    zhyuri · 2014-06-11 08:18:32 +08:00 · 10601 次点击
    这是一个创建于 3629 天前的主题,其中的信息可能已经有所发展或是发生改变。
    这是前几天偶然冒出来的一个点子,主要的想法是:

    从前获取一个人的信息的时候,往往是通过某一个社交平台入手,
    比如从微博开始,看 ta 的个人资料页面,寻找他绑定过什么应用,寻找经常与他进行交互的人的情况,从这些地方可以推断出这个人所在的城市、工作单位、毕业院校等信息,通过看过往微博还可以大致了解这个人的历程。
    从知乎开始通常是看个人资料页面看 ta 是否绑定了微博,然后转入之前的步骤;或者是看 ta 关注的话题、看 ta 回答的最好的话题,也可以大致了解一些 ta 的情况。
    其他的社交平台也可以搜刮出不少信息,比如在 V2EX,LinkIn etc.

    于是觉得可以做一个自动化的工具,更全面更准确的获取这些信息,通过对一个人的各种社交平台信息的分析,得到关于 ta 的多个关键字和基本信息,还可以获得 ta 的人际圈情况,通过对人际圈里每个人的基本信息提取,可以大致知道目标的很多情况。

    详细的想法介绍我都放在了 Github 上。

    对于这个程序的想法主要是:

    1.大家一起来开发,针对不同社交平台的模块开发出不同的模块,
    2.通过统一的数据输入输出约定保证数据格式一致,
    3.程序有统一的入口,通过调用模块获取结果,最终统一的展示出来,



    已经在 Github 上建好了项目,在 README 里简单阐述了想法,希望能有更多的人一起来玩这个东西,一起把这个事做成。
    Github : https://github.com/MatrixYuri/rMap

    对于实现语言还没有决定,
    本想用 PHP 会比较熟悉,但是 PHP 没有好用的异步以及并发,另外 PHP 也不适合这样运行时间很久的程序。
    用 Python 的话,我不是很喜欢 Python 的性能...
    Java 同理,虽然它很强大
    Go?我觉得不错,性能和功能上都能满足要求,不过我还不太熟练,如果有熟悉 Go 的朋友加入,我想进度会快很多
    C/C++ 这...会方便开发吗..

    如果大家有建议欢迎提出,晚辈是一只代码仔,会认真参与这个项目的执行,
    所以,现在有一个巨好玩的 idea,就差小伙伴们一起来玩了。

    欢迎邮件联系 zhang1437 (艾特) gmail.com
    104 条回复    2015-05-17 17:21:54 +08:00
    1  2  
    cevincheung
        101
    cevincheung  
       2014-06-12 14:08:34 +08:00
    特地回来补充一下。

    好想法。却违法。
    matrixyuri
        102
    matrixyuri  
    OP
       2014-06-12 14:32:46 +08:00
    @cevincheung 哈哈..这是补刀啊
    socoxx
        103
    socoxx  
       2014-06-16 21:55:27 +08:00   ❤️ 1
    @matrixyuri 想法很赞,可惜我不会技术帮不到你
    shellbye
        104
    shellbye  
       2015-05-17 17:21:54 +08:00
    这不就是我们公司正在做的事情?不过我们是直接用爬虫爬取,各个网站都爬,然后在通过算法关联用户
    1  2  
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   907 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 26ms · UTC 22:12 · PVG 06:12 · LAX 15:12 · JFK 18:12
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.