V2EX › abcbuzhiming 的所有回复 › 第 86 页 / 共 103 页

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

1 ... 82 83 84 85 86 87 88 89 90 91 ... 103

❮

❯

2017-10-17 15:01:18 +08:00

回复了 jin6220 创建的主题 › Python › 照着浏览器的 request header 信息抄的为什么爬虫运行一段时间还是 WinError 10060

现在基本反爬虫已经是各大网站的标配了，
有兴趣的可以看看这里：
https://zhuanlan.zhihu.com/data-factory
楼主很明显缺乏一些基本概念，还是不要尝试这种关键数据，我说个很简单的方法，如果你要求不高的话，对这个场景最合适的做法是：自己写油猴脚本配合 chrome 抓取，保证没问题；或者上无头浏览器；研究 js 是不归路，不是对 js 造诣很深的人，都不建议去整，混淆就能玩死你，上个 eval 就能让你欲仙欲死，等你好不容易研究出来了人家改个方式你又完蛋，js 反反爬虫是逆向破解，最大的好处是你的 js 水平会曾指数级上升

2017-10-17 14:46:02 +08:00

回复了 jin6220 创建的主题 › Python › 照着浏览器的 request header 信息抄的为什么爬虫运行一段时间还是 WinError 10060

@imn1 不需要 web service 层，写个延时脚本直接在反向代理那把你干了就行

2017-10-17 14:45:27 +08:00

回复了 jin6220 创建的主题 › Python › 照着浏览器的 request header 信息抄的为什么爬虫运行一段时间还是 WinError 10060

@jin6220 很明显，这是 js 轮询，对方在 js 里肯定有某些算法识别的，你没对上就屏蔽你，你遇上了反爬虫而已

2017-10-17 11:02:00 +08:00

回复了 jin6220 创建的主题 › Python › 照着浏览器的 request header 信息抄的为什么爬虫运行一段时间还是 WinError 10060

很简单，不是你把 head 伪装成浏览器，对面就会真傻逼的觉得你就是真人的，识别爬虫的机制多的很，最简单的一种，楼主你的机器人有伪装请求频率吗，人类可做不到机器那么有规律的行为。
再狠一点的，js 里做点手脚，你的爬虫不执行 js，也会被发现

2017-10-16 21:45:26 +08:00

回复了 xxhjkl 创建的主题 › 宽带症候群 › 服役 13 年：报道称 WPA2 加密协议已被攻破

wifi 这玩意本身就是带病出生的，能坚持到现在才被攻破算不错了

2017-10-15 11:38:01 +08:00

回复了 yukunyi 创建的主题 › 宽带症候群 › 成都电信 443 端口也封了么

我再说一遍，不要试图用家用宽带搞对外服务，一定要搞就用非常规端口，国内这块一定会管的越来越严的

2017-10-14 22:24:48 +08:00

回复了 dbw9580 创建的主题 › 问与答 › 如何在小组中推广 Git 等一系列工具的使用

推广的时候一定要记住以下几点：
1.对自己高要求可以，但是不要对别人高要求，别人完全可能学不会或者不愿意学
2.你能否让 git 的使用简单化是你能否推广成功的经验，学习成本高？那请想办法让它变的不高，这就是技术推广的工作

2017-10-13 18:12:21 +08:00

回复了 krisbai 创建的主题 › 程序员 › 搭一套直播平台需要什么成本？

@WuwuGin 能不能讲讲具体是哪些开源方案，流媒体类的流控是怎么解决的
@szdubinbin 求个地址

2017-10-13 17:46:03 +08:00

回复了 ResidualSoils 创建的主题 › 问与答 › 有能画流程图之类的软件推荐吗？

@ResidualSoils xmind 是画思维导图用的，流程图用这玩意画很不好用

2017-10-13 17:44:44 +08:00

回复了 ipchy 创建的主题 › 问与答 › 如何评价国美在线强制 996，国美在线强制 996 违反劳动法么？还不让有负面情绪

1.你为啥会产生“公司很牛逼”这种错觉
2.任何公司开始搞 996 就是要裁员
3.出来打工难道不应该做好准备随时跑路吗？为啥你们一个个都对一个公司恋恋不舍的？

2017-10-13 17:40:30 +08:00

回复了 will1916 创建的主题 › 问与答 › cloudflare 的 DNS 和某些 CDN 的问题，有几个问题想请教下大神。

1.我还没见过用 CDN 不用对应 DNS 的，你要知道 CDN 的原理就是，给不同请求来源的 ip 分配不同的 cdn 服务器，你不用它家的 dns，你如何把对用的 cdn 服务器给过去，要知道 CDN 不是一台服务器，cdn 是不同地区有不同的服务器，dns 根据来源 ip 的不同分配不同的服务器，相当于一个反向代理
2.域名无法备案，那你在国内用不了 cdn 和 dns，别想了，现在国内的大趋势是管的越来越严，死角越来越少
3.防御 DDOS 主流方法？流量识别，只有大公司提供的服务玩得转
4.全站 Https 怎么可能还被域名劫持，莫非你的私匙泄露了？你描述清楚一点，劫持的现象是什么

2017-10-13 09:34:57 +08:00

回复了 dustin2016 创建的主题 › 问与答 › 浏览器插件是如何获取加密的视频地址和音频等资源的？

基于 html 和 js 的无论怎么加密最后还是会暴露真实接口，基于 flash，Silverlight 这样的 ActiveX 是浏览器抓不住的

2017-10-13 09:32:31 +08:00

回复了 gdtv 创建的主题 › 问与答 › 我自由职业，在家接单，七大姑八大姨知道我在家坐着赚钱，想让他们的孩子跟我赚钱

你怎么让他们知道你在赚钱的，楼主，财不外漏知道不

2017-10-11 16:27:25 +08:00

回复了 zonga 创建的主题 › 程序员 › 回复 TD 退订怎么实现

短信服务器收到 TD 这个字符串后直接向业务服务器的 controller 请求不就行了吗

2017-10-10 23:20:05 +08:00

回复了 a49666 创建的主题 › 程序员 › 大学狗的迷茫，越来越想脱离“软件工程师”的范畴。

楼主，你为何不直接考虑考研，进计算机科学领域呢，你其实对应用层没兴趣，你敢兴趣的是深层次的理论，并且觉得自己能驾驭这些理论研究，那为啥不试试自己到底合不合适呢

2017-10-10 23:17:49 +08:00

回复了 vic2012 创建的主题 › 职场话题 › 应届生去大公司打杂还是去小公司当主力？

绝大部分小公司根本不愿意要应届生的好吗，小公司里的主力都是要多面手，而且来了就能用，有多少应届生敢说自己是多面手？而且不需要培训的。小公司对应届生其实一点都不友好，都是抱着看能不能捡到个天才的想法，试用淘汰率极高，所以才有应届生最好去大公司的说法，只有大公司才愿意花成本给应届生时间自我升级

2017-10-10 23:14:38 +08:00

回复了 q0000x 创建的主题 › 宽带症候群 › 卧槽， CN2 挂了吗？

你们太高调了好吗，不要以为墙的技术真的很差，人家也会做流量分析的。我很早之前就说真想安稳的搞个服务器自己用，要尽量找冷门的

2017-10-10 17:17:36 +08:00

回复了 ke1vin 创建的主题 › 职场话题 › 一个 10 10 6 的前端开发 offer，该不该去呢？

@dbdd 我说 IT 行业有门槛，但是我的意思可不是让楼主去接受 996，996 环境下没几个人能积累经验迈过门槛的，IT 这行是需要停下来思考的，996 可不是什么好选择，能别选就别选

2017-10-09 23:33:29 +08:00

回复了 peneazy 创建的主题 › 职场话题 › 前端学 Spring，怎么学

以前有个人很形象的谈过 Java 系的框架的特色是，全是毛坯房，你得从头搞到尾，每个环节都搞懂，然后才能出东西，所以楼主如果你根本就不想深入 Java 的话，我强烈的不建议你搞 Java，会有很大的挫折感，后端开发的理念其实差不多的，说来说去就是围绕着 MVC 转圈呗，PHP，Python 都可以啊，再不行把 C#搬出来呗，不要死靠着一棵树

1 ... 82 83 84 85 86 87 88 89 90 91 ... 103

❮

❯