V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX  ›  randix  ›  全部回复第 2 页 / 共 3 页
回复总数  53
1  2  3  
2017-07-31 10:47:21 +08:00
回复了 hicdn 创建的主题 分享发现 很暴力的反爬虫机制
@hicdn 能分享一下是你模拟鼠标点击的 js 吗 发现它检查点还有,abort dispatchevent, mouseup,mousedown,mouse movement 这些点
2017-07-27 17:05:09 +08:00
回复了 hicdn 创建的主题 分享发现 很暴力的反爬虫机制
@hicdn js 混淆的怎么查看 append 里面的内容?
2017-07-27 10:30:43 +08:00
回复了 hicdn 创建的主题 分享发现 很暴力的反爬虫机制
@hicdn 感谢回复,但是它 JS 混淆过的,不知道它是怎么识别的。
2017-07-27 09:58:18 +08:00
回复了 hicdn 创建的主题 分享发现 很暴力的反爬虫机制
@zbl430 没有出现很慢 然后提示访问异常吗?
2017-07-26 17:57:21 +08:00
回复了 hicdn 创建的主题 分享发现 很暴力的反爬虫机制
@zbl430 @hicdn
请教一下你们 header 有没有做过什么特殊处理啊?

import sys
from selenium import webdriver
from selenium.webdriver.common.keys import Keys
from selenium.webdriver.common.action_chains import ActionChains
from selenium.webdriver.common.desired_capabilities import DesiredCapabilities
import time
import requests
reload(sys)
sys.setdefaultencoding('utf-8')
headers = { 'Accept':'text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,image/apng,*/*;q=0.8',
'Accept-Language':'en-US,en;q=0.8,zh-CN;q=0.6,zh;q=0.4,zh-TW;q=0.2,ru;q=0.2',
'Accept-Encoding':'gzip, deflate',
'Connection': 'keep-alive',
'User-Agent': 'Mozilla/5.0 (Windows NT 6.2; WOW64; rv:47.0) Gecko/20100101 Firefox/47.0'
}
for key, value in headers.iteritems():
webdriver.DesiredCapabilities.PHANTOMJS['phantomjs.page.customHeaders.{}'.format(key)] = value
webdriver.DesiredCapabilities.PHANTOMJS['phantomjs.page.settings.userAgent'] = 'Mozilla/5.0 (Windows NT 6.2; WOW64; rv:47.0) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/48.0.2564.116 Safari/537.36'

print 'yeah'
url = 'http://wsjs.saic.gov.cn/'
driver = webdriver.PhantomJS()
driver.get(url)
driver.maximize_window()
time.sleep(5)
driver.save_screenshot('fk1.png')

我是这样访问首页的, 不知道哪里有问题, 能不能指点一下,谢谢了。
2017-07-26 15:30:53 +08:00
回复了 hicdn 创建的主题 分享发现 很暴力的反爬虫机制
@hicdn 请问你进入首页会不会有异常提示啊??
2017-07-26 14:44:55 +08:00
回复了 hicdn 创建的主题 分享发现 很暴力的反爬虫机制
@zbl430
你的脚本还能用吗? 我用 selenium+phantomjs 进入首页都进不了说访问异常,10 次里有一次是正常的 求解。
get_friends 这个方法是搜索本地的用户的吗?
2016-11-03 18:26:19 +08:00
回复了 oroge 创建的主题 Android Android 7.1 Beta 网络感叹号无法消除, 修改 captive portal server 无效
@baraja 域名写什么?
2016-02-21 17:48:21 +08:00
回复了 543400 创建的主题 Nexus 今天刚到 nexus 6p,有点遗憾。来吐嘈一下
虚拟键比实体键好多了 除了三星和国产喜欢用实体键,多数 oem 都不用了吧,如大法, lg, moto, HTC ``` jelly bean 时代我和楼主想法一样``` 现在我看到实体键的就不买, 实体键再 landscape mode 的时候有点恶心啊```特别是平板上```
2016-02-21 17:40:43 +08:00
回复了 herozzm 创建的主题 Nexus 从国产安卓转 nexus 6p 原生系统各种不适应
用 nexus 必备条件,英文好点,起码能知道软件干嘛的。 对谷歌服务依赖程度高,尽量不装国内流氓的软件, play store 有很多精品应用,虽然多数没 中文,但体验基本很好,不需要 root, 我 6p 装了 200 多个软件,用得好好的。 我的 nexus 6 就装了各种国产软件,被我用冰箱冻了。
2015-12-14 15:46:25 +08:00
回复了 pubby 创建的主题 Nexus nexus 6p 国际版到手,移动 4G 完美
看到一堆人说不值 什么做工,什么华为。搞清楚什么是 Nexus 才来喷什么华为,说什么做工差,你摸过真机吗? 我这些用的都不觉得 你看几个视频就在 JJYY 的, Jerryrigeverything 是能掰湾 其他十几个没掰弯的不见你说,真是服了 iV2ex 的一些果粉。这代 Nexus  绝对是我用过最好的手机 没有之一。
在 iV2ex 问这种问题, 看到几个人 Fanboys , cult of the Apple. 楼主早撤吧
2015-11-24 15:03:06 +08:00
回复了 ptsa 创建的主题 问与答 想买 Nexus 6p or S6 edge + 大家给个建议
6P 已到手,很好很好。
1  2  3  
关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   5502 人在线   最高记录 6679   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 29ms · UTC 08:40 · PVG 16:40 · LAX 00:40 · JFK 03:40
Developed with CodeLauncher
♥ Do have faith in what you're doing.