请问爬取知乎时如何追踪答案的更新？ - V2EX

首页注册登录

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

推荐学习书目

› Learn Python the Hard Way

Python Sites

› PyPI - Python Package Index

› http://diveintopython.org/toc/index.html

› Pocoo

值得关注的项目

› PyPy

› Celery

› Jinja2

› Read the Docs

› gevent

› pyenv

› Stackless Python

› Beautiful Soup

› 结巴中文分词

› Green Unicorn

› Sentry

› Shovel

› pytest

Python 编程

› pep8 Checker

Styles

› PEP 8

› Google Python Style Guide

› Code Style from The Hitchhiker's Guide

这是一个创建于 2657 天前的主题，其中的信息可能已经有所发展或是发生改变。

想爬取知乎问题下的所有答案并维护，如果有新答案添加就更新数据库。但是个人动态里面是没有对于你关注问题下某个答案修改的通知的。所以在经过一段时间后数据库里面一些答案与最新的答案就会有一些差别。
我想的是每天对已经采集的问题查询是否有新答案,这个比较好解决；然后就是如果有某个答案答主进行了修改,那么总不能用已经采集的和最新的答案进行比对吧。

7 条回复 • 2017-09-15 19:03:06 +08:00

1

ZSeptember

2017-09-14 09:34:11 +08:00

定期全部重新爬

2

ctsed

2017-09-14 09:34:36 +08:00 via Android

答案好像有修改记录

3

fyyz

2017-09-14 09:37:00 +08:00 via Android

可以查最新修改时间啊

4

airqj

2017-09-14 09:49:24 +08:00

最简单的就是混入知乎
取得他们的信任，然后就是要什么有什么了

5

sky0009

2017-09-14 10:10:43 +08:00 via Android

@airqj 你这段话可以精简为四个字：py 交易😀

6

pynix

2017-09-14 15:09:18 +08:00

对内容做个 hash

7

SharkU

OP

2017-09-15 19:03:06 +08:00

@ctsed 好像取消了。
@fyyz 忘了这个信息，感谢。

关于 · 帮助文档 · 博客 · API · FAQ · 实用小工具 · 1617 人在线 最高记录 6679 ·

Select Language

创意工作者们的社区

World is powered by solitude

VERSION: 3.9.8.5 · 24ms · UTC 16:43 · PVG 00:43 · LAX 08:43 · JFK 11:43
Developed with CodeLauncher
♥ Do have faith in what you're doing.