V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX  ›  sugusor  ›  全部回复第 1 页 / 共 1 页
回复总数  13
2015-05-12 23:13:13 +08:00
回复了 sugusor 创建的主题 Python scrapy 数据输出成 json 文件是空的,这是什么问题
@beibeijia 唔,这个例子我已经试过了,好像还是不行= =,我还是重装好了。。不过能说一下怎么能彻底卸载吗?
2015-05-12 23:12:14 +08:00
回复了 sugusor 创建的主题 Python scrapy 数据输出成 json 文件是空的,这是什么问题
@sunchen 我的pipeline代码是这样的
# -*- coding: utf-8 -*-

# Define your item pipelines here
#
# Don't forget to add your pipeline to the ITEM_PIPELINES setting
# See: http://doc.scrapy.org/en/latest/topics/item-pipeline.html


class TutorialPipeline(object):
def process_item(self, item, spider):
return item
2015-05-12 14:26:02 +08:00
回复了 sugusor 创建的主题 Python scrapy 数据输出成 json 文件是空的,这是什么问题
@zenxds 好像还是不行QAQ,只有csv格式可以,xml,json这些都不可以= =
2015-05-12 13:41:44 +08:00
回复了 sugusor 创建的主题 Python scrapy 数据输出成 json 文件是空的,这是什么问题
@mahone3297 我发现libxlst1-dev我的安装中没有包括,但我现在装好后好像还是没什么变化
2015-05-12 13:19:14 +08:00
回复了 sugusor 创建的主题 Python scrapy 数据输出成 json 文件是空的,这是什么问题
@mahone3297 我按照官方文档http://scrapy-chs.readthedocs.org/zh_CN/latest/topics/ubuntu.html#topics-ubuntu 这个安装的,有没有问题?
2015-05-12 13:18:27 +08:00
回复了 sugusor 创建的主题 Python scrapy 数据输出成 json 文件是空的,这是什么问题
@sunchen 我的pipeline就是官方自己生成的,我并没有改过它。还有那个spider yield item命令具体该怎么用啊,我在项目下输入它说没有spider这个命令。。
2015-05-12 10:34:31 +08:00
回复了 sugusor 创建的主题 Python scrapy 数据输出成 json 文件是空的,这是什么问题
@mahone3297 还有我是ubuntu下安装的。。。是不是有什么要注意的地方
2015-05-12 10:33:37 +08:00
回复了 sugusor 创建的主题 Python scrapy 数据输出成 json 文件是空的,这是什么问题
@mahone3297 我在想是不是我安装的不对,我是按照那个官方指南安装的,但是安装的时候它好像忽略了好多东西。。
2015-05-12 08:26:17 +08:00
回复了 sugusor 创建的主题 Python scrapy 数据输出成 json 文件是空的,这是什么问题
@mahone3297 我试了把它们导出成'xml', 'jl', 'json', 'jsonlines', 'csv',结果只有csv文件中有数据,其他的都没有。而且csv中的文件也好像也有错误,用文本格式打开时能显示desc属性的信息,但我用libreoffice打开时却只有title和link属性有内容。
2015-05-12 08:02:55 +08:00
回复了 sugusor 创建的主题 Python scrapy 数据输出成 json 文件是空的,这是什么问题
@mahone3297 额,xpath好像都是对的,因为我把抓的内容直接显示在命令行时内容都在,但把它们导出到json却只有一些[],具体内容都没有导出来。
2015-05-12 07:42:47 +08:00
回复了 sugusor 创建的主题 Python scrapy 数据输出成 json 文件是空的,这是什么问题
@Gonster 好像是复制过来的时候缩进被吃掉了= =
2015-05-11 23:14:39 +08:00
回复了 sugusor 创建的主题 Python scrapy 数据输出成 json 文件是空的,这是什么问题
@mahone3297 我一开始用的是yield,好像也不行。
2015-03-02 20:33:15 +08:00
回复了 kstsca 创建的主题 分享发现 .science 域名免费使用 1 年
cool
关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   1527 人在线   最高记录 6679   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 17ms · UTC 17:02 · PVG 01:02 · LAX 09:02 · JFK 12:02
Developed with CodeLauncher
♥ Do have faith in what you're doing.