Python中文
首页
教程
问答
标签
搜索
登录
注册
项目未到达管道
回答此问题可获得
20
贡献值,回答如果被采纳可获得
50
分。
<p>我是python和<code>scrapy</code>的新手。我没有在管道中获取项目数据。在<code>csv</code>中没有写入任何内容。错误是</p> <blockquote> <p>DmozSpider' object has no attribute <strong>getitem</strong></p> </blockquote> <p>如有任何帮助,我们将不胜感激:</p> <p>蜘蛛锉</p> <pre><code>import scrapy import sys import os from tutorial.items import TutorialItem from pprint import pprint class DmozSpider(scrapy.Spider): name = "myspider" allowed_domains = ["www.xyz.co.id"] start_urls = ["http://www.xyz.co.id/search?q=abc"] def parse(self, response): var = response.xpath("//a[@class='img']/@href").extract()[0] item = TutorialItem() item['title'] = var yield item </code></pre> <p>管道文件</p> <pre><code>import csv class TutorialPipeline(object): def __init__(self): self.csvwriter = csv.writer(open('items.csv', 'wb')) def process_item(self, domain, item): print item['title'] self.csvwriter.writerow([item['title']]) return item </code></pre> <p>项目文件</p> <pre><code>import scrapy class TutorialItem(scrapy.Item): title = scrapy.Field() link = scrapy.Field() desc = scrapy.Field() price = scrapy.Field() </code></pre> <p>设置文件</p> <pre><code> ITEM_PIPELINES = { 'tutorial.pipelines.TutorialPipeline': 300, } </code></pre>
0 条评论
分类:
Python问答
请先
登录
后评论
默认排序
时间排序
1 个回答
匿名
1天前
擅长:python、mysql、java
<p>试试看项目.get('title')而不是项['title']</p>
请先
登录
后评论
针对此问题:
更多的回答
关注
89
关注
收藏
1
收藏,
216
浏览
网友 提问于 2天前
相关Python问题
(编辑)背景2+均值漂移跟踪?
6 回答
(网络爬虫)如何从新闻网站获取新闻段落的文本
7 回答
(置换)列表的唯一组合
6 回答
(美丽的soap4,)AttributeError:“非类型”对象没有属性“获取文本”
6 回答
(聊天室)使用套接字通常只允许一个地址(协议/网络地址/端口)
7 回答
(自动)在Pycharm/Python中的=后缩进
10 回答
(自动Py到Exe和Python)找不到“googleapipythonclient”发行版,该发行版是应用程序所必需的
1 回答
(自动操作)write()和do for循环的Odoo问题
3 回答
(自定义)百分位MSE损失函数
1 回答
(自定义用户)createsuperuser TypeError:hasattr():属性名必须是字符串
7 回答
(节点)警告:检测到可能的EventEmitter内存泄漏。添加了11个消息侦听器。使用emitter.setMaxListeners()增加limi
10 回答
(若变量中有字符串)语句未筛选出数据
3 回答
(英语、Perl、Python、Ruby)在代码片段的基础上进行比较?
1 回答
(范围(1,36),7)和+条件下的所有组合
10 回答
(范围(3),范围(3))值错误:要解压缩的值太多(预期为2)
5 回答
(蟒蛇) 平均分配数字
6 回答
(行、列):数据帧的值
2 回答
(行、列)形式的最小值
9 回答
(解决)导入PYBID11/C++编译模块不工作
6 回答
(记忆有效)将“排序”作为生成器实现
2 回答