无法使用Scrapy获得响应

Question

我是新来刮，我试图得到一个简单的csv文件列表名称从一个网站。在粗糙的壳中，它似乎起作用，但使用蜘蛛却没有反应。你知道吗

我使用的代码是：

import scrapy

class EridaniSpider(scrapy.Spider):
name = "jupiter"

start_urls = ["http://www.example.com"]

def parse(self, response):
    for mike in response.css("div.openRounds-block-startupName"):
       yield {"startupname" : mike.css("h2::text")}

请帮帮我！你知道吗

Answer 1

我想出来了。代码如下：

import scrapy


class QuotesSpider(scrapy.Spider):
name = "jupiter"
start_urls = [
    'http://www.leapfunder.com',
]

def parse(self, response):
    for startup in response.xpath("//*[contains(@class, 'startupName')]"):
        yield { 
                'title' : startup.xpath("//h2/text()").extract(),
        }