自定义信号未被内部API处理

2024-09-27 07:21:29 发布

您现在位置:Python中文网/ 问答频道 /正文

我正在尝试处理自定义信号'signalizers.item_提取,在scray启动时成功启用的scray扩展“MyExtension”中。这是我的代码:

信号发生器.py

# custom signals
item_extracted = object()
item_transformed = object()


class MyExtension(object):

def __init__(self):
    pass

@classmethod
def from_crawler(cls, crawler):
    # first check if the extension should be enabled and raise
    # NotConfigured otherwise
    if not crawler.settings.getbool('MYEXTENSION_ENABLED'):
        raise NotConfigured

    # instantiate the extension object
    ext = cls()

    # connect the extension object to signals
    crawler.signals.connect(ext.item_extracted, signal=item_extracted)

    # return the extension object
    return ext

def item_extracted(self, item, spider):
    #Do some stuff

然后我试着发送'signalizers.item_提取'信号,但我认为没有处理,或者至少我既看不到实际输出,也无法调试它:

蜘蛛:

^{pr2}$

我是不是做错了什么?在


Tags: theselfobject信号defextensionitemext
1条回答
网友
1楼 · 发布于 2024-09-27 07:21:29

在阅读了一些Scrapy的源代码之后,我发现问题在于创建一个新的Signal manager实例,而不是使用crawler的实例:

spider.crawler.signals.send_catch_log(signal=signalizers.item_extracted, item=item, spider=spider)

现在它被扩展程序正确地处理了

相关问题 更多 >

    热门问题