本文整理汇总了Python中scrapy.http.request.Request.meta['callback']方法的典型用法代码示例。如果您正苦于以下问题:Python Request.meta['callback']方法的具体用法?Python Request.meta['callback']怎么用?Python Request.meta['callback']使用的例子?那么恭喜您, 这里精选的方法代码示例或许可以为您提供帮助。您也可以进一步了解该方法所在类scrapy.http.request.Request
的用法示例。
在下文中一共展示了Request.meta['callback']方法的1个代码示例,这些例子默认根据受欢迎程度排序。您可以为喜欢或者感觉有用的代码点赞,您的评价将有助于系统推荐出更棒的Python代码示例。
示例1: deserializeLine
# 需要导入模块: from scrapy.http.request import Request [as 别名]
# 或者: from scrapy.http.request.Request import meta['callback'] [as 别名]
def deserializeLine(line):
obj = loads(line)
if not isinstance(obj, list):
obj = [obj]
lister = []
if obj[0]['type'] == 'spider_settings':
return obj[0]
for element in obj:
if element['type'] == 'request':
request = Request(element['url'])
request.meta.update(element['meta'])
request.meta['callback'] = element['callback']
lister.append(request)
if element['type'] == 'item':
item = dictToItem(element['item'], element['name'])
lister.append(item)
if len(lister) is 1:
return lister[0]
else:
return lister