当前位置: 首页>>代码示例>>Python>>正文


Python FormRequest.meta["pageNo"]方法代码示例

本文整理汇总了Python中scrapy.FormRequest.meta["pageNo"]方法的典型用法代码示例。如果您正苦于以下问题:Python FormRequest.meta["pageNo"]方法的具体用法?Python FormRequest.meta["pageNo"]怎么用?Python FormRequest.meta["pageNo"]使用的例子?那么恭喜您, 这里精选的方法代码示例或许可以为您提供帮助。您也可以进一步了解该方法所在scrapy.FormRequest的用法示例。


在下文中一共展示了FormRequest.meta["pageNo"]方法的1个代码示例,这些例子默认根据受欢迎程度排序。您可以为喜欢或者感觉有用的代码点赞,您的评价将有助于系统推荐出更棒的Python代码示例。

示例1: parseDesignerBlogList

# 需要导入模块: from scrapy import FormRequest [as 别名]
# 或者: from scrapy.FormRequest import meta["pageNo"] [as 别名]
    def parseDesignerBlogList(self, response):
        designer_id = response.meta["designer_id"]
        select = Selector(response)
        class_list_num = select.xpath(".//em[@class='class_list_num']/text()").extract()
        if len(class_list_num) == 0:
            return
        else:
            class_list_num = class_list_num[0]
        
        totalBlog = self.idPatten.findall(class_list_num)[0]
        
        # 每页15个,翻页
        totalPageNo = int(totalBlog) / 15 + 1
        for pageNo in xrange(1, totalPageNo + 1):
            formRequest = FormRequest(url=self.blogPostUrl % (designer_id),
                        formdata={"ajax_type":"blog_0", 'limit': '15', 'page': '%s' % (pageNo)},
                        callback=self.after_post)
            formRequest.meta["designer_id"] = designer_id
            formRequest.meta["pageNo"] = pageNo
            yield formRequest
#             #只测试第一页
#             break
        pass
开发者ID:junfeng-feng,项目名称:Spider,代码行数:25,代码来源:ShejibenSpider.py


注:本文中的scrapy.FormRequest.meta["pageNo"]方法示例由纯净天空整理自Github/MSDocs等开源代码及文档管理平台,相关代码片段筛选自各路编程大神贡献的开源项目,源码版权归原作者所有,传播和使用请参考对应项目的License;未经允许,请勿转载。