當前位置: 首頁>>代碼示例>>Python>>正文


Python FormRequest.meta["page"]方法代碼示例

本文整理匯總了Python中scrapy.FormRequest.meta["page"]方法的典型用法代碼示例。如果您正苦於以下問題:Python FormRequest.meta["page"]方法的具體用法?Python FormRequest.meta["page"]怎麽用?Python FormRequest.meta["page"]使用的例子?那麽, 這裏精選的方法代碼示例或許可以為您提供幫助。您也可以進一步了解該方法所在scrapy.FormRequest的用法示例。


在下文中一共展示了FormRequest.meta["page"]方法的1個代碼示例,這些例子默認根據受歡迎程度排序。您可以為喜歡或者感覺有用的代碼點讚,您的評價將有助於係統推薦出更棒的Python代碼示例。

示例1: parse

# 需要導入模塊: from scrapy import FormRequest [as 別名]
# 或者: from scrapy.FormRequest import meta["page"] [as 別名]
    def parse(self,response):
        ## page_count_text {string}
        # @example
        #
        # if(ANP_checkInput('AspNetPager1_input',3270,'頁索引超出範圍!','頁索引不是有效的數值!'))
        # {ANP_goToPage('AspNetPager1_input','page','http://www.bgku.cn/sitemap_1',
        # 'http://www.bgku.cn/sitemap_{page}','',3270,false);};return false;
        ##

        page_count_text= response.xpath('//*[@id="AspNetPager1_btn"]/@onclick').extract()[0]
        match= re.search(',\d{4,},',page_count_text)
        page_count= int(match.group(0).strip(','))
        for page in range(1,page_count+1):
            url= 'http://www.bgku.cn/sitemap_'+str(page)
            request = FormRequest(url, callback=self.parse_index_page, dont_filter=True)
            request.meta["page"] = page
            yield request
開發者ID:hanwei2008,項目名稱:crawl,代碼行數:19,代碼來源:bgkuSpider.py


注:本文中的scrapy.FormRequest.meta["page"]方法示例由純淨天空整理自Github/MSDocs等開源代碼及文檔管理平台,相關代碼片段篩選自各路編程大神貢獻的開源項目,源碼版權歸原作者所有,傳播和使用請參考對應項目的License;未經允許,請勿轉載。