當前位置: 首頁>>代碼示例>>Python>>正文


Python Crawler.__init__方法代碼示例

本文整理匯總了Python中Crawler.Crawler.__init__方法的典型用法代碼示例。如果您正苦於以下問題:Python Crawler.__init__方法的具體用法?Python Crawler.__init__怎麽用?Python Crawler.__init__使用的例子?那麽, 這裏精選的方法代碼示例或許可以為您提供幫助。您也可以進一步了解該方法所在Crawler.Crawler的用法示例。


在下文中一共展示了Crawler.__init__方法的7個代碼示例,這些例子默認根據受歡迎程度排序。您可以為喜歡或者感覺有用的代碼點讚,您的評價將有助於係統推薦出更棒的Python代碼示例。

示例1: __init__

# 需要導入模塊: from Crawler import Crawler [as 別名]
# 或者: from Crawler.Crawler import __init__ [as 別名]
 def __init__(self):
     crawler.__init__(self)
     self.title = ''
     self.press = ''
     self.date = ''
     self.time = ''
     self.contents = ''
開發者ID:jangsoopark,項目名稱:NaverFinanceCrawler,代碼行數:9,代碼來源:Article.py

示例2: __init__

# 需要導入模塊: from Crawler import Crawler [as 別名]
# 或者: from Crawler.Crawler import __init__ [as 別名]
    def __init__(self):
        # parent construct
        Crawler.__init__(self)

        self.crawl_cookie = {}
        self.status_code = ''
        self.history = ''
開發者ID:xzhoutxd,項目名稱:tb,代碼行數:9,代碼來源:TBCrawler.py

示例3: __init__

# 需要導入模塊: from Crawler import Crawler [as 別名]
# 或者: from Crawler.Crawler import __init__ [as 別名]
    def __init__(self, forced=False):
        Crawler.__init__(self)
        self.results = set()
        self.forced = forced
        self.success_count = None
        self.failure_count = None

        self.blacklist = []
        self.name_exceptions = ["http://www.cplusplus.com/reference/string/swap/"]
開發者ID:Mondego,項目名稱:pyreco,代碼行數:11,代碼來源:allPythonContent.py

示例4: __init__

# 需要導入模塊: from Crawler import Crawler [as 別名]
# 或者: from Crawler.Crawler import __init__ [as 別名]
 def __init__(self, filename):
     Crawler.__init__(self)
     self.viewed_url = set()   # store the href with hash value
     self.candidate_url = list()
     self.database = self.connectDb()
開發者ID:AlgorithmFan,項目名稱:Crawler,代碼行數:7,代碼來源:DefenseCrawlerMySQL.py

示例5: __init__

# 需要導入模塊: from Crawler import Crawler [as 別名]
# 或者: from Crawler.Crawler import __init__ [as 別名]
 def __init__(self):
     crawler.__init__(self)
     self.articleList = []
開發者ID:jangsoopark,項目名稱:NaverFinanceCrawler,代碼行數:5,代碼來源:NaverFinanceList.py

示例6: __init__

# 需要導入模塊: from Crawler import Crawler [as 別名]
# 或者: from Crawler.Crawler import __init__ [as 別名]
 def __init__(self, filename):
     Crawler.__init__(self)
     self.viewed_url = set()   # store the href with hash value
     self.candidate_url = list()
     self.database = CsvDatabase(filename)
     self.database.buildColumn(['url', 'content'])
開發者ID:AlgorithmFan,項目名稱:Crawler,代碼行數:8,代碼來源:DefenseCrawler.py

示例7: __init__

# 需要導入模塊: from Crawler import Crawler [as 別名]
# 或者: from Crawler.Crawler import __init__ [as 別名]
 def __init__(self, short_name, long_name, base_url, domain, nested_scrape=False):
     Crawler.__init__(self, base_url, domain, nested_scrape=nested_scrape)
     self.short_name = short_name
     self.long_name = long_name
開發者ID:davegri,項目名稱:LibreCrawler,代碼行數:6,代碼來源:MongoCrawler.py


注:本文中的Crawler.Crawler.__init__方法示例由純淨天空整理自Github/MSDocs等開源代碼及文檔管理平台,相關代碼片段篩選自各路編程大神貢獻的開源項目,源碼版權歸原作者所有,傳播和使用請參考對應項目的License;未經允許,請勿轉載。