本文整理匯總了Python中Search.remove_duplicate_results方法的典型用法代碼示例。如果您正苦於以下問題:Python Search.remove_duplicate_results方法的具體用法?Python Search.remove_duplicate_results怎麽用?Python Search.remove_duplicate_results使用的例子?那麽, 這裏精選的方法代碼示例或許可以為您提供幫助。您也可以進一步了解該方法所在類Search
的用法示例。
在下文中一共展示了Search.remove_duplicate_results方法的1個代碼示例,這些例子默認根據受歡迎程度排序。您可以為喜歡或者感覺有用的代碼點讚,您的評價將有助於係統推薦出更棒的Python代碼示例。
示例1: while
# 需要導入模塊: import Search [as 別名]
# 或者: from Search import remove_duplicate_results [as 別名]
to_be_inserted = []
while (not repeat):
lst = Search.search(query, loops * MAX_QUERY, modifier="create_ts desc")[1]
for post in lst:
if posts_collection.find_one({"item.id":post['item']['id']}):
repeat = True
break
else:
to_be_inserted.append(post)
loops += 1
return to_be_inserted
to_be_inserted = get_new_posts('"show hn"', posts_collection)
to_be_inserted.extend(get_new_posts("showhn", posts_collection))
insertions = Search.remove_duplicate_results(to_be_inserted)
if insertions:
inserted = False
else:
inserted = True
if not inserted:
try:
posts_collection.insert(insertions, safe=True)
inserted = True
except pymongo.errors.OperationFailure:
inserted = False
if not inserted:
for post in insertions: