本文整理汇总了Python中Parser.Parser.splitWord方法的典型用法代码示例。如果您正苦于以下问题：Python Parser.splitWord方法的具体用法？Python Parser.splitWord怎么用？Python Parser.splitWord使用的例子？那么恭喜您, 这里精选的方法代码示例或许可以为您提供帮助。您也可以进一步了解该方法所在类Parser.Parser的用法示例。
在下文中一共展示了Parser.splitWord方法的2个代码示例，这些例子默认根据受欢迎程度排序。您可以为喜欢或者感觉有用的代码点赞，您的评价将有助于系统推荐出更棒的Python代码示例。
示例1: run
# 需要导入模块: from Parser import Parser [as 别名]
# 或者: from Parser.Parser import splitWord [as 别名]
def run(self,site_id):
'''
运行主程序
'''
p = path(site_id)
#初始化目录
#清空wordsplit
p.clean_dir(p.g_wordsplit())
#清空hits
p.clean_dir(p.g_hits())
#初始化数据库
p.cp_chun()
###################################################################
# 解析 parser
#
###################################################################
parser = Parser(site_id)
###################################################################
# url处理 url_sort
#
###################################################################
url_trans = UrlTransID(p.g_urltest())
#将url进行排序
url_trans.sort()
#存储为 sorted_url.txt
url_trans.save(p.g_sorted_url())
###################################################################
# parser 进行分词
#
###################################################################
parser.splitWord()
###################################################################
# 根据 docID 修改文件名
#
###################################################################
url_trans_dir = UrlTransDir(p.g_sorted_url())
#对document进行重命名
url_trans_dir.renameDoc( p.g_document() )
#对wrdsplit进行重命名
url_trans_dir.renameDoc( p.g_wordsplit() )
###################################################################
# parser 产生词库 wordbar
#
###################################################################
parser.transWbar()
###################################################################
# title_处理
#
###################################################################
title_des_sqlite = Title_des_sqlite(site_id)
#对原始数据进行刷新
title_des_sqlite.clear()
title_des_sqlite.run()
title_des_sqlite.add_url()
title_des_sqlite.intro_split_des_title()
title_des_sqlite.cx.commit()
###################################################################
# index 索引操作
#
###################################################################
index = Indexer(site_id)
index.run()
###################################################################
# index 对hits进行排序
#
###################################################################
hit_sort = Sort_hits(p.g_hit_size())
for i in range(20):
hit_sort.sort_wid(p.g_hits()+'/',i)
hit_sort.save(p.g_hits()+'/',i)示例2: __init__
# 需要导入模块: from Parser import Parser [as 别名]
# 或者: from Parser.Parser import splitWord [as 别名]
class main:
def __init__(self):
'''
init
'''
self.p = 0
self.site_id = 1
def run(self,site_id):
'''
综合路径管理
'''
self.site_id = site_id
path = path(site_id)
#分词
self.p=Parser(path.g_document(),path.g_wordsplit(),path.g_wordbar())
self.url_sort(path.g_urltest(), path.g_sorted_url())
self.parser()
#修尬文件名称
self.url_trans_dir(path.g_sorted_url(), path.g_document(), path.g_wordsplit())
#index
self.p.transWbar()
#数据库处理
self.title_des(path.g_sorted_url())
self.index(path.g_wordbar(), path.g_wordsplit() ,path.g_hits())
#进行排序
self.sort_hit( path.g_hit_size(),path.g_hits()+'/' )
def sort_hit(self,p1,p2):
'''
hit 排序
'''
hit_sort=Sort_hits(p1)
for i in range(20):
hit_sort.sort_wid(p2,i)
hit_sort.save(p2,i)
def url_trans_dir(self,p1,p2,p3):
'''
重新命名
'''
urlTransDir = UrlTransDir(p1)
urlTransDir.renameDoc(p2)
urlTransDir.renameDoc(p3)
def url_sort(self,p1,p2):
'''
对url进行排序及存储
'''
sort = UrlTransID(p1)
sort.sort()
sort.save(p2)
def index(self,p1,p2,p3):
'''
'''
index=Indexer(self.site_id,p1,p2,p3)
index.run()
def parser(self):
self.p.splitWord()
def title_des(self,p1):
'''
'''
doc = Title_des_sqlite()
doc.run()
doc.add_url(p1)
doc.split_des()
doc.intro_split_des_title()
doc.cx.commit()