当前位置: 首页>>代码示例>>Python>>正文


Python ElementHelper.is_element_text_none方法代码示例

本文整理汇总了Python中util.ElementHelper.is_element_text_none方法的典型用法代码示例。如果您正苦于以下问题:Python ElementHelper.is_element_text_none方法的具体用法?Python ElementHelper.is_element_text_none怎么用?Python ElementHelper.is_element_text_none使用的例子?那么恭喜您, 这里精选的方法代码示例或许可以为您提供帮助。您也可以进一步了解该方法所在util.ElementHelper的用法示例。


在下文中一共展示了ElementHelper.is_element_text_none方法的2个代码示例,这些例子默认根据受欢迎程度排序。您可以为喜欢或者感觉有用的代码点赞,您的评价将有助于系统推荐出更棒的Python代码示例。

示例1: is_cluster_all_links

# 需要导入模块: from util import ElementHelper [as 别名]
# 或者: from util.ElementHelper import is_element_text_none [as 别名]
def is_cluster_all_links(cluster):
    """ #p判断是否是链接节点的集合。1.如果该集合中所有的文本节点都是链接节点,则属于链接噪声<a> text </a>或<li><a>text</a></li>的形式
    if all tags which contain links are <a> tag, then return True
    For example:
        <a> link </a>
        OR
        <li> <a> link </a> </li>
    """
    all_nodes_contain_text = []
    for node in cluster:
        children = ElementHelper.get_children(node)
        nodes_contain_text = [node for node in children if not ElementHelper.is_element_text_none(node)
            and node.tag not in ('em','strong','span','i','b')]
        all_nodes_contain_text.extend(nodes_contain_text)

    link_nodes = [node for node in all_nodes_contain_text if node.tag=='a' or node.getparent().tag=='a']
    other_nodes = [node for node in all_nodes_contain_text if node.tag!='a' and node.getparent().tag != 'a']

    link_nodes_text_number = cluster_text_number(link_nodes)
    other_nodes_text_number = cluster_text_number(other_nodes)

    if len(other_nodes)==0 or other_nodes_text_number==0:
        return True

    if 1.0 *link_nodes_text_number/other_nodes_text_number>2.0:
        return True

    return False
开发者ID:actlea,项目名称:TopicalCrawler,代码行数:30,代码来源:api2.py

示例2: is_none_link_node_with_text

# 需要导入模块: from util import ElementHelper [as 别名]
# 或者: from util.ElementHelper import is_element_text_none [as 别名]
def is_none_link_node_with_text(element):
    if not ElementHelper.is_element_text_none(element) and element.tag!='a':
        return True
    return False
开发者ID:actlea,项目名称:TopicalCrawler,代码行数:6,代码来源:api2.py


注:本文中的util.ElementHelper.is_element_text_none方法示例由纯净天空整理自Github/MSDocs等开源代码及文档管理平台,相关代码片段筛选自各路编程大神贡献的开源项目,源码版权归原作者所有,传播和使用请参考对应项目的License;未经允许,请勿转载。