数据清洗:利用lxml移除html中的元素

举报
彭世瑜 发表于 2021/08/14 00:44:34 2021/08/14
1.8k+ 0 0
【摘要】 有一段html文本 <html> <head> <title>这是标题</title> </head> <body> <div>这是内容</div> <div>要移除的内容</div> </body> </html> 1234...

有一段html文本

<html> <head> <title>这是标题</title> </head> <body> <div>这是内容</div> <div>要移除的内容</div> </body>
</html>

  
 

我希望把 <div>要移除的内容</div> 移除

安装lxml

pip install lxml

  
 

代码实例

# -*- coding: utf-8 -*-

from lxml import etree

text = """
<html> <head> <title>这是标题</title> </head> <body> <div>这是内容</div> <div>要移除的内容</div> </body>
</html>"""

tree = etree.fromstring(text)

# 返回一个列表
remove_tags = tree.xpath('//div[last()]')

if remove_tags: remove_tag = remove_tags[0] remove_tag.getparent().remove(remove_tag)

print(etree.tounicode(tree))
"""
<html> <head> <title>这是标题</title> </head> <body> <div>这是内容</div> </body>
</html>
"""

  
 

最后也实现了我的要求,可以封装为单独的函数,以便调用


from lxml import html, etree
def remove_elements(html, xpath): """ 移除html 文本中的元素 :param html: str :param xpath: str :return: str """ # tree = etree.fromstring(html)
	tree = html.fragment_fromstring(f'<div>{text}</div>') # 返回一个列表 remove_tags = tree.xpath(xpath) for remove_tag in remove_tags: remove_tag.getparent().remove(remove_tag) return etree.tounicode(tree)
if __name__ == '__main__': text = """ <html> <head> <title>这是标题</title> </head> <body> <div>这是内容</div> <div>要移除的内容</div> </body> </html>""" print(remove_elements(text, '//div[last()]'))
  
 

参考
https://lxml.de/tutorial.html

文章来源: pengshiyu.blog.csdn.net,作者:彭世瑜,版权归原作者所有,如需转载,请联系作者。

原文链接:pengshiyu.blog.csdn.net/article/details/105296938

【版权声明】本文为华为云社区用户转载文章,如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容,举报邮箱: cloudbbs@huaweicloud.com
  • 点赞
  • 收藏
  • 关注作者

作者其他文章

评论(0

抱歉,系统识别当前为高风险访问,暂不支持该操作

    全部回复

    上滑加载中

    设置昵称

    在此一键设置昵称,即可参与社区互动!

    *长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。

    *长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。