【深度学习入门案例】LAC词法分析

举报
川川菜鸟 发表于 2021/10/15 22:48:22 2021/10/15
【摘要】 文章目录 一、准备数据二、读取数据三、加载预训练模型四、预测五.完整源码 一、准备数据 创建ci.txt文档: 二、读取数据 #读取数据 with open("ci.txt", ...

一、准备数据

创建ci.txt文档:
在这里插入图片描述

二、读取数据

#读取数据
with open("ci.txt", 'r') as f:
    test_text = []
    for line in f:
        test_text.append(line.strip())
print(test_text)

  
 
  • 1
  • 2
  • 3
  • 4
  • 5
  • 6

返回:
在这里插入图片描述

三、加载预训练模型

LAC网络框架为BiGRU+CRF,整体框架图:
在这里插入图片描述
代码为:

import paddlehub as hub
module = hub.Module(name="lac")

  
 
  • 1
  • 2

四、预测

PaddleHub对于支持一键预测的module,可以调用module的相应预测API,完成预测功能。

results = module.lexical_analysis(texts=test_text)

for result in results:
    print(result)

  
 
  • 1
  • 2
  • 3
  • 4

返回:
在这里插入图片描述
后面的tag看不懂?词性和专名类别标签集合如下表:
在这里插入图片描述

五.完整源码

# coding=gbk
"""
作者:川川
@时间  : 2021/8/29 22:10
群:970353786
"""
#读取数据
with open("ci.txt", 'r') as f:
    test_text = []
    for line in f:
        test_text.append(line.strip())
print(test_text)
#加载模块
import paddlehub as hub
module = hub.Module(name="lac")
## 预测
results = module.lexical_analysis(texts=test_text)

for result in results:
    print(result)

  
 
  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 8
  • 9
  • 10
  • 11
  • 12
  • 13
  • 14
  • 15
  • 16
  • 17
  • 18
  • 19
  • 20

文章来源: chuanchuan.blog.csdn.net,作者:川川菜鸟,版权归原作者所有,如需转载,请联系作者。

原文链接:chuanchuan.blog.csdn.net/article/details/119986798

【版权声明】本文为华为云社区用户转载文章,如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容,举报邮箱: cloudbbs@huaweicloud.com
  • 点赞
  • 收藏
  • 关注作者

评论(0

0/1000
抱歉,系统识别当前为高风险访问,暂不支持该操作

全部回复

上滑加载中

设置昵称

在此一键设置昵称,即可参与社区互动!

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。