资料介绍
推特文本中包含着大量的非标准词,这些非标准词是由人们有意或无意而创造的。对很多自然语言处理的任务而言,预先对推特文本进行规范化处理是很有必要的。针对已有的规范化系统性能较差的问题,提出一种创新的无监督文本规范化系统。首先,使用构造的标准词典来判断当前的推特是否需要标准化。然后,对推特中的非标准词会根据其特征来考虑进行一对一还是一对多规范化;对于需要一对多的非标准词,通过前向和后向搜索算法,计算出所有可能的多词组合。其次,对于多词组合中的非规范化词,基于二部图随机游走和误拼检查,来产生合适的候选。最后,使用基于上下文的语言模型来得到最合适的标准词。所提算法在数据集上获得86. 4qo的F值,超过当前最好的基于图的随机游走算法10个百分点。
下载该资料的人也在下载
下载该资料的人还在阅读
更多 >
- 融合文本分类和摘要的多任务学习摘要模型 11次下载
- 一种兴趣点分层学习的全监督算法 5次下载
- 一种基于BERT模型的社交电商文本分类算法 8次下载
- 一种侧重于学习情感特征的预训练方法 4次下载
- 一种基于DE和ELM的半监督分类方法 5次下载
- 一种面向铁路文本分类的字符级特征提取方法 10次下载
- 一种基于光滑表示的半监督分类算法 17次下载
- 基于规范化函数的深度金字塔模型算法 14次下载
- 基于BP神经网络分类器的垃圾文本过滤模型 43次下载
- 一种针对中英混合文本的多维度多情感分析方法 16次下载
- 一种基于神经网络的短文本分类模型 7次下载
- 结合BERT模型的中文文本分类算法 6次下载
- 数据库-关系规范化的详细资料介绍,为什么要对进行关系的规范化? 5次下载
- 配电网CAD系统中文本标注技术与应用 36次下载
- 一种基于PCA和RS的文本过滤方法 2次下载
- 基于神经辐射场的自监督多相机占用预测 163次阅读
- 《人工智能在指挥和控制系统中的决策支持》 325次阅读
- 浅谈硬件电路开发流程规范 701次阅读
- Linux系统中的10个常用的文本查看命令 9026次阅读
- 基于文本到图像模型的可控文本到视频生成 536次阅读
- 什么是文本值? 724次阅读
- 新型的端到端弱监督篇幅级手写中文文本识别方法PageNet 1465次阅读
- verilog语言编写规范 792次阅读
- 用于弱监督大规模点云语义分割的混合对比正则化框架 999次阅读
- Google AI最新研究用无监督数据增强推进半监督学习,取得令人瞩目的成果 3342次阅读
- 一种通过编程方式生成训练数据的“弱监督”范式 2791次阅读
- 浅析FPGA规范化的重要性 2988次阅读
- Facebook研究人员提出了一个大规模图像文本提取和识别系统——Rosetta 3124次阅读
- 如何使用EAST文本检测器在自然场景下检测文本 1w次阅读
- 一种由PLC与变频器组成的恒压供水系统设计 3078次阅读
下载排行
本周
- 1电子电路原理第七版PDF电子教材免费下载
- 0.00 MB | 1490次下载 | 免费
- 2单片机典型实例介绍
- 18.19 MB | 93次下载 | 1 积分
- 3S7-200PLC编程实例详细资料
- 1.17 MB | 27次下载 | 1 积分
- 4笔记本电脑主板的元件识别和讲解说明
- 4.28 MB | 18次下载 | 4 积分
- 5开关电源原理及各功能电路详解
- 0.38 MB | 10次下载 | 免费
- 6基于AT89C2051/4051单片机编程器的实验
- 0.11 MB | 4次下载 | 免费
- 7基于单片机和 SG3525的程控开关电源设计
- 0.23 MB | 3次下载 | 免费
- 8基于单片机的红外风扇遥控
- 0.23 MB | 3次下载 | 免费
本月
- 1OrCAD10.5下载OrCAD10.5中文版软件
- 0.00 MB | 234313次下载 | 免费
- 2PADS 9.0 2009最新版 -下载
- 0.00 MB | 66304次下载 | 免费
- 3protel99下载protel99软件下载(中文版)
- 0.00 MB | 51209次下载 | 免费
- 4LabView 8.0 专业版下载 (3CD完整版)
- 0.00 MB | 51043次下载 | 免费
- 5555集成电路应用800例(新编版)
- 0.00 MB | 33562次下载 | 免费
- 6接口电路图大全
- 未知 | 30320次下载 | 免费
- 7Multisim 10下载Multisim 10 中文版
- 0.00 MB | 28588次下载 | 免费
- 8开关电源设计实例指南
- 未知 | 21539次下载 | 免费
总榜
- 1matlab软件下载入口
- 未知 | 935053次下载 | 免费
- 2protel99se软件下载(可英文版转中文版)
- 78.1 MB | 537791次下载 | 免费
- 3MATLAB 7.1 下载 (含软件介绍)
- 未知 | 420026次下载 | 免费
- 4OrCAD10.5下载OrCAD10.5中文版软件
- 0.00 MB | 234313次下载 | 免费
- 5Altium DXP2002下载入口
- 未知 | 233046次下载 | 免费
- 6电路仿真软件multisim 10.0免费下载
- 340992 | 191183次下载 | 免费
- 7十天学会AVR单片机与C语言视频教程 下载
- 158M | 183277次下载 | 免费
- 8proe5.0野火版下载(中文版免费下载)
- 未知 | 138039次下载 | 免费
评论
查看更多