电子发烧友App
创作
发文章
发帖 
提问 
发资料
发视频资料介绍
针对计算机对视频进行自动标注和描述准确率不高的问题，提出一种基于多特征融合的深度视频自然语言描述的方法。该方法提取视频帧序列的空间特征、运动特征、视频特征，进行特征的融合，使用融合的特征训练基于长短期记忆（ LSTM）的自然语言描述模型。通过不同的特征组合训练多个自然语言描述模型，在测试时再进行后期融合，即先选择一个模型获取当前输入的多个可能的输出，再使用其他模型计算当前输出的概率，对这些输出的概率进行加权求和，取概率最高的作为输出。此方法中的特征融合的方法包括前期融合：特征的拼接、不同特征对齐加权求和；后期融合：不同特征模型输出的概率的加权融合，使用前期融合的特征对已生成的LSTM模型进行微调。在标准测试集MSVD上进行实验，结果表明：融合不同类型的特征方法能够获得更高评测分值的提升；相同类型的特征融合的评测结果不会高于单个特征的分值；使用特征对预训练好的模型进行微调的方法效果较差。其中使用前期融合与后期融合相结合的方法生成的视频自然语言描述得到的METEOR评测分值为0.302，比目前查到的最高值高1. 34%，表明该方法可以提升视频自动描述的准确性。
自然语言
加入交流群
扫码添加小助手
加入工程师交流群
下载该资料的人也在下载
下载该资料的人还在阅读
更多 >
- PyTorch教程16.7之自然语言推理：微调BERT
- PyTorch教程16.5之自然语言推理：使用注意力
- 自然语言处理在社会传播的应用综述 14次下载
- 基于自然语言功能描述的代码查询方法 21次下载
- 基于模板、检索和深度学习的图像描述生成方法 12次下载
- 基于深度学习的自然语言处理对抗样本模型 39次下载
- 基于自然语言生成多表SQL语句模板填充的方法 40次下载
- 一种注意力增强的自然语言推理模型aESIM 9次下载
- 自然语言处理的图像文本建模相关研究及分析 27次下载
- 实现强人工智能自然语言理解有哪些思路？ 9次下载
- 强人工智能自然语言理解方面的13个思路详细资料免费下载 11次下载
- 基于Hadoop集群的自然语言处理平台实现 0次下载
- 组合参考物框架下空间关系自然语言描述方法 17次下载
- 基于自然语言处理的知识检索算法研究 1次下载
- 空间信息自然语言查询接口的研究与应用
- 用于自然语言处理的神经网络有哪些 3.2k次阅读
- 什么是自然语言处理 (NLP) 3.7k次阅读
- 自然语言处理技术的原理的应用 1.7k次阅读
- 神经网络在自然语言处理中的应用 1.3k次阅读
- 一种基于自然语言的轨迹修正方法 1.2k次阅读
- 基于用于自然语言生成的“语境调优”技术 1.7k次阅读
- 如何开始使用PyTorch进行自然语言处理 3.1k次阅读
- 自然语言处理是什么？有什么用？ 6.9k次阅读
- 多个视角对自然语言处理领域进行全面梳理 4.3k次阅读
- 自然语言处理的ELMO使用 3.9k次阅读
- 自然语言处理有明显和知识图谱结合的趋势 6.4k次阅读
- 自然语言处理研究的基本问题及发展趋势 9.3k次阅读
- 自然语言处理的优点有哪些_自然语言处理的5大优势 3.1w次阅读
- RNN在自然语言处理中的应用 6.1k次阅读
- 从语言学到深度学习NLP，一文概述自然语言处理 7.1k次阅读
上传资料赚积分下载排行
本周
- 1MDD品牌三极管MMBT3906数据手册
- 2.33 MB | 次下载 | 免费
- 2MDD品牌三极管S9012数据手册
- 2.62 MB | 次下载 | 免费
- 3联想flex2-14D/15D说明书
- 4.92 MB | 次下载 | 免费
- 4收音环绕扩音机 AVR-1507手册
- 2.50 MB | 次下载 | 免费
- 524Pin Type-C连接器设计报告
- 1.06 MB | 次下载 | 免费
- 6新一代网络可视化（NPB 2.0）
- 3.40 MB | 次下载 | 免费
- 7MS1000TA 超声波测量模拟前端芯片技术手册
- 0.60 MB | 次下载 | 免费
- 8MS1022高精度时间测量(TDC)电路数据手册
- 1.81 MB | 次下载 | 免费
本月
- 1爱华AIWA HS-J202维修手册
- 3.34 MB | 37次下载 | 免费
- 2PC5502负载均流控制电路数据手册
- 1.63 MB | 23次下载 | 免费
- 3NB-IoT芯片厂商的资料说明
- 0.31 MB | 22次下载 | 1 积分
- 4H110主板CPU PWM芯片ISL95858HRZ-T核心供电电路图资料
- 0.63 MB | 6次下载 | 1 积分
- 5UWB653Pro USB口测距通信定位模块规格书
- 838.47 KB | 5次下载 | 免费
- 6技嘉H110主板IT8628E_BX IO电路图资料
- 2.61 MB | 4次下载 | 1 积分
- 7苏泊尔DCL6907(即CHK-S007)单芯片电磁炉原理图资料
- 0.04 MB | 4次下载 | 1 积分
- 8100W准谐振反激式恒流电源电路图资料
- 0.09 MB | 2次下载 | 1 积分
总榜
- 1matlab软件下载入口
- 未知 | 935137次下载 | 10 积分
- 2开源硬件-PMP21529.1-4 开关降压/升压双向直流/直流转换器 PCB layout 设计
- 1.48MB | 420064次下载 | 10 积分
- 3Altium DXP2002下载入口
- 未知 | 233089次下载 | 10 积分
- 4电路仿真软件multisim 10.0免费下载
- 340992 | 191439次下载 | 10 积分
- 5十天学会AVR单片机与C语言视频教程 下载
- 158M | 183353次下载 | 10 积分
- 6labview8.5下载
- 未知 | 81602次下载 | 10 积分
- 7Keil工具MDK-Arm免费下载
- 0.02 MB | 73822次下载 | 10 积分
- 8LabVIEW 8.6下载
- 未知 | 65991次下载 | 10 积分
工商网监
评论