

一种基于自注意力机制的自融合代码理解方法.pdf
努力****骞北
在线预览结束,喜欢就下载吧,查找使用更方便
相关资料
一种基于自注意力机制的自融合代码理解方法.pdf
本发明提出了一种基于自注意力机制的路径融合的代码理解方法,用于将Java源代码文件理解为低维稠密语义向量,并基于该向量表示代码中的语义与语法信息。同时,本方法基于代码方法名称预测与代码文本相似度评估两个方面,对代码理解方法进行训练以及评估。该发明的主要创新在于(1)基于自注意力机制,提出了一种全新的AST路径解析方法;(2)提出了一种基于循环神经网络的源代码理解方法,获得更为全面准确的语义信息;(3)提出了更为合理的源代码翻译模型与相似度评估模型,并超越了现有方法。
一种基于自注意力机制的推荐方法.pdf
本发明涉及物品推荐领域,其公开了一种基于自注意力机制的推荐方法,提高推荐模型的训练效率和个性化推荐的效果。该方法包括以下步骤:首先采集用户历史交互信息并进行预处理,形成训练样本集;然后设计推荐模型,将训练样本集作为推荐模型的输入,采用平方损失函数作为优化目标,对推荐模型进行训练;最后通过训练好的推荐模型计算得到用户与待推荐项目的交互概率,根据交互概率的大小进行排序,生成用户的推荐候选集。
融合多头自注意力机制的中文分类方法.pptx
汇报人:目录PARTONEPARTTWO传统分类方法深度学习在分类中的应用PARTTHREE自注意力机制介绍多头自注意力机制原理多头自注意力机制的优势PARTFOUR模型结构训练过程参数优化PARTFIVE数据集介绍实验设置实验结果分析与其他方法的比较PARTSIX应用场景介绍优势分析对中文分类的贡献PARTSEVEN未来研究方向面临的挑战与问题对中文分类的影响THANKYOU
一种基于自注意力机制的鲁棒性代码摘要生成方法.pdf
本发明公开了一种基于自注意力机制的鲁棒性代码摘要生成方法,首先是编程社区高质量的代码及其描述语料对(查询描述的文本,回复代码的文本)的抽取;然后是代码及其描述语料对的冗余信息滤除;接着将代码对应的查询描述文本转换成陈述性语句;最后是基于自注意力机制序列模型的代码摘要生成。本发明能够有效的去除冗余信息和噪声内容,并且生成的摘要在自动评测和人工评测准确率上均有提高,评测结果优于现有的基线方法。
融合定向自注意机制的代码完成方法.docx
融合定向自注意机制的代码完成方法Title:FusionofDirectionalSelf-AttentionMechanism:AComprehensiveStudyAbstract:Self-attentionmechanismshavegainedsignificantattentioninnaturallanguageprocessingtasksduetotheirabilitytocapturecontextualdependencieseffectively.However,standard