• 论文
主办单位:煤炭科学研究总院有限公司、中国煤炭学会学术期刊工作委员会
基于多跳注意力的实体关系联合抽取方法及应用研究
  • 作者

    王红吴燕婷

  • 单位

    中国民航大学计算机科学与技术学院

  • 摘要

    针对现有方法中缺乏实体之间潜在的隐性关系挖掘和头实体信息提取不够充分的问题,提出了一种头实体增强的多跳注意力隐性关系联合挖掘模型Multi-Air(multi-hop attention implicit relations joint mining method).该方法首先使用BERT(bidirectional encoder representations from transformers)模型对输入句子进行特征编码并通过Sigmoid函数预测出头实体的位置,然后通过双向门控循环单元(bidirectional gated recurrent unit, Bi-GRU)对头实体进行特征增强。在充分利用头实体的深层信息后,输出多关系尾实体可能的开始和结束位置,最后将输出的尾实体又作为下一跳的头实体,迭代执行多跳尾实体预测并利用注意力权重动态调节学习到的多跳实体和关系特征进而实现文本中潜在的隐含关系三元组挖掘。Multi-Air模型在公开数据集NYT和民航突发事件数据集上都取得了较好的提升。

  • 关键词

    隐性关系注意力机制民航突发事件联合挖掘双向门控循环单元特征增强

  • 基金项目(Foundation)
    国家自然科学基金资助项目(U1633110);空中交通管理系统与技术国家重点实验室开放基金资助项目(SKLATM201902);
  • 文章目录

    1 Multi-Air多跳注意力模型
    1.1 BG-CasRel模块
    1.1.1 编码层
    1.1.2 头实体标注层
    1.1.3 头实体特征增强层
    1.1.4 尾实体迭代标注层
    1.2 多跳注意力模块
    1.3 损失函数
    1.4 实验效果分析
    1.4.1 实验数据与参数设置
    1.4.2 评价指标与实验结果
    2 Multi-Air在民航突发事件中的应用
    2.1 数据来源
    2.2 实验结果与分析
    3 结束语

  • 引用格式
    王红,吴燕婷.基于多跳注意力的实体关系联合抽取方法及应用研究[J].太原理工大学学报,2022,53(01):63-70.DOI:10.16355/j.cnki.issn1007-9432tyut.2022.01.008.
  • 相关专题
相关问题

主办单位:煤炭科学研究总院有限公司 中国煤炭学会学术期刊工作委员会

©版权所有2015 煤炭科学研究总院有限公司 地址:北京市朝阳区和平里青年沟东路煤炭大厦 邮编:100013
京ICP备05086979号-16  技术支持:云智互联