A Question-answering Based Framework for Relation Extraction Validation

  • 来源:arXiv:2104.02934v1
  • 机构:复旦 肖仰华
  • 动机:validate and correct the results generated by the existing relation extraction models
  • 做法:比较直观,看图即可
    • 其中计算 QA score 是相乘再开跟,这样还能保证结果在 [0, 1] 之间。
    • score update 用了两种方法
      • 只用 QA 得到分数最高和最低的几个结果作为验证,对于高分和低分,分别重新计算 RE 的分数
      • 只检测 RE 结果里分数最高的几个,还是用这两个公式
  • 实验:这个 validation 的方法在 NYT 数据集上,用 CNN PCNN 这种传统方法,可以从 30 多提升四个点(为什么不在 sota 基础上加呢?甚至 BERT 也行哇?

发表评论