主题: Realistic Re-evaluation of Knowledge Graph Completion Methods: An Experimental Study

摘要: 在使用嵌入模型进行知识图谱补全(尤其是用于链接预测的任务)的活跃研究领域中,大多数先前的研究在评估此类模型时使用了两个基准数据集FB15k和WN18。在此类研究中,这些数据集和其他数据集中的大多数三元组属于反向和重复关系,由于语义重复,相关性或数据不完整,这些关系表现出很高的数据冗余性。这是过度数据泄漏的情况-使用需要训练模型的函数进行训练,否则需要将其用于实际预测时才可用。也存在笛卡尔积关系,由适用主题和客体的笛卡尔积形成的每个三元组都是真实的事实。关于上述关系的链接预测很容易,并且可以使用简单规则而不是复杂的嵌入模型以更高的精度来实现。这些模型的一个基本的缺陷是,在给定此类数据的情况下,链接预测方案在现实世界中不存在。本文是第一个系统研究,其主要目的是评估去除不现实的三元组时嵌入模型的真实有效性。我们的实验结果表明,这些模型比我们以前所认为的要精确得多。它们的低精度使链接预测成为一项没有真正有效的自动化解决方案的任务。

成为VIP会员查看完整内容
32

相关内容

ACM SIGMOD数据管理国际会议(Special Interest Group on Management Of Data.)是由美国计算机协会(ACM)数据管理专业委员会(SIGMOD)发起、在数据库领域具有最高学术地位的国际性学术会议。会议的目的是在全球范围内为数据库领域的研究者、开发者以及用户提供一个探索最新学术思想和研究方法、交流开发技巧、工具以及经验的平台,引导和促进数据库学科的发展。
【AAAI2020知识图谱论文概述】Knowledge Graphs @ AAAI 2020
专知会员服务
132+阅读 · 2020年2月13日
17篇知识图谱Knowledge Graphs论文 @AAAI2020
专知会员服务
167+阅读 · 2020年2月13日
论文浅尝 | 重新实验评估知识图谱补全方法
开放知识图谱
26+阅读 · 2020年3月29日
【论文笔记】Graph U-Nets
专知
76+阅读 · 2019年11月25日
【论文笔记】基于BERT的知识图谱补全
专知
116+阅读 · 2019年9月15日
知识图谱嵌入(KGE):方法和应用的综述
专知
53+阅读 · 2019年8月25日
ICLR 2019 | 基于复杂空间关系旋转的知识表示方法
PaperWeekly
15+阅读 · 2019年7月29日
论文浅尝 | 基于深度序列模型的知识图谱补全
开放知识图谱
29+阅读 · 2019年5月19日
论文浅尝 | Knowledge Vault: 全网规模的知识概率融合方法
开放知识图谱
8+阅读 · 2019年3月11日
论文浅尝 | Hike: A Hybrid Human-Machine Method for Entity Alignment
开放知识图谱
4+阅读 · 2017年12月30日
Arxiv
99+阅读 · 2020年3月4日
Arxiv
20+阅读 · 2019年9月7日
Arxiv
4+阅读 · 2018年11月6日
Arxiv
7+阅读 · 2018年3月21日
VIP会员
相关VIP内容
【AAAI2020知识图谱论文概述】Knowledge Graphs @ AAAI 2020
专知会员服务
132+阅读 · 2020年2月13日
17篇知识图谱Knowledge Graphs论文 @AAAI2020
专知会员服务
167+阅读 · 2020年2月13日
相关资讯
论文浅尝 | 重新实验评估知识图谱补全方法
开放知识图谱
26+阅读 · 2020年3月29日
【论文笔记】Graph U-Nets
专知
76+阅读 · 2019年11月25日
【论文笔记】基于BERT的知识图谱补全
专知
116+阅读 · 2019年9月15日
知识图谱嵌入(KGE):方法和应用的综述
专知
53+阅读 · 2019年8月25日
ICLR 2019 | 基于复杂空间关系旋转的知识表示方法
PaperWeekly
15+阅读 · 2019年7月29日
论文浅尝 | 基于深度序列模型的知识图谱补全
开放知识图谱
29+阅读 · 2019年5月19日
论文浅尝 | Knowledge Vault: 全网规模的知识概率融合方法
开放知识图谱
8+阅读 · 2019年3月11日
论文浅尝 | Hike: A Hybrid Human-Machine Method for Entity Alignment
开放知识图谱
4+阅读 · 2017年12月30日
微信扫码咨询专知VIP会员