Conversational AI and Question-Answering systems (QASs) for knowledge graphs (KGs) are both emerging research areas: they empower users with natural language interfaces for extracting information easily and effectively. Conversational AI simulates conversations with humans; however, it is limited by the data captured in the training datasets. In contrast, QASs retrieve the most recent information from a KG by understanding and translating the natural language question into a formal query supported by the database engine. In this paper, we present a comprehensive study of the characteristics of the existing alternatives towards combining both worlds into novel KG chatbots. Our framework compares two representative conversational models, ChatGPT and Galactica, against KGQAN, the current state-of-the-art QAS. We conduct a thorough evaluation using four real KGs across various application domains to identify the current limitations of each category of systems. Based on our findings, we propose open research opportunities to empower QASs with chatbot capabilities for KGs. All benchmarks and all raw results are available1 for further analysis.


翻译:用于知识图的相互交流的AI和问题解答系统(QAS)都是新出现的研究领域:它们赋予用户以自然语言界面的功能,以方便和有效地提取信息;相互交流的AI模拟与人类的对话;然而,它受培训数据集所采集的数据的限制;相比之下,质量AS通过理解和将自然语言问题转化为数据库引擎支持的正式查询,从一个知识图(KG)中检索最新信息。我们在本文件中全面研究了将两个世界合并成新型KG聊天机器人的现有替代方法的特点。我们的框架比较了两种有代表性的谈话模型,即ChatGPT和Galactica, 与目前最先进的QAS的KGQAN。我们利用不同应用领域的4个真正的KGs进行彻底评估,以确定每一类系统目前的局限性。根据我们的调查结果,我们建议开放研究机会,使QAS具备KGs的聊天博特能力。所有基准和所有原始结果都可供进一步分析。

2
下载
关闭预览

相关内容

通过学习、实践或探索所获得的认识、判断或技能。
强化学习最新教程,17页pdf
专知会员服务
182+阅读 · 2019年10月11日
【哈佛大学商学院课程Fall 2019】机器学习可解释性
专知会员服务
105+阅读 · 2019年10月9日
征稿 | International Joint Conference on Knowledge Graphs (IJCKG)
开放知识图谱
2+阅读 · 2022年5月20日
Hierarchically Structured Meta-learning
CreateAMind
27+阅读 · 2019年5月22日
Transferring Knowledge across Learning Processes
CreateAMind
29+阅读 · 2019年5月18日
A Technical Overview of AI & ML in 2018 & Trends for 2019
待字闺中
18+阅读 · 2018年12月24日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
1+阅读 · 2011年12月31日
Arxiv
20+阅读 · 2021年9月22日
Arxiv
102+阅读 · 2020年3月4日
VIP会员
相关基金
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
1+阅读 · 2011年12月31日
Top
微信扫码咨询专知VIP会员