基于知识图谱的复杂问题推理问答

|基于知识图谱的复杂问题推理问答史佳欣华为云高级研究员目录CONTENT背景介绍跨领域迁移构造推理过程数据隐式学习推理过程||背景介绍答案:1984年12月30日|复杂问题：|实体链接实体链接关系分类关系分类mention：中国predicate：首都属于国籍长城首都 国宝。○熊猫属于国籍长城首都中国姚明北京|语义解析法信息检索法问题AddressingValueAddressingValueAggregateAggregateA>ADong,etal.LanguagetoLogicalFormwithNeuralAttentMiller,etal.Key-ValueMemoryNetworksforDirectlyReadingSun,etal.PullNet:OpenDomainQuestion语义解析法优势:•各种问题都能处理•可解释的推理过程劣势:•需要推理过程的标注数据来训练解析器信息检索法•只需要(问题-答案)标注数据就可以训练模型•端到端预测结果劣势•解决问题的能力有限•中间过程不可解释，难以控制|针对语义解析类方法，我们主要探讨3个问题：||构造推理过程数据SelectSelect|•强类型语言，包含7种知识类型•14个知识图谱元素操作+13个查询操作|•强类型语言，包含7种知识类型•14个知识图谱元素操作+13个查询操作|•注重过程，透明的中间结果•符合人类思维，容易理解，方便人机交互•操作具有良好的可组合性•可以面向多种知识来源|?????????||转写一：最终规模：约12万条数据（五元组）首个包含自然语言、全知识类型、多种逻辑形式的大规模数据集|||跨领域迁移所属行业公司AI行业所属行业公司AI行业AI行业所属行业公司2021年融资最多2021年融资最多|AI行业所属行业公司2021年融资最多知识图谱一：AI行业哪家公司2021年融资最多？|跨领域迁移——骨架解析器|相似度计算相似度计算KG概念集合A股股票行业|阶段一领域一进行有监督学习骨架解析器骨架解析器参数解析器阶段二领域二进行强化学习xx医院正确à正向激励采样执行错误à负向激励|领域一•KG：Wikidata子集领域二•KG：Freebase|阶段一+阶段二：|?可以直接学出吗推理过程||隐式学习推理过程考虑多跳类问题：xx公司的董事长投资了哪家公司|激活向量：每一步关注的实体激活矩阵：每一步关注的关系以向量矩阵乘法建模实体转移at=at-1wta=a-1xwijACCBBat-1=100ACCBBwt=ACB->C|以链式乘法建模多跳转移每一步以注意力机制关注问题a1=aow1a2=a1w2a3=a2w3|仅需对最终预测的实体施加loss，即可自动学出整个推理过程首次在MetaQA数据集上实现上100%准确率•迁移骨架解析器和参数解析器，第一阶段有监督学习，第|ProgramsforComplexQuestionAnsweringoverKnowledgeBase.ACL2022.overKnowledgeBases.AC