AI智慧搜索和非结构化数据分析趋势分析报告

AI智慧搜索和非构造化数据分析趋势分析汇报大多数组织都很好地运用了构造化数据(表格、电子表格等)，不过诸多未开发的业务关键的见解都在非构造化数据中。80%组织正在意识到他们80%的内容是非构造化的。企业中近80%的数据是非构造化的——工作描述、简历、电子邮件、文本文档、研究和法律汇报、录音、视频、图片和社交媒体帖子。虽然这些数据过去非常难以处理和使用，但神经网络、搜索引擎和机器学习的新技术发展，正在扩展我们使用非构造化内容进行企业知识发现、搜索、业务洞察和行动的能力。搜索加人工智能正在处理现实世界的问题想想你智能手机上的应用程序——Siri,Alexa,Shazam,Lyft等等。您也许没故意识到这一点，但它们都是由一大批搜索引擎在幕后工作提供动力的。这些应用程序将搜索与人工智能技术(如自然语言处理、神经网络和机器学习)相结合，可以处理你的语音命令或文本输入，搜索不一样的数据源，并返回所需的答案，所有这些都是实时且非常精确的。在企业内部，这些技术可以将员工与他们所需要的内容和答案联络起来，而不管答案在哪里——在文档、财务系统、人力资源系统或政策和程序数据库中。搜索已经从寻找文献发展到提供答案到，我们但愿看到更多的人工智能搜索和基于搜索的分析应用支持企业。下面是搜索和非构造化数据分析领域中值得关注的五大趋势。1.神经网络和搜索引擎埃森哲的《峡湾趋势》显示，神经网络是支持创新型企业人工智能系统的关键技术，它可以通过模式识别“学习”执行任务。通过度析大量的数字数据，神经网络可以学会识别照片，识别语音命令，并对自然语言搜索查询作出反应。神经网络超越了简朴的关键词搜索，使搜索引擎可以理解顾客的意思和意图，从而提供最个性化、最有关的成果。最新的神经网络(BERT及其衍生产品)可以创立一种“语义空间”——对企业内容的抽象理解——可以用于:深入搜索:识别具有相似含义的句子，而不是仅仅包括相似的搜索关键词(如“企业费用政策”和“商务旅行报销”)更好的分类:为更好的导航或管理对内容进行分类(例如，合规性、筛选、补救等)提问/回答:从文献中提取事实，回答与原始材料有关的详细问题(例如:“美国上季度的收入是多少?”)这些神经网络已经被用于高度管理的内容，如知识库文章、政策和程序、文档、测试原则等等。在接下来的几年里，我们但愿看到更多的组织应用神经网络来更好地理解他们的文档内容和顾客查询，提供高度有关的、基于上下文的答案。2.语义搜索语义搜索扩展到神经网络，处理范围广泛的企业顾客的查询和祈求，并可以直接从业务系统得到即时的回答。这使得语义搜索成为顾客小区所需的文档、问题、事实和业务数据的单一访问点。语义搜索的目的是为顾客的问题提供精确、精确、即时的答案，包括短尾和长尾。语义搜索包括四个部分:理解查询中的实体(业务对象)理解查询的目的将祈求映射到应答代理获取答案并将其汇报给最终顾客语义搜索已经使搜索引擎从基于关键词显示成果列表发展到理解这些词的意图并显示顾客真正需要的目的内容。假如顾客正在搜索“Q1营收”，他/她也许不是在寻找包括“Q1营收”的成果列表，而是一种迅速响应，例如“1.23亿美元”。“更多的是什么?也许收入数字甚至可以按市场细分进行细分。许多原因支持语义搜索的兴起:数据仓库、数据湖和内容摄入技术的增长正在打破数据竖井，使有价值的内容在组织之间随时可用。为实现业务应用程序语义搜索而设计的新工具的出现，协助组织处理了集成挑战，并极大地减少了实现成本。新的机器学习措施，如先进的神经网络，容许语义搜索引擎更好地理解顾客的搜索祈求，分析查询中的对象，并将查询映射到意图和确定回答代理。请阅读我的短文，深入理解语义搜索和示例业务用例。3.文档的理解当计算机阅读文档时，它们不会注意文体细节，例如某个单词在页面上的位置，或者它与其他单词的关系。不过表达元素——定位、颜色、字体、图形元素等等——包括了文本自身无法传达的重要语义信息。作为人类，我们无需思索就能理解这一切。例如，我们懂得，字体大小可以表达重要性，标题、段落或图像的位置可以影响这些项目在文档中的意义。然而，由于计算机目前忽视了大多数这些表达元素，组织无法从其文档中提取实质性的价值。人工智能正在通过检查这些体现元素，使从非构造化内容中提取洞察力成为也许。可以对智能文档处理引擎进行培训，使其可以阅读这种表达性信息并向最终顾客交付洞察力。想象一下可以运用文档理解的多种企业用例:自动PDF发票处理:提取表，总计，名称/值对从纸质流程到电子流程的转变:药物生产从批记录到电子批记录;或从pdf文献到试验室信息管理系统记录试验室测试程序PowerPoint内容搜索:搜索幻灯片，突出显示幻灯片内的搜索，提取标题，删除页脚搜索地球科学汇报:找到测井、地震剖面、地图和其他元素，并将这些项目与全球的地理位置联络起来自动邮件路由和表格填写:减少邮件项目的处理时间，包括蜗牛邮件和电子邮件工程图纸的自动转换:转换为材料清单，并最终转换为连接图和流程图方略和过程文档搜索:搜索和匹配各个段落，或从文本中提取直接答案和更多的阅读更多有关我们怎样为企业构建这些文档理解应用程序的内容。4.图像和语音搜索埃森哲数字消费者调查发现，大概二分之一的受访者已经在使用数字语音助手(DVA)，14%的人计划在未来12个月内购置。虚拟助手——Siri、Alexa、google助理等等——正变得无处不在。在人工智能技术的推进下，它们使人类和计算机在平常互动中可以对话。它们带来了更深入的自然语言理解，不仅增强了搜索功能，并且提供了一种全新的查找信息的方式。语音助理已经进入企业，使客户和员工可以更轻易地与企业数据进行交互。例如，员工目前可以问“我们在欧洲的数据科学专家是谁?”或“我怎样预订巴黎办公室的会议室?”从外部来看，语音和图像搜索功能超越了老式的文本搜索，为客户和合作伙伴提供了在企业网站上查找信息的更简朴的措施。“到，那些重新设计网站以支持视觉和语音搜索的初期采用率品牌将增长30%的数字商务收入。这些工具和语义搜索(上面讨论过)之间有天然的协同作用。在许多状况下，聊天机器人可以被删除——后端可以完全由一种强健而全面的语义搜索引擎来处理。5.知识图谱根据我们去年的预测，知识图的发展将继续推进整个企业更智能的搜索交互。将组织的既有数据聚合到一种存储库(一般是企业数据湖)是一种起点。不过我们怎样运用这些数据呢?我们需要给它添加上下文、关系和意义。从不一样企业功能的片段数据记录中，自然语言理解(NLU)算法可以创立一种互相连接的信息网络，表明数据记录是怎样互相连接的，从而创立企业知识图。当顾客提出问题时，搜索引擎和问答系统可以立即抓取有关信息的快照，并提供有关的见解。请注意，知识图可以跨越广泛的复杂性:适度互相联络:雇员和雇员信息业务单位和重要团体组员办公室的位置产品和支持人员物理平面机械位置丰富的互相关联的:组织层次构造办公室走廊、楼梯和会议室位置机器部件及其邻近性/互相连接性产品类别、血统及配套配件物理设备和机器的互相连接客户、联络人、销售人员和购置的产品方略和过程约束、条件和规定伴随新的数据点和深刻的关系的无限增长，知识图将会不停增长。除了搜索展望和未来几年，我们估计这五项发展将深入发展，并在企业内部得到更广泛的运用。重点将放在怎样应用这