知识图谱的应用场景与技术挑战
图片来源@视觉中国
文丨王诗强
互联网信息的爆炸式增长，具有大规模、多元化、组织结构松散等特点，如何有效获取信息和知识面临巨大挑战。
近年来兴起的“知识图谱”，渐渐成为一种新颖的管理海量信息的方式，受到各大互联网公司青睐，并在不知不觉中被广泛应用于搜索、电商、社交等各个领域。
除此之外，该技术还被各大金融机构以及人工智能公司关注，开始在金融反欺诈、安防等新的领域进行尝试应用。但是，知识图谱技术依然不够成熟，从第三方获取技术服务费等商业化依然处于探索阶段。
一、知识图谱基本概念
关于知识图谱定义，复旦大学教授肖仰华在其著作《知识图谱》中这么解释：“作为一种知识表示形式，知识图谱是一种大规模语义网络，包括实体、概念及其之间的各种语义关系。”如下图，柏拉图就是一个实体，他是一个哲学家（概念）。
冰鉴科技知识图谱业务负责人认为：“知识图谱核心价值在于如何沉淀知识。图谱开始建立的时候，都是关系图谱，通过大量的模型，借助于图谱模型的高度解释性的优势，构建和形成很多隐性关系和实体标签，最后建设成为知识图谱。在关系图谱到知识图谱的建设过程中，业务专家高度参与，利用知识图谱的探索式数据分析能力，自助构建高度解释性的业务知识模型，形成知识沉淀的迭代和高度分享。”
知识图谱是典型的大数据时代产物，具有规模巨大、质量精良、结构友好等优点。
2017年，我国科学目录调整时，首次出现了知识图谱学科，教育部对知识图谱这一学科的定位是“大规模知识工程”。
二、知识图谱发展与应用
知识图谱早期主要用于搜索结果优化，随着电商、互联网金融等兴起，应用领域不断增加，包括智能推荐、智能客服、金融风控、安全与安防等都在积极探索。
1、搜索优化
知识图谱的诞生最早可以追溯到2010年前后，主要是为了解决搜索引擎用户体验问题。
搜索领域主要面临两方面问题：一方面，搜索需求和搜索结果往往难以匹配，经常有“搜”非所问的情况；另一方面，搜索结果编排无序，显示杂乱。
2010年，微软开始构建MicrosoftSatori知识图谱来增强Bing搜索能力；2012年5月，Google公司为了支撑其语义搜索推出KnowledgeGraph，目前已成为全球最大的知识图谱。2012年11月22日，搜狗知立方上线，成为国内首个搜索引擎“中文知识图谱”。差不多同一时间，百度知识图谱被立项。2013 年，Facebook发布OpenGraph应用于社交网络智能搜索。
早期各大搜索平台主要依赖“关键字搜索”技术，返回给用户包含关键字的网页列表，用户需要进一步浏览这些网页并且过滤掉大量无用信息才能找到真正想要的结果，用户更希望能够“直接得到答案”。利用知识图谱技术可以直接给出用户想要的搜索结果，而不再是各类链接。如下图，搜索“上海有多少人？”360搜索直接展示出国家统计局的数据，用户直接将鼠标移动到相应年份，可以快速查看各年数据。
随后，知识图谱引入到电商搜索领域。2015年，阿里巴巴开始构建电商领域知识图谱——认知图谱；2016年Amazon也紧随其后开始构建知识图谱。2018年5月，美团点评NLP中心开始构建大规模的餐饮娱乐知识图谱——美团大脑。
在搜索领域，知识图谱能够将用户所提交的查询词理解成实体或者概念，通过实体或者概念匹配为用户返回其可能关心的全部网页内容。搜索引擎中知识图谱的搜索过程如下：
知识图谱用文本和知识融合的阅读理解模型，使搜索结果更理解客户需求。
对于电商平台来说，交易量和客户活跃度也是其核心竞争力，而客户一般都是通过搜索获得想要的商品，越精准的搜索结果，客户使用越多。
因此，百度、搜狗、阿里巴巴、美团、腾讯等不断摸索，纷纷尝试构建自己的知识图谱平台。
2、智能推荐
除了优化搜索结果，知识图谱还可以帮助电商以及社交平台解决一些智能推荐问题。例如，当前一些中小平台在智能推荐方面最大的问题是“买了啥，推荐啥”或者“推荐的商品与客户无关联”。推荐商品缺乏新颖性，导致转化效果一般。
知识图谱可以帮助电商平台跳出这种简单的推荐逻辑，使得推荐结果更加智能化，促进用户购买。
备注：左图展示了实体链接如何应用于智能问答问题推荐，问题通过SLU处理之后会得到其意图和主实体，然后借助实体推荐得到相关的实体，相关实体被用来构建相关的问题，比如说”武汉大学周边好吃的？“，识别到其主实体为”武汉大学“、核心意图为”美食“，以此推荐实体相关的问题，比如说”华中科技大学周边有什么好吃的？“，”清华大学周边有什么好吃的？“，”武汉科技大学周边有什么好吃的？“。同时实现了推荐意图相关的问题，比如说”武汉大学周边有什么好玩的？“，”武汉大学周边有什么景点？“，”武汉大学周边有什么酒店？“等等。
备注：左图展示了实体链接如何应用于智能问答问题推荐，问题通过SLU处理之后会得到其意图和主实体，然后借助实体推荐得到相关的实体，相关实体被用来构建相关的问题，比如说”武汉大学周边好吃的？“，识别到其主实体为”武汉大学“、核心意图为”美食“，以此推荐实体相关的问题，比如说”华中科技大学周边有什么好吃的？“，”清华大学周边有什么好吃的？“，”武汉科技大学周边有什么好吃的？“。同时实现了推荐意图相关的问题，比如说”武汉大学周边有什么好玩的？“，”武汉大学周边有什么景点？“，”武汉大学周边有什么酒店？“等等。右图展示了实体推荐在图谱自动化构建平台上的应用，当用户搜索一个实体的时候，平台会为其推荐相关的实体。
3、金融风控
近些年，消费金融和小微企业贷兴起后，银行以及其他持牌金融公司、助贷机构、人工智能公司等开始将知识图谱应用于风险控制，特别是识别团伙欺诈。
知识图谱的推理能力和可解释性，在金融场景中具有天然的优势。
艾瑞咨询年初发布的《2020年中国面向人工智能“新基建”的知识图谱行业研究报告》指出，随着近些年金融数据的爆发式增长，传统风控系统逐渐力有不逮，而应用机器学习算法和知识图谱的智能风控系统在风险识别能力和大规模运算方面具有突出优势，逐渐成为金融领域风控反欺诈的主要手段。
在金融领域，知识图谱可以应用于小微企业信贷、消费信贷、信用卡申请等反欺诈业务，还可以用来识别会计造假。
基本原理简单理解是：“物以类聚，人以群分。”
”如“同一个WiFi下多个企业借款客户”，或者“同一个设备注册多个企业账号申请借款”，均有可能与欺诈相关 。
因此，信贷欺诈的识别问题可以转化为客户知识图谱挖掘或社交网络分析问题。即把企业工商信息、新闻动态、股东关系、股权变更、司法诉讼等等整合到反欺诈知识图谱里，经过分析和预测，挖掘识别欺诈案件，如利用壳公司贷款等。
据冰鉴科技知识图谱负责人介绍，目前冰鉴正在与银行合作，构建不同条件下，不同场景的知识图谱模型，给知识图谱的实体关系打上标签或者挖掘新的关系，以便更好的应用于金融风控。
图7：图特征整体框架设计
资料来源：冰鉴科技研究院
再从常见的担保业务来看，担保网络可简化为规模较小、相对独立的担保群。担保群间担保关联稀疏；担保群内部联系紧密，担保圈风险一般只发生在群内部，找到风险最大的担保群，然后就可以找到风险最大的担保企业。
在金融领域，除了冰鉴科技外，建设银行、招商银行、光大银行、南京银行等商业银行，360数科、万象智联等均在积极尝试利用该技术进行风险控制。
4、智慧城市
公安机关在侦查案件时，经常看到办案民警用图谱梳理案件及人物关系。在电视剧《人民的名义》中，警方利用知识图谱分析，可以很快看清“山水集团”背后的利益链条。
除此之外，知识图谱从大数据中深度挖掘关联关系，可准实时分析多至千亿级海量关系数据，转化为关系图谱数据，支撑公安机关展开情报研判分析、犯罪团伙跟踪以及重大事情预警等。
5、其他领域
除了以上应用领域外，智慧医疗、智能客服（智能问答）等领域也在积极利用知识图谱技术，使结果更加准确，使机器人客服更加智能。
三、知识图谱的技术与应用挑战
2018年10月，知识图谱首次进入国际知名咨询公司Gartener的技术成熟度曲线，目前正处于技术成熟曲线的上升阶段，特别是学习和推理技术亟待突破，预计进入成熟期还需要5-10年。
知识融合和知识推理是知识图谱的关键技术，但目前都面临很多挑战，主要包括：
1、当知识图谱不能准确将具有同义异名的实体对齐或将同名异义的实体消歧就会导致知识图谱中出现知识冗余或缺失；
2、如何模仿人脑机制实现小样本或零样本学习知识推理；
3、知识图谱中知识的有效性往往受到时间空间等动态因素约束，如何合理利用知识的动态约束信息完成动态推理也是知识推理的一大挑战；
4、在自然语言处理仍然不能有效完成抽取任务的现实下，能否充分利用各类资源，能否有效利用已经积累的业务知识，能否充分利用人力因素进行验证或者标注，均对知识图谱落地的效果产生显著影响。
比如搜索“苹果”，淘宝出现的全是苹果手机，而京东既有苹果手机，也有苹果（水果）。这说明两家公司对同一客户需求判断出现了语义分歧，前者认为客户只需要苹果手机，后者认为客户还可能想吃苹果。但是，出现这样的结果却很难判断谁好谁坏，不同用户体验是不一样的。
此外，电商、金融、安防等等领域都可以搭建知识图谱平台，但是如何更好的与这些应用场景结合，在不同公司不同行业之间低成本迁移、商业化落地，面临重大挑战。
四、知识图谱商业化探索
目前来看，电商领域（淘宝、美团等）、通用搜索平台（百度、搜狗搜索）都是自建知识图谱平台，且已经有效提高了客户体验，增加了用户粘性。但知识图谱在第三方的商业化依然处于探索阶段。
据冰鉴科技研究院了解，智能客服已经在很多行业开始商业化应用，而其核心技术就是知识图谱，极大地减少企业的客服成本。
在电商领域，未来很可能会将相关知识图谱技术对外输出，特别是一些垂直领域的电商平台。
在金融领域，第三方人工智能公司为银行等金融机构搭建知识图谱平台获取技术服务费是其主要的商业化的方法之一。如建设银行，在2019年6月对外发布人工智能运维知识图谱产品供应商征集公告。
从短期来看，在大多数细分领域，知识图谱平台商业化还比较困难，一方面缺少有效付费用户，另一方面公开数据有限、相关知识抽取困难，知识图谱平台难以搭建；从长期来看，据艾瑞咨询推算，知识图谱核心产品的市场规模预计2024年将突破200亿元，年复合增长率达到20.4%。
更多精彩内容，关注钛媒体微信号（ID：taimeiti），或者下载钛媒体App
核心关键字： 人工智能相关文章
-
工信部：加强技术领域知识产权布局，构建创新成果产业化体系
创头条消息 8月25日，工信部在答复政协第十三届全国委员会第四次会议第1323号（工交邮电类193号）提案中称，下一步将会同有关部门，加强基础科学研究和应用基础研究，加快关键技术攻关，加强制造业知识产权顶层设计，研究发布《制造业知识产权强国实施方案（2021—2025年）》，持续增强制造业知识产权布局与协同运用能力。从答复函中了解到，工信部将积极推动工业和信息化领域知识产权和创新成果产业化工作，...
2021-08-25 14:59:22 制造业知识产权成果 -
9万家电子烟实体店鏖战：品牌怒关百店，假货飞出小作坊
文|创业最前线，作者|付艳翠，编辑|冯羽电子烟这个低调了一年多的赛道，似乎又重新火热了起来。两个月前，电子烟品牌“YOOZ柚子”完成超2亿美元融资。最近，雾化烟品牌vitavp唯它创始人刘东原也向「创业最前线」透露，公司新一轮融资已在交割中。“据我所知，现在行业前十的电子烟品牌都在和机构保持接触。”刘东原透露，他为了这次融资，已经跟资本接触了半年多，“见了几十家机构投资人。”从2019年初的野蛮生...
2021-08-21 08:53:33 电子行业品牌 -
近5000家专精特新企业图谱：8城入选企业过百，宁波超深圳位居第三
来自《21世纪经济报道》记者陈洁，实习生张惠兰，徐欣宇广州、厦门、成都报道专精特新企业正被视为重要创新力量而备受关注。7月30日召开的中共中央政治局会议强调，要强化科技创新和产业链供应链韧性，加强基础研究，推动应用研究，开展补链强链专项行动，加快解决“卡脖子”难题，发展专精特新中小企业。此前不久，工信部公示了最新第三批专精特新“小巨人”企业名单，共有2930家企业入选。至此，我国专精特新企业名单增...
2021-08-20 22:22:12 企业城市宁波 -
亚马逊封店潮背后，溃散的实体工厂与芯片炒货客
图片来源@视觉中国文丨田黄在深圳亚马逊的圈子里，去年听到了都是买深圳湾1号这样的暴富故事，切换到今年画风变成哀鸿遍野，大家都在比惨，一个比一个惨，惨到有不少人想跳楼而不可得。亚马逊此轮针对中国卖家的封号短期已影响到5万中国商家，还有超过20万的账号在“暗杀”名单中随时面临暴雷的风险。深圳市跨境电子商务协会的统计显示，行业目前的损失预估已超过千亿元。那些获得资本下注乃至被上市公司并购的头部大卖家们吸...
2021-08-08 11:52:45 亚马逊卖家工厂 -
今天的知识分子，还要不要下乡？
作者：刘子1984来源：秦朔朋友圈（ID：qspyq2015）01觉醒年代与乡土今年是党建百年，世所瞩目。热门大剧《觉醒年代》，就将百年前的浪潮、觉醒、抗争描绘得淋漓尽致。剧中，李大钊的澎湃、坚定与深情令人难忘。不同于陈独秀与胡适，从北京乡下的长辛店，到面临辫子军迫害南下乡村调研，到躲避京师警察厅追捕回河北昌黎种地，李大钊的精神基地和思想路径，始终与乡村紧密联系在一起。李大钊曾写过一篇《青年与农村》，号召“我们青年应该到农村去”。他认为，一是“中国农村的黑暗，算是达于极点”，二是要推行民主政治、“立宪”，...
2021-08-04 12:51:41 知识分子今天 -
泛知识短视频难「造神」
文|观娱象限，作者|琢介，编辑|缈秒一笔笔资金被投入泛知识赛道，资本以极大热情挖掘互联网知识经济的乌托邦。而事实上，对平台而言，投入再多的资金与精力，优质的创作者始终可遇不可求。#何同学毕业##何同学理工男的浪漫#，7月26日，微博热搜上两条热搜都与“何同学”有关。这位何同学究竟何许人也？为何一次普普通通的毕业，却能引发大量网友的关注？对不少数码爱好者而言，何同学是顶流。他是北邮的学生，同时也是一...
2021-08-03 17:58:46 知识视频创作者 -
爱莫科技完成数千万元 A 轮融资，打造实体零售数字化转型引擎
爱莫科技近日完成数千万元A轮融资，投资方为前海瑞旗和奇绩创坛。此次融资主要用于研发团队拓展、核心技术KISS人工智能平台的升级、实体零售业务的市场扩张、DaaS和OaaS的产品研发与市场开拓。该公司此前已获得由华衫瑞联领投的数千万天使投资，现已实现盈亏平衡，年营收达数千万级。目前，爱莫已积累了300万+的店铺数据和20万+商品知识图谱，每天可新增10万+真实消费者多维数据，其拥有的数据规模和复杂性...
2021-08-02 15:50:14 融资数据多维 -
泛知识战争2021：团战、增量、困局
文|犀牛娱乐，作者｜方正，编辑｜夏添点开@罗翔说刑法的视频，法学院大二学生辰辰开启了新的一天；洗漱完毕，最近迷上基金的他又打开@半佛仙人的《如何躲避投资理财骗局》，搭配着早饭认真“学习”了起来；吃完饭，正在减肥的辰辰铺开了桌边的瑜伽垫，跟着健身博主@周六野Zoey的《10分钟瘦小腿运动》比划起了动作。万万没想到，短视频正在成为这届年轻人的“学习神器”。无论政治财经、物理化学，还是运动健身、美妆穿搭...
2021-07-16 13:16:19 知识视频内容 -
监管、品牌或成快手推广“泛知识”难点
作者：小胖/小文子来源：GPLP犀牛财经（ID:gplpcn）6月24日，快手（01024.HK）上线“快手新知播”，活动时间自6月24日起至9月24日止，有100名知识大咖、50余家机构、超1000名快手知识主播参与活动，预计带来上万场知识直播。对于快手来讲，该公司的动作只能算是“后知后觉”，早在2020年，B站、知乎、头条系及百度就已先后开始布局“泛知识”内容，同样具有社交属性的快手“入比不入...
2021-06-30 14:55:22 快手内容知识 -
8位嘉宾，带你解锁并玩转知识短视频 | 第八届蓝鲸青年传媒人论坛 · 清华站
2021年，各大视频平台都在继续充实其泛知识内容的视频，此赛道的竞争也越发激烈。那么，面对知识类短视频这片蓝海，我们该如何抓住涨粉新风口？还有哪些新路径可以探索？清华大学新闻与传播学院博士生导师、清华大学文化创意发展研究院副院长张铮；蓝鲸财经高级副总裁刘瑞刚；中科院物理所研究生部副主任成蒙；视知传媒创始人兼CEO马昌博；看鉴创始人兼CEO李锋；薛定饿了么创始人薛凯；箭厂总制片人钟伟杰；蓝鲸财经新媒...
2021-06-10 19:55:08 蓝鲸知识视频
| 留言与评论（共有 0 条评论） |
