基于大数据的企业图谱的研究与应用

随着云计算与大数据时代的到来,大量的数据唾手可得,但是人们依然难以全面地了解和掌握一个企业的全息画像,因为一个企业与周围的环境以及伙伴存在着大量的关系和属性,而且这些关系和属性处在不断变化之中,牵一发而动全身。如何更有效、快捷、及时地挖掘出这些关系,刻画出企业的真实画像,是商务行业亟待解决的问题。虽然目前国内也有一些服务提供商提供企业信息查询工具,但通常只是基本的信息查询功能,没有深入关联地挖掘企业之间潜在的关系。因此本文以构建一个企业知识图谱来研究和解决这些问题,本文主要贡献如下:(1)提出企业知识图谱的设计目标、设计思路、整体架构和技术框架。(2)详细说明了如何构建企业知识图谱的模式图,抽取国内商务行业通用的实体、关系和属性,包括企业、人物和关系的概念本体定义。(3)详细说明了如何构建企业知识图谱的数据图,包括知识获取、知识融合、数据存储、图谱构建以及图谱更新等模块。其中知识获取模块主要负责数据原材料的采集和初步清理、转换;知识融合模块主要是把来自不同数据源的数据经过Spark平台处理后形成“实体-属性-属性值”、“实体-关系-实体”、“关系-属性-属性值”三类知识表示三元组;数据存储模块主要说明如何分类存储系统中的各种数据,包括图数据库、No Sql数据库等;图谱构建模块主要说明如何把知识三元组构建成一个节点关系网络;图谱更新模块主要说明数据更新后如何对构建完成的图谱进行更新和维护。(4)简单的介绍了企业知识图谱在几个金融场景的应用。