有效

大规模关系图谱准实时构建方法、装置、设备和存储介质

可荣博、葛斌、蒋凌云、徐浩、黄鸿杰、吴继冰、李广鹏、赵翔、张翀、胡升泽、黄宏斌
中国人民解放军国防科技大学

摘要

本申请涉及一种大规模关系图谱准实时构建方法、装置、设备和存储介质。该方法包括:设计点、边、属性数据标准;通过对动静态数据分别处理,对增量数据实时处理,构建静态点边hive表和动态点边hive表;在预设时刻将静态点边hive表和动态点边hive表导入hugegraph图数据库,得到引文图数据;从论文引文数据中抽取边信息和点信息,得到引文关系表和论文信息实体表,将引文关系表和论文信息实体表合并,构成完整图模型数据。本方法在处理千亿规模数据时构建时间显著缩短,满足实时性需求;支持数据规模的持续增长,性能稳定;既能将各类数据源及时构建生成各自的图数据,又能将不同数据源中同类数据融合。