在审

一种数据湖元数据建模系统

刘健、王兆喜、徐加利、范建国、亓玉浩、张生刚、张剑、王磊、姜亦亭、徐斌、林秀超、傅莹
山东能源集团有限公司

摘要

本发明涉及数据建模技术领域,且公开了一种数据湖元数据建模系统,包括系统模块总成,所述系统模块总成包括数据采集模块、数据处理模块、元数据抽取模块、融合关联模块、建模模块、储存模块、分类模块,所述数据采集模块接收原始异构数据源,包括多个类别的原始数据,每种原始数据至少包括有多个元数据。本发明对非结构化数据的自动解析、抽取与元模型的构建方法,有效改善了对于非结构化数据的处理与利用,通过将不同数据实体类型的数据实体及其对应的三大类元数据分开建模与存储,可以有效解决元数据耦合的复杂性问题以及异构数据支持的问题,数据湖元数据模型具有通用性和可扩展性。

暂无引用专利