航天信息申请数据资产处理专利使Clickhouse具备高性能实时分析查询能力ku酷游
栏目:行业新闻 发布时间:2023-12-24 10:14:30

  专利摘要显示,本申请提供了一种数据资产处理方法、装置及相关设ku酷游备,通过构建基于MPP架构的列式存储数据库ClickHouse集群,对业务系统提交的数据资产进行分类存储和汇聚,创建对应所述列式存储数据库ClickHouse的ClickHouse分布式表,以对所述列式存储数据库ClickHouse集群的服务器节点上的物理表进行代理;结合所述ClickHouse分布式表,将所述列式存储数据库ClickHouse集群中由列式存储数据库ClickHouse原生提供的状态更改操作转化为对ClickHouse物理表的插入操作;基于转化后的列式存储数据库ClickHouse的分布式表引擎对所述数据资产进行实时分析和查询。克服了ClickHouse不支持更新数据的实时数据分析、原生ClickHouse直接使用Mutation操作性能弱问题,使Clickhouse具备高性能实时分析查询能力。