天眼查App显示,2025年6月13日,「基于动态变更表结构的湖仓一体实现方法及装置」正式进入专利公布阶段。申请人为浪潮软件股份有限公司,该项大数据技术领域专利涉及数据存储与管理的优化方案。据专利信息显示,该技术实现了显著优化的数据管理和利用效果。发明人为王贺、司衍芹、周双、陈晏鹏和张连超。
本发明具体提供了基于动态变更表结构的湖仓一体实现方法及装置,以MinIO作为存储,Hudi作为数据湖框架,采用Flink CDC将原始数据按原表结构存储到Hudi表中。其特性包含湖上建仓、动态变更表结构和元数据管理,并通过自定义DebeziumDeserializationSchema实现类来获取表结构的变更,进而修改ODS层中对应的表结构。与现有技术相比,本发明能够有效降低数据湖退化为数据沼泽的可能性,提升对湖仓中数据的管理效率和利用价值。
免责声明:本文内容由开放的智能模型自动生成,仅供参考。