广东华际友天信息科技有限公司曾慧宇获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网获悉广东华际友天信息科技有限公司申请的专利基于文件存储的多维指标去重装置、电子设备和存储介质获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN121029713B 。
龙图腾网通过国家知识产权局官网在2026-02-03发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202511567745.0,技术领域涉及:G06F16/174;该发明授权基于文件存储的多维指标去重装置、电子设备和存储介质是由曾慧宇;曾锡坤;郑丞智;张志聪;徐垂炀;王嘉煜;江海韵;徐世庆;李笋;陈棉锋;詹德志;谭焕星设计研发完成,并于2025-10-30向国家知识产权局提交的专利申请。
本基于文件存储的多维指标去重装置、电子设备和存储介质在说明书摘要公布了:本发明提供了基于文件存储的多维指标去重装置、电子设备和存储介质,文件存储系统基于PCServer和文件存储搭建物理架构,存储Parquet格式多维指标文件。元数据库存储多维指标文件信息、预计算状态信息和去重信息。多维指标去重引擎接收并解析用户指令,从元数据库读取目标多维指标相关信息,获取对应文件进行去重,或触发预计算流程后再获取文件执行去重。预计算处理器读取目标多维指标对应的原始数据,进行预计算处理生成目标多维指标文件并存储到文件存储系统,并更新元数据库中的预计算状态。本装置采用普通文件系统实现存储介质革新,并利用文件特性实现预计算协同优化,同时实现多维指标去重性能的大幅优化,支持亿级多维指标去重优化至秒级。
本发明授权基于文件存储的多维指标去重装置、电子设备和存储介质在权利要求书中公布了:1.一种基于文件存储的多维指标去重装置,其特征在于,所述装置包括: 文件存储系统,基于PCServer和文件存储搭建物理架构,支持本地磁盘或NAS文件存储的Parquet格式文件,存储的Parquet格式文件至少包括多维指标文件; 元数据库,用于存储多维指标文件信息、多维指标预计算状态信息、多维指标去重信息; 多维指标去重引擎,用于接收并解析用户终端发送的多维指标去重指令,根据解析得到的目标多维指标从元数据库读取目标多维指标的文件信息、预计算状态信息、去重信息,根据目标多维指标的文件信息、预计算状态信息、去重信息,获取目标多维指标文件进行去重处理,或,在发送针对目标多维指标的预计算指令后获取目标多维指标文件进行去重处理; 预计算处理器,用于根据预计算指令读取目标多维指标对应的原始数据并对目标多维指标对应的原始数据进行预计算,得到目标多维指标文件,将目标多维指标文件存储到文件存储系统并在元数据库中更新目标多维指标的预计算状态信息; 所述预计算处理器包括: 数据导入模块,用于根据预计算指令导入目标多维指标对应的原始数据源; 数据预计算处理模块,用于对原始数据源中目标多维指标对应的原始数据进行预计算,得到目标多维指标文件; 数据导出模块,用于将目标多维指标文件以Parquet格式存储到文件存储系统并在元数据库中更新目标多维指标的预计算状态信息; 所述数据预计算处理模块包括: 动态分区模块,用于根据数据分布情况动态调整分区策略,并根据分区策略将原始数据源的数据划分为多个数据分区; 列裁剪模块,用于以查询收益和存储、计算成本代价为参考,针对每个数据分区中的数据,采用贪婪算法逐步添加收益最高的维度,寻找出在存储成本与查询性能之间达到最平衡的近似最优维度组合集合,根据预设的列裁剪配置,确定所述近似最优维度组合集合需物化的字段。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人广东华际友天信息科技有限公司,其通讯地址为:510653 广东省广州市天河区高普路136号第四层411、412房;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
以上内容由龙图腾AI智能生成。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。

皖公网安备 34010402703815号
请提出您的宝贵建议,有机会获取IP积分或其他奖励