Document
拖动滑块完成拼图
个人中心

预订订单
商城订单
发布专利 发布成果 人才入驻 发布商标 发布需求

请提出您的宝贵建议,有机会获取IP积分或其他奖励

投诉建议

在线咨询

联系我们

龙图腾公众号
专利交易 商标交易 积分商城 国际服务 IP管家助手 科技果 科技人才 会员权益 需求市场 关于龙图腾 更多
 /  免费注册
到顶部 到底部
清空 搜索
当前位置 : 首页 > 专利喜报 > 上海浦东发展银行股份有限公司铁锦程获国家专利权

上海浦东发展银行股份有限公司铁锦程获国家专利权

买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!

龙图腾网获悉上海浦东发展银行股份有限公司申请的专利一种基于预聚合公共表的跑批方法、设备、介质获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN115827629B

龙图腾网通过国家知识产权局官网在2026-03-20发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202211574486.0,技术领域涉及:G06F16/22;该发明授权一种基于预聚合公共表的跑批方法、设备、介质是由铁锦程;李梦聪设计研发完成,并于2022-12-08向国家知识产权局提交的专利申请。

一种基于预聚合公共表的跑批方法、设备、介质在说明书摘要公布了:本发明涉及一种基于预聚合公共表的跑批方法、设备、介质,所述方法包括如下步骤:获取SQL标签任务,通过解析确定所述SQL标签任务依赖的HIVE表,根据预设的标签逻辑进行划分,获取标签跑批队列;针对所述标签跑批队列,根据各个标签涉及的HIVE表的数量进行分组,获取多个标签组,根据所述多个标签组,获取新增标签组预聚合SQL任务;根据多个所述新增标签组预聚合SQL任务,获取公共表集合;使用所述公共表集合进行跑批。与现有技术相比,本发明能够节省SQL任务跑批时间,避免类似任务多次读取HIVE表数据增加不必要的磁盘开销,实现一次跑批产出多个SQL任务标签数据。

本发明授权一种基于预聚合公共表的跑批方法、设备、介质在权利要求书中公布了:1.一种基于预聚合公共表的跑批方法,其特征在于,包括如下步骤: 获取SQL标签任务,通过解析确定所述SQL标签任务依赖的HIVE表,根据预设的标签逻辑进行划分,获取标签跑批队列; 针对所述标签跑批队列,根据各个标签涉及的HIVE表的数量进行分组,获取多个标签组,根据所述多个标签组,获取新增标签组预聚合SQL任务; 根据多个所述新增标签组预聚合SQL任务,获取公共表集合; 使用所述公共表集合进行跑批, 所述的新增标签组预聚合SQL任务的获取过程包括如下步骤: 根据所述多个标签组划分所述标签跑批队列,判断是否存在完全匹配的历史SQL任务,若是,将所述标签跑批队列融入所述历史SQL任务中,作为所述新增标签组预聚合SQL任务,若否,获取与所述标签跑批队列相同主题的历史SQL可扩展任务,并按照匹配度排序,将排序后的历史SQL可扩展任务作为所述新增标签组预聚合SQL任务, 所述的匹配度根据历史SQL可扩展任务依赖HIVE表与所述标签跑批队列依赖HIVE表的匹配程度和或各个历史SQL可扩展任务的历史跑批性能获取, 所述的公共表集合的获取过程包括如下步骤: 针对多个所述新增标签组预聚合SQL任务涉及的HIVE表,根据入仓时效性划分为多个集合,针对每个所述集合,以两张HIVE表为最小单元进行组合,获取多个组合; 获取各个所述组合在多个所述新增标签组预聚合SQL任务中使用的次数,保留次数大于2的组合; 获取所述多个集合对应入仓时段的历史公共表集合,剔除与所述组合和HIVE表完全相同的公共表,将剩余的组合分为公共表完全包含组合中的2个HIVE表且存在新增字段、公共表包含组合中的1张HIVE表、公共表完全不包含组合中的HIVE表三类; 针对三个类别中的各个组合,从所述历史公共表集合中选取完全包含组合的公共表,选取字段重合度最高的表,判断将组合新增字段融入后性能是否达到预设水平,若是,将组合新增字段融入该表; 对于无法融入的集合,获取多个所述新增标签组预聚合SQL任务对应的HIVE表相对于个组合的所有新增字段,以及所述多个标签组涉及所述组合的所有字段,生成不可融合集合,将所述不可融合集合与所述公共表包含组合中的1张HIVE表对应的组合融合,取并集后获取多个并集表,根据所述并集表获取所述公共表集合, 根据所述并集表融合队列获取所述公共表集合具体为: 将与所述并集表存在交集的历史公共表,按表重合度和或字段重合度和或跑批时间排序,取前三个公共表作为所述公共表集合。

如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人上海浦东发展银行股份有限公司,其通讯地址为:200002 上海市黄浦区中山东一路12号;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。

以上内容由龙图腾AI智能生成。

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。