成都天奥信息科技有限公司白学智获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网获悉成都天奥信息科技有限公司申请的专利一种基于大数据流批一体化处理系统及其工作方法获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN116186173B 。
龙图腾网通过国家知识产权局官网在2025-08-26发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202211705507.8,技术领域涉及:G06F16/28;该发明授权一种基于大数据流批一体化处理系统及其工作方法是由白学智;何四海;杨磊;潘登峰;陈有华设计研发完成,并于2022-12-29向国家知识产权局提交的专利申请。
本一种基于大数据流批一体化处理系统及其工作方法在说明书摘要公布了:本申请公开了一种基于大数据流批一体化处理系统及其工作方法,该系统的工作方法为:获取待处理数据,数据来源于网络、业务应用单元或者存储于数据仓库及计算单元中的历史数据,通过分布式列队消息传输待处理数据至数据仓库及计算单元,同时后台管理系统传输处理参数;数据仓库及计算单元获取待处理数据,并根据处理参数进行分析,得到分析结果;将分析结果存储至分布式存储单元中;业务应用单元根据客户端的请求,将分布式存储服务中的分析结果展示给客户端。
本发明授权一种基于大数据流批一体化处理系统及其工作方法在权利要求书中公布了:1.一种基于大数据流批一体化处理系统,其特征在于,包括用于后端处理数据的联机分析处理模块OLAP以及用于前端服务的联机事务处理模块OLTP,所述联机分析处理模块OLAP与联机事务处理模块OLTP相互连接;所述联机分析处理模块OLAP包括数据转发服务单元、后台管理单元和数据仓库及计算单元,所述联机事务处理模块OLTP包括分布式存储单元、业务应用单元以及客户端; 所述数据转发服务单元、后台管理单元、数据仓库及计算单元、分布式存储单元以及业务应用单元通过分布式消息列队单元相互通信连接,且所述数据仓库及计算单元分别与后台管理单元通信以及分布式存储单元通信连接; 所述数据转发服务单元用于获取外部系统和业务应用单元传输的待处理数据,并将待处理数据传输接入分布式消息列队单元中,所述待处理数据为流数据,所述流数据用于表征实时数据; 所述后台管理单元用于配置历史数据、数据处理算法以及数据处理参数,将历史数据以及数据处理算法直接传输至数据仓库及计算单元中,以实现数据以及数据处理算法的动态扩展;并将数据处理参数通过分布式消息列队单元下发至数据仓库及计算单元,以实现数据处理参数的动态配置;获取数据仓库及计算单元对数据的分析结果,并将分析结果可视化; 所述数据仓库及计算单元用于获取分布式消息列队单元中的待处理数据以及数据处理参数,结合后台管理单元下发的数据处理算法对待处理数据进行流处理分析,得到流数据分析结果;以及获取数据仓库及计算单元中存储的历史数据,根据数据处理参数以及数据处理算法对历史数据进行批处理分析,得到批数据分析结果;所述流数据分析结果以及批数据分析结果共同作为分析结果,且将分析结果传输至后台管理单元以及分布式存储单元中; 所述分布式存储单元用于存储分析结果,并将该分析结果通过分布式存储单元传输至业务应用单元; 所述业务应用单元用于承载系统业务,将分布式存储单元中的数据分析结果传输至客户端; 所述数据仓库及计算单元包括Hadoop集群、Hbase集群、Hive集群以及Flink集群; 所述Hadoop集群利用其分布式文件系统HDFS存储非结构化数据;所述Hbase集群存储结构化主题数据;所述Flink集群对分布式文件系统HDFS中的非结构化数据、Hbase集群中的结构化主题数据以及分布式消息列队单元传输的待处理数据进行分析处理,得到分析结果,并将该分析结果分别存储至后台管理单元的Mysql数据库中或者分布式存储单元中;所述Hive集群对Hbase集群中的结构化主题数据进行分析处理,得到分析结果,并将该分析结果分别存储至后台管理单元的Mysql数据库中或者分布式存储单元中。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人成都天奥信息科技有限公司,其通讯地址为:610000 四川省成都市高新西区新业路天奥科技产业园;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。