上海稀宇科技有限公司杨雨丰获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网获悉上海稀宇科技有限公司申请的专利一种数据并行处理方法和装置获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN120144186B 。
龙图腾网通过国家知识产权局官网在2025-08-08发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202510629657.2,技术领域涉及:G06F9/38;该发明授权一种数据并行处理方法和装置是由杨雨丰;庄嘉琪设计研发完成,并于2025-05-16向国家知识产权局提交的专利申请。
本一种数据并行处理方法和装置在说明书摘要公布了:本发明公开了一种数据并行处理方法和装置,该方法包括:根据至少一条输入数据确定至少两个输入序列,并根据各输入序列的顺序,对各输入序列进行拼接,得到总序列;其中,每个输入序列中包括至少一个词元;获取并行参数,基于并行参数分割所述总序列,得到至少两个处理序列,所述并行参数至少根据并行设备的数量决定;通过至少两个并行设备,对处理序列进行并行处理,得到环形注意力。本发明可以减少输入序列的填充量,减少计算资源浪费,提高计算效率。
本发明授权一种数据并行处理方法和装置在权利要求书中公布了:1.一种数据并行处理方法,其特征在于,包括: 根据至少一条输入数据确定至少两个输入序列,并根据各输入序列的顺序,对各输入序列进行拼接,得到总序列; 其中,每个输入序列中包括至少一个词元; 获取并行参数,基于并行参数分割所述总序列,得到至少两个处理序列,所述并行参数至少根据并行设备的数量决定; 通过至少两个并行设备,对处理序列进行并行处理,得到环形注意力,包括: 获取与所述输入数据匹配的任务类型,所述任务类型包括因果型任务与非因果型任务; 根据任务类型和输入序列,构造与各处理序列匹配的掩码; 通过至少两个并行设备,对各处理序列进行并行处理,确定各处理序列中各词元的注意力分数; 基于与各处理序列匹配的掩码以及各处理序列中各词元的注意力分数,计算环形注意力; 其中,若所述任务类型为因果型任务,根据任务类型,构造与各处理序列匹配的掩码,包括: 基于单向注意力机制,构造与各处理序列匹配的掩码; 确定各处理序列中各词元的注意力分数,包括: 基于每个处理序列的单向注意力对应的各词元的查询向量、键向量以及值向量,计算各词元的注意力分数; 若所述任务类型为非因果型任务,根据任务类型,构造与各处理序列匹配的掩码,包括: 基于双向注意力机制,构造与各处理序列匹配的掩码; 确定各处理序列中各词元的注意力分数,包括: 基于每个处理序列的双向注意力对应的各词元的查询向量、键向量以及值向量,计算各词元的注意力分数。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人上海稀宇科技有限公司,其通讯地址为:200233 上海市徐汇区虹漕路25-1号2楼;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。