中山大学黄以华获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网获悉中山大学申请的专利一种基于FPGA的高效Vision-LSTM硬件加速器获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN119808855B 。
龙图腾网通过国家知识产权局官网在2025-10-21发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202411886910.4,技术领域涉及:G06N3/063;该发明授权一种基于FPGA的高效Vision-LSTM硬件加速器是由黄以华;邓泽轩设计研发完成,并于2024-12-20向国家知识产权局提交的专利申请。
本一种基于FPGA的高效Vision-LSTM硬件加速器在说明书摘要公布了:本发明公开了一种基于FPGA的高效Vision‑LSTM硬件加速器,包括:多头mLSTMcell计算单元,所述多头mLSTMcell计算单元包括若干个mLSTMcell计算单元并行连接,所述mLSTMcell计算单元包括QKMatCalc计算子单元、CVMatCalc计算子单元、DMatCalc计算子单元、CMatCalc计算子单元、第一Norm计算子单元、V流水线缓冲单元,能够实现对ViL模型的高效推理计算,相较于GPU基准,它达到了0.90~1.19x的性能表现,且在能量效率上有26.80x~29.57x的提升。
本发明授权一种基于FPGA的高效Vision-LSTM硬件加速器在权利要求书中公布了:1.一种基于FPGA的高效Vision-LSTM硬件加速器,其特征在于,所述加速器包括: 多头mLSTMcell计算单元,所述多头mLSTMcell计算单元包括若干个mLSTMcell计算单元并行连接; 所述mLSTMcell计算单元包括QKMatCalc计算子单元、CVMatCalc计算子单元、DMatCalc计算子单元、CMatCalc计算子单元、第一Norm计算子单元、V流水线缓冲单元; 其中,将Gate信号输入DMatCalc计算子单元,输出DMatCalc计算结果; 将矩阵K、矩阵Q输入QKMatCalc计算子单元,输出QKMatCalc计算结果; 将矩阵V输入V流水线缓冲单元,输出V流水线缓冲结果; 将DMatCalc计算结果与QKMatCalc计算结果输入CMatCalc计算子单元,输出CMatCalc计算结果; 将CMatCalc计算结果与V流水线缓冲结果输入CVMatCalc计算子单元,输出CVMatCalc计算结果; 将CVMatCalc计算结果输入第一Norm计算子单元,输出第一Norm计算结果; 所述硬件加速器还包括外部存储访问界面、第二Norm计算单元、UpProj线性计算单元、残差连接写单元、ConvACT序列二维卷积单元、QKVProj线性计算单元、IFGate线性计算单元、X流水线缓冲单元; 其中,外部存储访问界面的存储读数据流通过输入读端口输入第二Norm计算单元,输出第二Norm计算结果; 外部存储访问界面的权重流输入残差连接写单元,输出处理过的外部权重流,将处理过的外部权重流与第二Norm计算结果输入UpProj线性计算单元,输出UpProj线性计算结果和存储写数据流,将存储写数据流通过残差连接写单元输入外部存储访问界面; 将处理过的外部权重流与UpProj线性计算结果输入ConvACT序列二维卷积单元,得到ConvACT序列二维卷积结果,将ConvACT序列二维卷积结果作为存储写数据通过残差连接写单元输入外部存储访问界面; 将UpProj线性计算结果输入X流水线缓冲单元,得到X流水线缓冲结果; 将X流水线缓冲结果与ConvACT序列二维卷积结果输入QKVProj线性计算单元,输出QKVProj线性计算结果,将QKVProj线性计算结果中的矩阵K、矩阵Q输入多头mLSTMcell计算单元的QKMatCalc计算子单元输入端,将QKVProj线性计算结果中矩阵V输入多头mLSTMcell计算单元的V流水线缓冲输入端; 将外部存储访问界面的权重流与QKVProj线性计算结果输入IFGate线性计算单元,输出IFGate线性计算结果,将IFGate线性计算结果作为Gate信号输入多头mLSTMcell计算单元的DMatCalc计算子单元输入端。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人中山大学,其通讯地址为:510275 广东省广州市海珠区新港西路135号;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
以上内容由龙图腾AI智能生成。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。

皖公网安备 34010402703815号
请提出您的宝贵建议,有机会获取IP积分或其他奖励