买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

龙图腾网获悉陕西师范大学申请的专利基于自监督时空注意力网络的行为识别方法获国家发明授权专利权，本发明授权专利权由国家知识产权局授予，授权公告号为：CN116630776B 。

龙图腾网通过国家知识产权局官网在2025-08-05发布的发明授权授权公告中获悉：该发明授权的专利申请号/专利号为：202310619495.5，技术领域涉及：G06V10/82；该发明授权基于自监督时空注意力网络的行为识别方法是由裴炤;李依函;张文文设计研发完成，并于2023-05-29向国家知识产权局提交的专利申请。

本基于自监督时空注意力网络的行为识别方法在说明书摘要公布了：一种基于自监督时空注意力网络的行为识别方法，由处理数据集、构建自监督时空注意力网络、训练网络、识别行为步骤组成。本发明将多尺度特征提取模块和时空注意力模块相结合，用自监督方式训练网络，对输入图像进行不同尺度卷积操作，提高原始采样帧图像质量，发掘了不同视图时空信息，捕获视频中采样帧的远程依赖性，实现对采样帧图像信息和时空信息充分利用以及对行为的准确识别，解决了行为识别特征提取时未有效区分关键信息和重要动作区域的问题，以及数据集标注耗时的问题，训练方式可探索数据中未知或隐藏信息。对比实验表明，本发明的最高准确率和前五准确率优于对比实验，具有识别准确率高、识别速度快等优点，可在图像处理技术领域使用。

本发明授权基于自监督时空注意力网络的行为识别方法在权利要求书中公布了：1.一种基于自监督时空注意力网络的行为识别方法，其特征在于由下述步骤组成： 1处理数据集 使用公共数据集Kinetics-400作为训练集V，UCF101作为测试集，V∈{v1,v2,…,vt}，vt为视频第t时刻的帧，t∈{1,2,…,N}，N是视频帧的总长、为有限正整数，将一段视频采样为视图A和视图B，A∈{x1,x2,…,xA}，B∈{x1,x2,…,xB}，其中C是特征通道的数量，H表示特征高度，W表示特征宽度，视图A采样为原视频90％的帧，视图B采样为原视频40％的帧； 2构建行为识别网络 行为识别网络由学生网络与教师网络并联构成，学生网络由多尺度特征提取模块与时空注意力模块串联构成，教师网络与学生网络结构相同，视图A通过教师网络与学生网络，视图B通过学生网络； 所述的多尺度特征提取模块由残差模块1、残差模块2、残差模块3并联构成； 所述的时空注意力模块由自注意力模块与空间注意力模块串联构成； 3训练网络 1确定目标函数 目标函数包括损失函数评价函数最高准确率T1和前五准确率T5，按下式确定损失函数 其中，fTA表示视图A输入到教师网络的值，fSA表示视图A输入到学生网络的值，fSB表示视图B输入到学生网络的值； 按下式确定最高准确率T1： 其中，TP表示正例预测正确的个数，FP表示负例预测错误的个数，FN表示正例预测错误的个数，TN表示负例预测正确的个数，TP与FP、FN、TN的和为总的样本数，TP与TN的和为预测正确的样本数，TP,FP,TN,FN∈N，N取值为0～101，且TP,FP,TN,FN不同时为0； 按下式确定前五准确率T5： 其中，A5表示所有正确标签包含在前五个分类概率中的个数； 2训练网络 将训练集输入到行为识别网络中进行训练，训练集的视频帧尺寸大小调整为224×224，在训练过程中，数据批量为16，在Kinetics-400数据集训练50个轮次，学习率为0.001，在40轮次学习率，衰减为0.0001，后10次的学习率衰减为0.00001，温度超参数τ设置为0.7，训练至损失函数收敛； 对教师网络和学生网络进行前向传递和反向传播，更新两个网络的权重，学生网络的参数通过指数移动平均EMA更新权重m取值为有限正整数，按下式确定学生网络权重 其中wt是教师网络的权重，α为移动平均的衰减系数，α取值为0,1； 4行为识别 将测试集输入到训练好的行为识别网络中，输出视频中行为识别结果。

如需购买、转让、实施、许可或投资类似专利技术，可联系本专利的申请人或专利权人陕西师范大学，其通讯地址为：710062 陕西省西安市长安南路199号；或者联系龙图腾网官方客服，联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。