买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

龙图腾网获悉长沙艾克赛普仪器设备有限公司申请的专利一种人机界面内容识别方法、系统、设备以及介质获国家发明授权专利权，本发明授权专利权由国家知识产权局授予，授权公告号为：CN116503875B 。

龙图腾网通过国家知识产权局官网在2025-11-18发布的发明授权授权公告中获悉：该发明授权的专利申请号/专利号为：202310372149.1，技术领域涉及：G06V30/19；该发明授权一种人机界面内容识别方法、系统、设备以及介质是由肖燕;邓波;张全良设计研发完成，并于2023-04-10向国家知识产权局提交的专利申请。

本一种人机界面内容识别方法、系统、设备以及介质在说明书摘要公布了：本发明涉及一种人机界面内容识别方法、系统、设备以及介质，其包括：基于预先构建的CNN‑HMM混合模型为获取的人机界面内容建立特征模板数据库；对指定区域的人机界面的原始图像进行包含ROI目标区域截取、预处理、阈值分割、校正以及字符切割之中的一种或多种的匹配前处理；通过将经匹配前处理得到的图像数据与构建的特征模板数据库中的数据进行匹配得到置信度值，并依据置信度值输出内容识别结果。本发明将CNN端到端嵌入HMM结合了CNN的强识别能力和HMM的序列建模能力，在面对实验场景下的多人机界面易受到遮挡、光线的影响的情况下，其构建的模型准确率、识别速率均要优于现有的成熟的图像识别模型。

本发明授权一种人机界面内容识别方法、系统、设备以及介质在权利要求书中公布了：1.一种基于CNNHMM混合模型的人机界面内容识别方法，其特征在于，包括： 对包含获取的人机界面的历史原始图像的训练集进行数据预处理； 利用CNN-HMM混合模型中的CNN层对经预处理的数据进行分类，输出总和为1的后验概率分布，作为每个字符、按钮以及图形对应的概率； 将得到的后验概率分布输入到CNN-HMM混合模型中的HMM层，生成HMM层的初始概率和转移概率；其中，所述HMM层包括：多状态HMM结构与单状态HMM结构；所述多状态HMM结构设置有与字符的不同外观一一对应的多个状态单元；所述单状态HMM结构设置有用于连接相邻两字符的跳出连接单元； 基于预先构建的CNN-HMM混合模型为获取的人机界面内容建立特征模板数据库，包括：基于预先构建的CNN-HMM混合模型的CNN层获取的人机界面的历史原始图像进行特征提取，生成若干按预设编号排序的特征序列，各个特征序列中的保存数据的特征样式均不相同；基于预先构建的CNN-HMM混合模型的HMM层为每一特征序列分别建模得到若干序列建模，在HMM层下优化训练所有序列建模，得到特征模板数据库； 基于CNN-HMM混合模型对获取的指定区域的人机界面的原始图像进行包含ROI目标区域截取、灰度处理、阈值分割、校正以及字符切割之中的一种或多种的匹配前处理； 通过将经匹配前处理得到的图像数据与所述特征模板数据库中的特征模板进行匹配得到置信度值，并依据得到的置信度值输出识别结果； 其中，所述CNN-HMM混合模型为通过将CNN层的输出与HMM层的观测概率矩阵端对端设置所得到的模型，且所述CNN-HMM混合模型中的CNN层为HMM层提供任意状态的输出概率，所述HMM层为所述CNN层提供对应状态的归属分类。

如需购买、转让、实施、许可或投资类似专利技术，可联系本专利的申请人或专利权人长沙艾克赛普仪器设备有限公司，其通讯地址为：410003 湖南省长沙市开福区车站北路579号湘域智慧南栋611室；或者联系龙图腾网官方客服，联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。

以上内容由龙图腾AI智能生成。