专利类型:发明专利
语 言:中文
申 请 号:CN201710322410.1
申 请 日:20170509
申 请 人:重庆大学
申请人地址:400044重庆市沙坪坝区沙正街174号
公 开 日:20170804
公 开 号:CN107016439A
代 理 人:
代理机构:
摘 要:本发明公开了一种基于CR2神经网络的图像?文本双编码机理实现模型,涉及人类认知和知识表征领域,其特点是,包括表象系统,采用多层卷积神经网络模型(CNN),获取表征信息心理映像的“图像单元”;语义系统,采用RNNLM语言模型,获取表征信息语义的“语言单元”;参考关联系统,采用RBF自增长神经网络模型,正模型以“图像单元”为输入,输出为参考关联的“语言单元”,逆模型为正模型的逆向运算。这里CR2神经网络指代的是CNN、RNN,RBF三种神经网络的有机组成。本发明实现了图像表象系统和自然语言语义系统模型的建立,同时还建立起了两个系统之间参考关联的模型。本发明的模型完整的模拟了图像?文本双编码认知机理的整个过程。??全部
主 权 项:基于CR2神经网络的图像?文本双编码机理实现模型,其特征在于:包括以下步骤:S1:输入与信息相关的图像信息及其文本信息;S2:通过表象系统获取该信息非语词表征的“图像单元”;S3:通过语义系统获取该信息语词表征的“语言单元”;S4:通过参考关联系统获取关联的“图像单元”及其“语言单元”;S5:输出获取的所有“图像单元”和“语言单元”。发明公开了一种基于多层。
关 键 词:
法律状态:生效
IPC专利分类号:G06N3/04(2006.01)I