买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

龙图腾网恭喜国网福建省电力有限公司;国网福建省电力有限公司电力科学研究院申请的专利一种多模态数据处理方法及终端获国家发明授权专利权，本发明授权专利权由国家知识产权局授予，授权公告号为：CN116680652B 。

龙图腾网通过国家知识产权局官网在2025-05-02发布的发明授权授权公告中获悉：该发明授权的专利申请号/专利号为：202310667874.1，技术领域涉及：G06F18/25；该发明授权一种多模态数据处理方法及终端是由郑州;钱健;黄建业;林晨翔;刘冰倩;吴飞;熊嘉丽;何德明;林国庆;周晨曦;马腾;郭俊;武欣欣设计研发完成，并于2023-06-07向国家知识产权局提交的专利申请。

本一种多模态数据处理方法及终端在说明书摘要公布了：本发明提供的一种多模态数据处理方法及终端，文本数据通过符号表转换为文本编码，同时将图像数据转换为指纹数据后，将指纹数据通过符号表转换为图像编码，使得图像数据转换为符号形式进行嵌入，从而实现图像数据与文本数据形成统一的符号模态。同时本发明无需对不同的模态数据构建不同的数据处理通道，可实现混合数据的输入，降低数据处理成本，并且采用感知哈希算法可以直接提取图像数据的指纹数据，无需进行额外的卷积训练，实现即插即用，提高预训练效率。

本发明授权一种多模态数据处理方法及终端在权利要求书中公布了：1.一种多模态数据处理方法，其特征在于，包括步骤：获取混合数据，所述混合数据包括图像数据以及文本数据；根据预设的符号表获取所述文本数据对应的文本编码；将所述图像数据输入感知哈希算法得到指纹数据，并根据所述符号表获取所述指纹数据对应的图像编码；将所述文本编码与所述图像编码合并处理后输入嵌入层网络进行维度变换，得到嵌入特征；所述符号表包括文字符号名称与第一编码；所述根据预设的符号表获取所述文本数据对应的文本编码包括：根据所述文本数据中每一个文字对所述文字符号名称进行检索，确定每一个所述文字对应的第一编码，并将所述文本数据对应的所有第一编码以数组格式进行存储，得到文本编码；所述符号表包括图像哈希符号名称与第二编码；所述将所述图像数据输入感知哈希算法得到指纹数据，并根据所述符号表获取所述指纹数据对应的图像编码包括：将所述图像数据进行预处理，得到多个待处理图像；将所述多个待处理图像分别输入感知哈希算法得到多个指纹数据；将所述多个指纹数据分别转换为字符数据，根据所述字符数据中每一个字符对所述图像哈希符号名称进行检索，确定每一个所述字符数据对应的第二编码，并将所述第二编码以数组格式进行存储，得到图像编码。

如需购买、转让、实施、许可或投资类似专利技术，可联系本专利的申请人或专利权人国网福建省电力有限公司;国网福建省电力有限公司电力科学研究院，其通讯地址为：350003 福建省福州市鼓楼区五四路257号；或者联系龙图腾网官方客服，联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。