买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
申请/专利权人:合肥工业大学
摘要:本发明公开了一种有图像引导的故事结尾生成模型的迭代式对抗攻击方法,本发明以有效地对文本‑图像样本对进行不可感知的攻击,将图像模态攻击融合到文本模态攻击中,当原始文本中的每一个小的扰动都变成连续空间时,迭代地扰动图像模态,这样就可以对图像引导的故事结尾生成模型的对抗性文本和图像进行攻击搜索,而不是独立搜索(单模态攻击方法)。实验结果表明,迭代式对抗攻击方法在攻击成功率和语义相似度方面优于现有的单模态对抗性攻击方法(kNN和WordSwap)和多模态对抗性攻击方法(Co‑attack)。
主权项:1.一种有图像引导的故事结尾生成模型的迭代式对抗攻击方法,其特征在于:具体包括如下步骤:1输入原始文本和原始图像,从故事上下文中选择出易受攻击的词,即目标词;为每一个目标词生成多个替代词,逐个用替代词取代目标词,生成潜在的对抗文本;2将生成的潜在的对抗文本作为监督信息和原始图像输入到图像攻击算法中寻找最容易影响目标模型输出的图文信息对;如果所述易受攻击的词所对应的所有的替代词都不能达到攻击目标,则选择使得目标模型损失值最大的替代词取代该目标词,然后继续对下一个目标词用相应的替代词进行取代,迭代式地寻找最易受到攻击的图文信息对,直到攻击成功,生成多模态对抗样本;3攻击目标:将生成的多模态对抗样本输入到目标模型中生成的故事结尾的质量相对于原始文本和原始图像作为输入生成的故事结尾的质量低于预设的阈值。
全文数据:
权利要求:
百度查询: 合肥工业大学 有图像引导的故事结尾生成模型的迭代式对抗攻击方法
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。