买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
申请/专利权人:中影年年(北京)科技有限公司
摘要:本发明涉及数据处理技术领域,更具体涉及一种用于虚拟对象社交互动与情感反馈的智能方法及系统,包括:确定目标对象的图像、声音和性格特征,定义虚拟对象,分别提取第一面部数据和第一音色数据,基于目标对象的性格特征,从视频库中选择目标视频,将第一面部数据合成到目标视频的相应部位,从性格库中选择第一性格数据,从对话模板中获取第一说话内容,还生成虚拟对象的语音数据,将虚拟对象的动作基础和语音数据集成在一起,生成虚拟对象说话的视频;基于第一拍摄数据获取目标用户的属性信息和当前的情绪状态,生成目标用户当前情绪状态的情绪符号,更新虚拟对象说话的视频。提高了虚拟对象的社交互动能力和情感反馈的准确性。
主权项:1.一种用于虚拟对象社交互动与情感反馈的智能方法,其特征在于,所述方法包括:步骤S1:确定目标对象的图像、声音和性格特征;步骤S2:定义虚拟对象,分别从所述目标对象的图像中提取第一面部数据,所述声音中提取第一音色数据,基于所述目标对象的性格特征,从视频库中选择与所述目标对象的性格特征相似度最大的视频数据作为目标视频,将所述第一面部数据合成到所述目标视频的相应部位,并将所述目标视频作为所述虚拟对象的动作基础,其中,所述视频库中存储了多种类型的视频数据;步骤S3:基于所述目标对象的性格特征,从性格库中选择最接近所述目标对象性格特征的第一性格数据,基于所述第一性格数据,从对话模板中获取第一说话内容,还基于所述第一音色数据利用语音合成技术生成所述虚拟对象的语音数据,将所述虚拟对象的所述动作基础和所述语音数据集成在一起,生成所述虚拟对象说话的视频,其中,所述语音数据包括音色、语调、语速和情感表达,所述虚拟对象说话的视频与所述语音数据是同步的,所述性格库中存储了多种性格特征的性格数据;步骤S4:基于第一拍摄数据获取目标用户的属性信息,基于所述目标用户输入的第一语音数据,识别所述目标用户当前的情绪状态,基于所述目标用户的属性信息和当前的所述情绪状态,记录所述目标用户的第一情绪反应数据,其中,所述第一拍摄数据表示所述虚拟对象与所述目标用户在第一次交互时拍摄的所述目标用户的面部或身体的图像信息,所述第一语音数据表示所述虚拟对象与所述目标用户第一次交互时通过语音输入设备获取的语音信息;步骤S5:基于所述目标用户的第一情绪反应数据,生成所述目标用户当前情绪状态的情绪符号,将所述虚拟对象说话的视频与所述情绪符号相结合,更新所述虚拟对象说话的视频,并显示在所述目标用户的终端设备上与所述目标用户进行交互,同时存储所述目标用户的第一情绪反应数据和所述虚拟对象说话的视频。
全文数据:
权利要求:
百度查询: 中影年年(北京)科技有限公司 用于虚拟对象社交互动与情感反馈的智能方法及系统
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。