买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
申请/专利权人:平安科技(深圳)有限公司
摘要:本发明涉及人工智能技术领域,尤其涉及一种虚拟形象合成方法、装置、设备及存储介质。该虚拟形象合成方法包括获取业务人员的多模态输入数据;将个人信息、业务人员的人体图像以及历史服务音视频输入至预先构建好的多模态虚拟形象生成网络中进行多模态识别,以输出业务人员的基础虚拟形象;若当前对话场景为离线场景,则基于所述基础虚拟形象,调用智能对话模块进行初始服务,并实时接收对话数据;通过多模态虚拟形象生成网络基于所述对话数据,识别当前时刻的对话阶段,以输出对话阶段对应的交互特征;基于所述交互特征以及所述基础虚拟形象,合成当前时刻的虚拟形象视频帧。该方法可无需业务人员实时在线即可通过虚拟形象对客户进行服务。
主权项:1.一种虚拟形象合成方法,其特征在于,包括:获取业务人员的多模态输入数据;其中,所述多模态输入数据包括个人信息、人体图像以及历史服务音视频;将所述个人信息、业务人员的人体图像以及历史服务音视频输入至预先构建好的多模态虚拟形象生成网络中进行多模态识别,以输出所述业务人员的基础虚拟形象;若当前对话场景为离线场景,则基于所述基础虚拟形象,调用智能对话模块进行初始服务,并实时接收对话数据;通过所述多模态虚拟形象生成网络基于所述对话数据,识别当前时刻的对话阶段,以输出所述对话阶段对应的交互特征;所述通过所述多模态虚拟形象生成网络基于所述对话数据,识别当前时刻的对话阶段,以输出所述对话阶段对应的交互特征,包括,对所述对话数据进行过滤,得到有效字符串;将所述有效字符串输入至预先构建好的多模式匹配树中进行多模式匹配,确定当前时刻的对话阶段;通过所述多模态虚拟形象生成网络基于所述对话阶段,输出当前时刻所述对话阶段对应的交互特征;所述多模式匹配树包括成功指针、失败指针和根节点;所述将所述有效字符串输入至预先构建好的多模式匹配树中进行多模式匹配,确定当前时刻的对话阶段,包括,遍历所述有效字符串,并基于所述多模式匹配树,依序对所述有效字符串中的待匹配字符进行关键字匹配;若上一时刻所述多模式匹配树中存在匹配成功的第一匹配字符,则将所述第一匹配字符作为当前时刻的匹配起始节点;按照所述成功指针的路径,将成功指针指向下一节点对应的特定字符;其中,所述下一节点为所述成功指针路径中与所述匹配起始节点相邻的下一个或多个节点;若所述特定字符与第二匹配字符匹配,则将所述第二匹配字符作为当前时刻的匹配起始节点;其中,所述第二匹配字符指所述待匹配字符中所述第一匹配字符的下一顺序字符;重复执行按照所述多模式匹配树中成功指针的路径,将成功指针指向下一节点对应的特定字符的步骤,直至所述成功指针指向目标终止节点且所述终止节点对应的失败指针指向所述根节点,获取目标终止节点;基于根节点和目标终止节点按照所述成功指针的路径进行遍历,确定对话主题词对应的对话阶段;基于所述交互特征以及所述基础虚拟形象,合成当前时刻的虚拟形象视频帧。
全文数据:
权利要求:
百度查询: 平安科技(深圳)有限公司 虚拟形象合成方法、装置、计算设备及存储介质
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。