(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210843367.4 (22)申请日 2022.07.18 (71)申请人 中国工商银行股份有限公司 地址 100140 北京市西城区复兴门内大街 55号 (72)发明人 刘晓宇　顾鹏　王照　刘家奇　 (74)专利代理 机构 北京康信知识产权代理有限 责任公司 1 1240 专利代理师 周春枚 (51)Int.Cl. G06V 40/16(2022.01) G06V 40/20(2022.01) G06V 10/56(2022.01) G06V 10/80(2022.01) (54)发明名称 虚拟对象穿戴元素的生 成方法及其装置、 电 子设备 (57)摘要 本发明公开了一种虚拟对象穿戴元素的生 成方法及其装置、 电子设备， 涉及人工智能领域， 其中， 该生成方法包括： 基于目标客户的人脸特 征向量以及背景特征向量， 识别目标客户的当前 心情状态， 基于预设反色彩策略， 获取与当前心 情状态对应的目标色彩， 将RGB三原色通道输入 至预设生成模型， 生成虚拟对象的当前穿戴元 素。 本发明解决了相关技术中无法使虚拟对象 的 穿戴元素随客户心情进行变换的技 术问题。 权利要求书2页 说明书10页 附图3页 CN 114973385 A 2022.08.30 CN 114973385 A 1.一种虚拟对象穿戴元 素的生成方法， 其特 征在于， 包括： 基于目标客户的人脸特征向量以及背景特征向量， 识别所述目标客户的当前心情状 态； 基于预设反色彩策略， 获取与 所述当前心情状态对应的目标色彩， 其中， 所述目标色彩 至少包括： RGB三原色通道； 将所述RGB三原色通道输入至预设生成模型， 生成虚拟对象的当前穿戴元 素。 2.根据权利要求1所述的生成方法， 其特征在于， 在基于目标客户的人脸特征向量以及 背景特征向量， 识别所述目标客户的当前心情状态之前， 还 包括： 按照预设间隔周期， 获取所述目标客户在预设采集 时长的人脸视频， 其中， 所述人脸视 频包括： 多张人脸视频帧； 基于所述多张人脸视频帧， 提取 所述人脸特 征向量。 3.根据权利要求2所述的生成方法， 其特征在于， 基于所述多张人脸视频帧， 提取所述 人脸特征向量的步骤， 包括： 对所述人脸视频帧进行卷积处理， 降低所述人脸视频帧的最大池化分辨率， 得到对应 于每张所述人脸视频帧的目标 人脸视频帧； 对多张所述目标人脸视频帧进行均匀池化处理， 得到均匀池化处理后的目标人脸视频 帧集合； 基于所述目标 人脸视频帧集 合， 采用预设注意力策略， 提取 所述人脸特 征向量。 4.根据权利要求3所述的生成方法， 其特征在于， 在基于目标客户的人脸特征向量以及 背景特征向量， 识别所述目标客户的当前心情状态之前， 还 包括： 按照所述预设间隔周期， 获取所述目标客户在预设采集 时长的背景视频， 其中， 所述背 景视频包括： 多张背景视频帧； 对所述背景视频帧进行编码， 得到背景编码； 对所述背景编码进行注意力推理， 得到背景 特征数据； 采用预设注意力模块， 对所述背景特征数据进行卷积处理， 得到与所述人脸特征向量 大小相等的所述背景 特征向量。 5.根据权利要求4所述的生成方法， 其特征在于， 基于目标客户的人脸特征向量以及背 景特征向量， 识别所述目标客户的当前心情状态的步骤， 包括： 对所述人脸特征向量以及所述背景特征向量进行归一化处理， 得到维度相同的所述人 脸特征向量以及所述背景 特征向量； 采用预设融合网络， 对所述人脸特征向量和所述背景特征向量进行融合， 得到融合特 征向量； 采用预设分类策略， 对所述融合特征向量进行分类， 得到所述目标客户的所述当前心 情状态。 6.根据权利要求1所述的生成方法， 其特征在于， 在基于预设反色彩策略， 获取与所述 当前心情状态对应的目标色彩 之前， 还包括： 获取与各心情状态对应的基础色集 合； 选择与所述基础 色集合中各基础 色相反的色彩作为对应的心情状态的目标色彩， 生成 所述预设反色彩策略。权　利　要　求　书 1/2 页 2 CN 114973385 A 27.根据权利要求1所述的生成方法， 其特征在于， 将所述RGB三原色通道输入至预设生 成模型， 生成虚拟对象的当前穿戴元 素的步骤， 包括： 基于所述RGB三原色通道， 获取 所述虚拟对象的表面嵌入特 征； 采用预设动作策略， 提取 所述虚拟对象在预设时间段内的多个动作数据； 采用预设动作编码器， 将所述动作数据转换为动作特 征； 结合所述表面嵌入特 征与多个所述动作特 征， 得到结合特 征； 基于所述结合特征， 采用预设解码器， 为所述虚拟对象的每个像素建立对应关系， 其 中， 所述对应关系为所述表面嵌入特征表征的表 面色彩与所述动作特征表征的动作之 间的 对应关系； 基于所述对应关系， 生成所述虚拟对象的所述当前穿戴元 素。 8.一种虚拟对象穿戴元 素的生成装置， 其特 征在于， 包括： 识别单元， 用于基于目标客户的人脸特征向量以及背景特征向量， 识别所述目标客户 的当前心情状态； 获取单元， 用于基于预设反色彩策略， 获取与所述当前心情状态对应的目标色彩， 其 中， 所述目标色彩至少包括： RGB三原色通道； 生成单元， 用于将所述RGB三原色通道输入至预设生成模型， 生成虚拟对象的当前穿戴 元素。 9.一种计算机可读存储介质， 其特征在于， 所述计算机可读存储介质包括存储的计算 机程序， 其中， 在所述计算机程序运行时控制所述计算机可读存储介质所在设备执行权利 要求1至7中任意 一项所述的虚拟对象穿戴元 素的生成方法。 10.一种电子设备， 其特征在于， 包括一个或多个处理器和存储器， 所述存储器用于存 储一个或多个程序， 其中， 当所述一个或多个程序被所述一个或多个处理器执行时， 使得所 述一个或多个处 理器实现权利要求1至7中任意 一项所述的虚拟对象穿戴元 素的生成方法。权　利　要　求　书 2/2 页 3 CN 114973385 A 3