(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210557159.8 (22)申请日 2022.05.20 (71)申请人 北京字跳网络技 术有限公司 地址 100190 北京市海淀区紫金 数码园4号 楼2层0207 (72)发明人 高林森　 (74)专利代理 机构 北京远智汇知识产权代理有 限公司 1 1659 专利代理师 刘欣 (51)Int.Cl. G06T 11/00(2006.01) G06F 9/451(2018.01) (54)发明名称 交互方法、 装置、 设备及存 储介质 (57)摘要 本公开实施例提供了一种交互方法、 装置、 设备及存储介质。 在视频播放过程中， 获取与所 述视频相关的至少一个特效物体； 其中， 所述至 少一个特效物体由第一材质和/或第二材质构 成； 将所述至少一个特效物体渲染至视频界面； 当检测到用户对目标特效物体触发的交互操作 时， 显示所述目标特效物体关联的内容。 本公开 实施例公开的交互方法， 用户可以通过触发特效 物体实现与终端设备的交互， 不仅丰富了用户在 观看短视频时的交 互方式， 且提高了互动性。 权利要求书2页 说明书13页 附图4页 CN 114898006 A 2022.08.12 CN 114898006 A 1.一种交 互方法， 其特 征在于， 包括： 在视频播放过程中， 获取与所述视频相关的至少一个特效物体； 其中， 所述至少一个特 效物体由第一材质和/或第二材质构成； 将所述至少一个特效物体渲染至 视频界面； 当检测到用户对目标特效物体触发的交互操作时， 显示所述目标特效物体关联的内 容。 2.根据权利要求1所述的方法， 其特征在于， 所述至少一个特效物体在视频播放过程中 静止于视频界面， 和/或在视频播 放过程中以设定方式运动。 3.根据权利要求2所述的方法， 其特征在于， 将所述至少一个特效物体渲染至视频界 面， 包括： 获取所述至少一个特效物体的材质信息及在视频帧中的运动状态信息； 其中， 所述运 动状态信息包括 位置信息、 姿态信息及运动速度； 基于所述材质信息和所述 运动状态信息将所述至少一个特效物体渲染至 视频界面。 4.根据权利要求3所述的方法， 其特征在于， 获取所述至少一个特效物体在视频帧中的 运动状态信息， 包括： 对于当前视频帧， 获得终端设备当前的姿态信 息以及所述至少一个特效物体在上一视 频帧中的运动状态信息； 根据所述姿态信息和所述上一视频帧中的运动状态信息确定所述至少一个特效物体 在当前视频帧中的运动状态信息 。 5.根据权利要求1所述的方法， 其特 征在于， 显示所述目标 特效物体关联的内容， 包括： 将当前视频界面跳转至所述目标特效物体关联的内容所在的页面或者虚拟房间； 或 者， 弹出目标窗口， 在所述目标窗口中显示所述目标 特效物体关联的内容。 6.根据权利要求3所述的方法， 其特征在于， 基于所述材质信 息和所述运动状态信 息将 所述至少一个特效物体渲染至 视频界面， 包括： 根据所述材质信 息对所述至少一个特效物体进行分组， 获得第 一材质特效物体和第 二 材质特效物体； 其中， 第一材质为非折 射材质， 第二材质为 折射材质； 根据所述 运动状态信息对所述第一材质特效物体进行渲染， 获得第一纹 理； 基于所述第 一纹理和所述运动状态信 息对所述第 二材质特效物体进行渲染， 获得目标 纹理； 将所述目标纹 理显示于 视频界面。 7.根据权利要求6所述的方法， 其特征在于， 根据 所述运动状态信 息对所述第 一材质特 效物体进行渲染， 获得第一纹 理， 包括： 根据所述运动状态信 息采用第 一虚拟相机对所述第 一材质特效物体进行渲染， 获得第 一纹理； 基于所述第 一纹理和所述运动状态信 息对所述第 二材质特效物体进行渲染， 获得目标 纹理， 包括： 基于所述第一纹理和所述运动状态信息采用第二虚拟相机对所述第二材质特效物体 进行渲染， 获得目标纹 理。权　利　要　求　书 1/2 页 2 CN 114898006 A 28.根据权利要求6所述的方法， 其特征在于， 根据 所述运动状态信 息对所述第 一材质特 效物体进行渲染， 获得第一纹 理， 包括： 若当前视频帧为首帧， 则创建空纹理； 若所述当前帧为非首帧， 则将上一视频帧的第一 纹理进行清除， 获得空 纹理； 根据所述 运动状态信息将所述第一材质特效物体渲染至所述空 纹理， 获得第一纹 理。 9.根据权利要求6所述的方法， 其特征在于， 基于所述第 一纹理和所述运动状态信 息对 所述第二材质特效物体进行渲染， 获得目标纹 理， 包括； 将上一视频帧的目标纹 理进行清除， 获得空的帧缓冲纹 理； 基于所述第一纹理和所述运动状态信息将所述第二材质特效物体渲染至所述空的帧 缓冲纹理， 获得目标纹 理。 10.根据权利要求9所述的方法， 其特征在于， 基于所述第一纹理和所述运动状态信息 将所述第二材质特效物体渲染至所述空的帧缓冲纹 理， 获得目标纹 理， 包括： 将所述第一纹 理中的图像数据渲染至所述空的帧缓冲纹 理， 获得中间帧缓冲纹 理； 获取所述第二材质的折 射参数； 基于所述 折射参数确定所述中间帧缓冲纹 理中像素点的目标位置信息； 根据所述目标位置信 息从所述第 一纹理中采样第 一像素值， 从所述第 二材质特效物体 的图像数据中采样第二像素值； 对所述第一像素值和所述第二像素值进行融合， 获得目标像素值； 将所述目标像素值更新至所述中间帧缓冲纹 理， 获得目标纹 理。 11.根据权利要求10所述的方法， 其特征在于， 基于所述折射参数确定所述中间帧缓冲 纹理中像素点的目标位置信息， 包括： 根据所述 运动状态信息确定所述中间缓存帧中的目标像素点； 基于所述 折射参数确定所述目标像素点的偏移信息； 根据所述偏移信息和所述目标像素点在所述中间缓存帧中的位置信息确定所述目标 像素点的目标位置信息 。 12.一种交 互装置， 其特 征在于， 包括： 特效物体获取模块， 用于在视频播放过程中， 获取与所述视频相关的至少一个特效物 体； 其中， 所述至少一个特效物体由第一材质和/或第二材质构成； 特效物体渲染模块， 用于将所述至少一个特效物体渲染至 视频界面； 内容显示模块， 用于当检测到用户对目标特效物体触发的交互操作时， 显示所述目标 特效物体关联的内容。 13.一种电子设备， 其特 征在于， 所述电子设备包括： 一个或多个处 理器； 存储装置， 用于存 储一个或多个程序， 当所述一个或多个程序被所述一个或多个处理器执行， 使得所述一个或多个处理器实 现如权利要求1 ‑11中任一所述的交 互方法。 14.一种包含计算机可执行指令的存储介质， 所述计算机可执行指令在由计算机处理 器执行时用于执 行如权利要求1 ‑11中任一所述的交 互方法。权　利　要　求　书 2/2 页 3 CN 114898006 A 3