(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210605471.X (22)申请日 2022.05.30 (71)申请人 海信视像科技股份有限公司 地址 266555 山东省青岛市经济技 术开发 区前湾港路218号 (72)发明人 高伟　贾亚洲　周晓磊　祝欣培　 岳国华　李佳琳　付廷杰　李保成　 吴汉勇　 (74)专利代理 机构 北京弘权知识产权代理有限 公司 11363 专利代理师 李少丹　许伟群 (51)Int.Cl. G06F 3/01(2006.01) G06F 9/451(2018.01) G06V 40/20(2022.01) (54)发明名称 显示设备、 终端设备和手势交 互方法 (57)摘要 本申请一些实施例提供了一种显示设备、 终 端设备和手势交互方法。 显示设备可以生成包含 第一用户图像的手势识别指令或包含图像采集 指令的手势识别指令， 并发送至终端设备。 终端 设备根据第一用户图像可以生 成第一手势指令， 终端设备也可以根据图像采集指令采集第二用 户图像并根据第二用户图像生 成第二手势指令。 终端设备将第一手势指令或第二手势指令发送 给显示设备， 显示设备进一步可以执行。 因此， 当 显示设备无法采集用户图像时， 终端设备可以根 据图像采集指令采集图像从而识别用户指令， 当 显示设备可以采集用户图像， 但无法识别出图像 中的手势时， 终端设备也可以对用户图像进行识 别， 得到用户指令， 从而实现手势交互， 提高了用 户的体验性。 权利要求书2页 说明书17页 附图10页 CN 114924648 A 2022.08.19 CN 114924648 A 1.一种显示设备， 其特 征在于， 包括： 显示器； 图像输入接口， 被 配置为连接图像采集器， 图像采集器用于采集用户图像； 控制器， 被 配置为： 接收用户输入的手势交 互指令； 生成手势识别指令并发送至终端设备， 所述手势识别指令 中包含所述图像采集器采集 的第一用户图像或图像采集指令； 以使终端设备根据所述第一用户图像生成第一手势指 令， 或， 根据所述图像采集指令采集第二用户图像并根据所述第二用户图像生成第二手势 指令； 响应于终端设备发送的所述第 一手势指令或所述第 二手势指令， 执行所述第 一手势指 令或所述第二手势指令 。 2.根据权利要求1所述的显示设备， 其特 征在于， 所述控制器还被 配置为： 在执行接收用户输入的手势交 互指令的步骤后， 获取所述图像采集器采集的第一用户图像； 对所述第一用户图像进行手势识别处理， 得到所述第一用户图像中的第一用户手势； 获取所述第一用户手势的关联指令， 并确定为 第一手势指令； 执 行所述第一手势指令； 或， 执行生成手势 识别指令并发送至终端设备的步骤。 3.根据权利要求2所述的显示设备， 其特 征在于， 所述控制器还被 配置为： 在执行接收用户输入的手势交 互指令的步骤后， 获取显示设备的负载率情况； 根据所述负载率情况判断显示设备是否满足预设的第 一负载率条件， 所述第 一负载率 条件为： 在预设时间内， 显示设备的负载率超过 预设的第一阈值的次数达 到预设数值； 若是， 则执行生成手势识别指令并发送至终端设备的步骤； 若否， 则执行获取所述图像 采集器采集的第一用户图像的步骤。 4.根据权利要求3所述的显示设备， 其特 征在于， 所述控制器还被 配置为： 在执行生成手势 识别指令并发送至终端设备的步骤中， 根据所述负载率情况判断显示设备是否满足预设的第 二负载率条件， 所述第 二负载率 条件为： 在预设时间内， 显示设备的负载率超过预设的第二阈值的次数达到预设数值； 所述 第二阈值大于所述第一阈值； 若否， 则获取所述图像采集器采集的第一用户图像， 生成包含所述第一用户图像的第 一手势识别指 令并发送至终端设备； 若 是， 则生成包含图像采集指 令的第二手势识别指 令， 并发送至终端设备， 所述图像采集指令用于使终端设备采集第二用户图像。 5.根据权利要求2所述的显示设备， 其特 征在于， 所述控制器 被配置为： 在执行获取所述第一用户手势的关联指令的步骤前， 获取所述第一用户手势的置信度并检测； 基于检测到所述置信度 大于或等于预设的置信度阈值， 则执行获取所述第 一用户手势 的关联指令的步骤； 基于检测到所述置信度小于预设的置信度阈值， 则执行生成手势识别 指令并发送至终端设备的步骤， 且所述手势 识别指令中包 含图像采集指令 。 6.根据权利要求2所述的显示设备， 其特 征在于， 所述控制器还被 配置为：权　利　要　求　书 1/2 页 2 CN 114924648 A 2在执行接收用户输入的指示手势控制显示设备的指令的步骤后， 检测所述图像输入接口是否连接图像采集器； 若是， 则执行获取所述图像采集器采集的第一用户图像的步骤； 若否， 则执行生成手势 识别指令并发送至终端设备， 且所述手势识别指令中包含图像采集指令， 所述图像采集指 令用于使终端设备采集第二用户图像。 7.根据权利要求2所述的显示设备， 其特 征在于， 所述控制器还被 配置为： 在执行获取所述第一用户手势的关联指令的步骤前， 检测所述第一用户图像中是否包 含第一用户手势； 若是， 则执行获取所述第 一用户手势的关联指令的步骤； 若否， 则执行生成手势识别指 令并发送至终端设备的步骤， 且所述手势 识别指令中包括图像采集指令 。 8.根据权利要求1所述的显示设备， 其特 征在于， 所述控制器还被 配置为： 在执行生成手势 识别指令并发送至终端设备的步骤中， 对所述手势交 互指令进行检测； 如果所述手势 交互指令指示多个用户利用手势和显示设备进行交互， 则生成包含图像 采集指令的第二手势 识别指令， 并发送至终端设备； 和/或， 获取所述图像采集器采集的第一用户图像， 并根据 所述第一用户图像获取第一 手势指令； 在执行生成手势 识别指令并发送至终端设备的步骤后， 控制显示器显示所述第一用户图像和/或所述第二用户图像。 9.一种终端设备， 其特 征在于， 所述终端设备被 配置为： 接收显示设备发送的手势识别指令并检测， 手势识别指令 中包含第 一用户图像或图像 采集指令； 基于检测到所述手势识别指令 中包含第 一用户图像， 对所述第 一用户图像进行手势识 别处理， 得到第一用户手势； 获取所述第一用户手势关联的第一手势指令， 并将所述第一手 势指令发送至 显示设备； 基于检测到所述手势识别指令 中包含图像采集指令， 采集第 二用户图像并对所述第 二 用户图像进行手势识别处理， 得到第二用户手势； 获取所述第二用户手势相关联的第二手 势指令， 并将所述第一手势指令发送至 显示设备。 10.一种手势交 互方法， 应用于 显示设备， 其特 征在于， 所述方法包括： 接收用户输入的手势交 互指令； 生成手势识别指令并发送至终端设备， 所述手势识别指令 中包含第 一用户图像或图像 采集指令； 以使终端设备根据所述第一用户图像生成第一手势指令， 或， 根据所述图像采集 指令采集第二用户图像并根据所述第二用户图像生成第二手势指令； 响应于终端设备发送的所述第 一手势指令或所述第 二手势指令， 执行所述第 一手势指 令或所述第二手势指令 。权　利　要　求　书 2/2 页 3 CN 114924648 A 3