非显而易见性评估仅供参考,不构成法律建议。
| 编号 | 名称 |
|---|
一种用于多个帧之间的光流估计的装置,包括;存储器;所述存储器被配置成;存储与所述多个帧相对应的数据;以及;一个或多个处理器;所述一个或多个处理器被配置成;确定第一帧和第二帧中的至少一者的像素子集;其中确定所述像素子集包括标识所述第一帧的对应于第一感兴趣区域的第一像素;标识所述第一帧的对应于第二感兴趣区域的第二像素;并且包括将所述第一像素包括在所述像素子集内并将所述第二像素从所述像素子集中排除;生成指示所述像素子集的掩模;基于所述掩模来确定与至少所述第一帧和所述第二帧的所述像素子集相关联的一个或多个特征;确定所述第一帧的所述像素子集与所述第二帧的对应像素之间的光流向量;以及;使用所述光流向量来生成所述第二帧的光流图。
如权利要求1所述的装置,其中;所述一个或多个处理器被配置成;使用机器学习算法来确定至少所述第一帧和所述第二帧的所述像素子集。
如权利要求1所述的装置,其中;为了确定至少所述第一帧和所述第二帧的所述像素子集;所述一个或多个处理器被配置成;标识与两个对象之间的边界相对应的至少一个像素。
如权利要求1所述的装置,其中;为了确定至少所述第一帧和所述第二帧的所述像素子集;所述一个或多个处理器被配置成;对所述第一帧内预定数目的像素进行采样。
如权利要求1所述的装置,其中;至少所述第一帧和所述第二帧的所述像素子集包括具有未被包括在所述像素子集中的毗邻像素的至少一个像素。
如权利要求5所述的装置,其中;为了基于所述掩模来确定所述一个或多个特征;所述一个或多个处理器被配置成;确定与所述至少一个像素的所述毗邻像素相对应的特征信息;以及;与所述至少一个像素相关联地存储与所述毗邻像素相对应的所述特征信息。
如权利要求6所述的装置,其中;所述一个或多个处理器被配置成;使用与所述毗邻像素相对应的所述特征信息来确定所述至少一个像素与所述第二帧的对应像素之间的光流向量。
如权利要求1所述的装置,其中;所述一个或多个处理器被配置成;确定包括所述第一帧和所述第二帧的帧序列内的帧的重要性值;以及;基于所述重要性值来选择所述帧序列内的用于执行光流估计的帧。
如权利要求8所述的装置,其中;所述一个或多个处理器被配置成;基于确定所述第二帧的重要性值超过阈值重要性值来选择所述第二帧以用于执行光流估计。
如权利要求1所述的装置,其中;所述一个或多个处理器包括神经处理单元NPU。
如权利要求1所述的装置,其中;所述装置包括移动设备。
如权利要求1所述的装置,其中;所述装置包括扩展现实设备。
如权利要求1所述的装置,进一步包括显示器。
如权利要求1所述的装置,其中;所述装置包括被配置成捕获一个或多个帧的相机。