非显而易见性评估仅供参考,不构成法律建议。
| 编号 | 名称 |
|---|---|
| 0 | 3gpp文件_+++A_C_D_E_F_G_I_J_b_h_k_l_m+++.docx |
| 0 | 发明公开_CN103247020A 一种基于径向特征的鱼眼图像展开方法_+++A_B_c+++.docx |
| 0 | 发明公开_CN104408732A 一种基于全向结构光的大视场深度测量系统及方法_+++B+++.docx |
| 0 | 发明申请_US20030103063A1 Panoramic imaging and display system with canonical magnifier_+++B_c+++.docx |
| 0 | 发明申请_US20090167886A1 IMAGE CONVERTER AND IMAGE CONVERTING METHOD_+++B_a+++.docx |
| 0 | 发明申请_US20120201521A1 Provision of Supplemental Processing Information_+++F_G_I_K_h_j+++.docx |
| 0 | 发明申请_US20140192151A1 INDICATION OF PRESENCE OF TEXTURE AND DEPTH VIEWS IN TRACKS FOR MULTIVIEW CODING PLUS DEPTH_+++E_H_f_i+++.docx |
| 0 | 发明申请_US20150304665A1 METHOD AND APPARATUS FOR VIDEO CODING AND DECODING_+++G_I_J_K_L_M_d_e_f+++.docx |
| 0 | 发明申请_US20160073024A1 IMAGING SYSTEM, IMAGING APPARATUS, AND SYSTEM_+++A_B_D_E_c+++.docx |
| 0 | 发明授权_US6005611A Wide-angle image dewarping method and apparatus_+++A_B_c_d_e+++.docx |
| 0 | 发明专利_JP5843033B1 撮像システム、撮像装置、プログラムおよびシステム_+++A_B_D+++.docx |
| 0 | 发明专利_JP2016506693A マルチビューコード化プラス深度のためのトラックにおけるテクスチャビューと深度ビューの存在の指示_+++F_G_I_j_m+++.docx |
| 0 | 发明专利_JP2016515634A ポリオルガノシルセスキオキサン粒子を含有する口腔ケア組成物.docx |
一种处理视频数据的方法,其包括: 获得由全向摄像机捕捉的360度视频数据,其中所述360度视频数据的视频帧包括包含场景的图像,且其中,在所述图像中,所述场景经扭变成所述图像的圆形区域; 获得与所述全向摄像机相关联的参数值,其中所述参数值包含:所述图像中的圆形区域的数量、标识所述圆形区域的中心的水平坐标的值、标识所述圆形区域的中心的垂直坐标的值、全半径值、场景半径值、视野值、指示在所述图像内的包含不可用像素的零值区的数量的值、指示在所述图像内的包含所述不可用像素的至少一部分的零值区域的位置的一或多个值、以及指示在所述图像内的包含所述不可用像素的所述至少一部分的零值区域的大小的一或多个值; 编码所述360度视频数据,其中所述编码包含编码所述图像的所述圆形区域;以及产生经编码视频数据,其中所述经编码视频数据包含所述经编码360度视频数据及与所述全向摄像机相关联的所述参数值。
你好,我是你的专利代理师协作助手。针对你提出的技术特征C是否被对比文件(下文简称D1-D4)公开的问题,我进行了深度比对分析。
技术特征C的核心在于定义了一套完整的鱼眼视频参数集,不仅包含基础的几何参数(数量、中心坐标、半径、视角),还涵盖了用于处理非理想成像的零值区(不可用像素区)的数量、位置和大小。
以下是详细的分析过程:
为了精确比对,我们将技术特征C拆解为以下子特征:
C1: 圆形区域的数量
C2: 圆形区域中心的水平坐标值 ($x$) 和垂直坐标值 ($y$)
C3: 全半径值 ($full\_radius$)、场景半径值 ($scene\_radius$)
C4: 视野值 ($FOV$)
C5: 指示零值区(不可用像素)的数量
C6: 零值区域的位置(一或多个值)
C7: 零值区域的大小(一或多个值)
| 技术特征C子项 | D1 (CN'020A) | D2 (US'611A) | D3 (US'063A1) | D4 (US'024A1) |
| C1 数量 | 隐含(单镜头/多镜头) | 明确公开(Fig.8 六镜头) | 明确公开 | 明确公开(两镜头) |
| C2 中心坐标 | 明确公开 (圆点) | 明确公开 ($U_{origin}, V_{origin}$) | 明确公开 | 明确公开 |
| C3 半径值 | 明确公开 (R/r) | 明确公开 ($RADIUS$) | 明确公开 ($R$) | 明确公开 |
| C4 视野值 | 明确公开 (360度) | 明确公开 ($fov$) | 明确公开 (180度) | 明确公开 |
| C5 零值区数量 | 提到“遮挡区域” | 未明确作为参数传递 | 未明确作为参数传递 | 未明确作为参数传递 |
| C6 零值区位置 | 未明确参数化 | 未明确参数化 | 未明确参数化 | 未明确参数化 |
| C7 零值区大小 | 未明确参数化 | 未明确参数化 | 未明确参数化 | 未明确参数化 |
D2 公开了鱼眼图像展开的核心参数化建模方法,公开了大部分几何特征:
C2 (中心坐标): 见说明书第6栏第36-37行:“...has a radius 220 equal to RADIUS pixels with an origin at UORIGIN and VORIGIN.”。
C3 (半径): 见说明书第6栏第35-36行:“The warped image in the U-V plane... has a radius 220 equal to RADIUS...”。
C4 (视野): 见说明书第7栏第6-8行:“...computed at the field of view angles fov-h and fov-v from the primary viewing vector”。
缺陷: D2 虽然在背景技术中提到了鱼眼图像边缘存在压缩和数据损失,但并未将“不可用像素的零值区(数量、位置、大小)”作为一种编码在视频数据中并随位流产生的参数值。
D1 重点在于通过“长轴R和短轴r”来处理非标准圆形图像:
C3 (半径): 见权利要求1步骤1):“确定变换图像的长轴R和短轴r”。
关于零值区的暗示: 见说明书[0015]段:“通过选择合适的长轴R和短轴r可以消除以去除由于镜头安装产生的遮挡区域”。
分析: D1 虽然意识到了“遮挡区域(不可用像素)”的存在,并尝试通过调整半径范围来避开它,但它将此视为一种预设的变换算法步骤,而非本申请中所主张的:作为参数值随经编码视频数据一起产生的元数据。且 D1 未提及“零值区的数量、位置和大小”这一组具体的参数组合。
D4 主要涉及双镜头鱼眼相机的实时倾斜校正:
C1 (数量): 见[0031]段,描述了包含“两个鱼眼透镜”的摄像机。
分析: D4 侧重于倾斜角($\alpha, \beta$)的检测和转换表的修正。它记录的是时间轴上的“倾斜数据(Tilt data)”,并未公开关于图像内部“零值区(Deadzone)”的具体描述。
没有任何一份对比文件毫无疑义地实质公开了技术特征C的全集。
差异点点睛: 特征C中关于“零值区的数量、位置、大小的一或多个值”被包含在编码后的视频参数集中,这一技术特征在 D1-D4 中均未被明确公开。
即使将 D2 的几何参数模型与 D1 的“去除遮挡区域”意图相结合:
D1 仅仅是建议通过缩小 R/r 范围来“切除”边缘。
本申请特征 C 则是定义了一种复杂的区域描述参数(数量、位置、大小)。
在 360 度视频编码领域(如 OMAF 标准早期草案),如何高效传信不可用像素区域以节省带宽是一个特定技术问题。本特征提供了具体的参数集实现。
结论建议:
技术特征 C 具有新颖性和创造性。现有的对比文件仅公开了如何通过几何参数(中心、半径、FOV)来定位鱼眼区域,但未公开如何通过一组具体的参数(数量、位置、大小)来标识并传信图像帧内不规则分布的、包含不可用像素的“零值区”。
作为后续步骤,如果您需要,我可以为您撰写一份针对特征C的抗辩理由,或者帮您检索是否存在公开了“零值区参数传信”的更具体的标准文档(如 MPEG-V 或 OMAF 相关草案)。您需要我这样做吗?
你好,我是你的专利代理师协作助手。针对你提出的基于对比文件 1(下文简称 D1:JP2006343946A)是否可以无效权利要求 1 的问题,我进行了深入的特征比对与法律分析。
权利要求 1 涉及一种处理视频数据的方法,核心在于将 360 度全向视频数据(鱼眼视频) 与一组极其详尽的 “摄像机相关参数值” 结合进行编码和产生视频文件。
其技术核心在于特征 C 描述的参数集,这组参数不仅包括常规的中心坐标、半径,还特别包含了对 “零值区(不可用像素区)” 的数量、位置和大小的传信。
| 权利要求 1 的技术特征 | 对比文件 D1 (JP2006343946A) 公开内容及原文出处 | 比对结论 |
| A: 一种处理视频数据的方法,包括获得全向摄像机捕捉的 360 度视频数据 | 未公开。 D1 涉及的是“メモリアクセス制御装置(存储器访问控制装置)”,其应用领域虽然提到 MFP(多功能打印机)等图像处理装置([0010]),但其核心方法是存储器调停。 | 不实质公开 |
| B: 视频帧包括扭变成圆形区域的场景图像;获得与摄像机相关联的参数值 | 未实质公开。 D1 提到 SDRAM 中保持位图数据([0014]),但未涉及鱼眼扭变图像及相关联的“摄像机参数”。 | 不实质公开 |
| C: 参数包含:区域数量、中心坐标(水平/垂直)、全半径、场景半径、视野、零值区数量、位置、大小 | 未公开。 D1 测量的参数是“存储器访问带宽(メモリ消費帯域)”([0015])以及“空闲时间(アイドル時間)”([0016]),完全不涉及视频图像的几何或光学参数。 | 不公开 |
| D: 编码 360 度视频数据,包括编码圆形区域 | 未公开。 D1 不涉及视频编解码算法。 | 不公开 |
| E: 产生包含经编码视频数据及上述参数值的编码视频数据 | 未公开。 D1 产生的是电源模式切换指令(CKE信号)([0016]),而非视频位流。 | 不公开 |
本专利: 属于视频信号处理领域。其目的是为了在 360 度视频中,通过将鱼眼参数(如零值区)嵌入视频流,使解码器能够识别并忽略不可用像素(如相机支架遮挡的部分),从而提高渲染效率和图像质量。
对比文件 D1: 属于计算机体系结构/存储器控制领域。其目的是根据存储器访问频率,动态调整进入“低功耗模式”的等待时间(Idle Time),以平衡性能和功耗。
权利要求 1 中的特征 C 定义了一组非常具体的元数据(Metadata):
本专利参数:圆形区域数量、全半径、零值区位置/大小。
D1 参数:閾値 a1, a2、アイドル時間条件 ti。
分析: 即使 D1 在段落 [0015] 提到了“判定多个等级(Class)”,但这指的是带宽的使用等级,与视频图像内部的“零值区域”没有任何关联。本专利中的“零值区”是指图像中由于物理遮挡或传感器限制而产生的不可用像素点(如说明书图 6B 所示的摄像机主体)。
结论:基于对比文件 D1,权利要求 1 是无法被无效的。
新颖性: 权利要求 1 的几乎所有实质性特征(A-E)在 D1 中均未被公开。D1 与本专利的技术方案属于完全不同的技术轨道。
创造性: D1 无法提供任何将“存储器空闲时间控制”与“鱼眼视频参数传信”相结合的技术启示。本领域的普通技术人员在面对优化 360 度视频渲染的技术问题时,不会想到去借鉴存储器访问控制的算法。
对比文件 D1 (JP2006343946A) 是一个完全不相关的现有技术,它仅在“图像处理装置”这一大背景下重合,但具体到权利要求 1 的视频数据处理逻辑,没有任何杀伤力。
如果您需要无效权利要求 1,我建议您重新检索以下方向的对比文件:
ISO/IEC 23090-2 (OMAF) 标准草案: 关注其中关于鱼眼视频元数据(Fisheye Video Metadata)的提案。
MPEG-I 相关技术提案: 尤其是针对“Region-wise Packing”或“Coverage Information”的描述,可能公开了类似特征 C 的参数集。
理光(Ricoh)、三星、GoPro 等公司的早期鱼眼视频处理专利: 他们在 2015-2016 年左右有大量关于鱼眼图像参数化建模的专利申请。
需要我为您针对上述方向重新进行一次检索分析吗?
你好!作为一名经验丰富的专利代理师,我非常乐意协助你完成这项专利权利要求的对比分析。
针对你提供的目标专利说明书以及5篇对比文件,我将从权利要求的深度解读、对比文件的特征比对、以及最接近的对比文件(CPA)的选取三个维度为你进行详尽的剖析。为了帮助你更直观地理解,我会在适宜的地方触发相关的技术原理示意图。
目标专利权利要求1的核心发明点在于提出了一种避免在存储或传输前将鱼眼图像转换为中间格式(如等矩形格式)的360度视频处理机制。 传统技术中,全向摄像机捕捉到的鱼眼图像由于具有严重的扭曲,通常会先被拼接和映射成等矩形等中间格式。这种转换不仅消耗计算资源、增加延迟,还可能导致边缘像素拉伸和画质受损。
目标专利的解决方案是:直接编码未展开的“包含圆形区域的鱼眼视频”,并将其与精确描述这些圆形区域扭曲特性的“参数值”打包成经编码的视频数据一并输出。 这些参数非常精细(对应技术特征C),不仅包含常规的圆心坐标和视野值,还特别引入了:
全半径值 (Full Radius) / 场景半径值 (Scene Radius):用于区分理论透镜能捕捉的区域和实际避开摄像机机身遮挡的有效区域。
不可用像素的零值区 (Dead zones):指出了由于图像传感器为矩形而鱼眼图像为圆形,导致边角未曝光或无用像素的数量、位置和大小。
通过将这些精细的物理和几何参数与视频数据一起编码(技术特征D、E),播放端可以直接将原始鱼眼数据映射到球面进行渲染,省去了中间格式转换,提高了效率和画质。
为方便表述,以下将5篇对比文件简称为D1-D5:
D1: JP5843033B1 (撮像システム...)
D2: CN103247020A (一种基于径向特征的鱼眼图像展开方法)
D3: US6005611A (Wide-angle image dewarping method and apparatus)
D4: US20090167886A1 (IMAGE CONVERTER AND IMAGE CONVERTING METHOD)
D5: US20160073024A1 (IMAGING SYSTEM...)
注:D1与D5属于同族专利(D5为D1的PCT美国阶段或相关延续案),其技术内容高度一致,主要探讨带有两个鱼眼镜头、利用加速度传感器记录倾斜角并写入视频文件以供后续转换的全向摄像机系统。
技术特征A(获得由全向摄像机捕捉的360度视频数据)
D1/D5 (毫无异议公开):D5原文 [0049] 段落记载:“The imaging unit 212... controls the two imaging elements 130A and 130B to sequentially capture images of successive frames.”(摄像单元212控制两个摄像元件连续捕捉帧图像),且 [0036] 段落明确了其用于生成“omnidirectional image(全向图像)”。
D3 (实质公开):提及使用半球形鱼眼镜头捕捉真实世界场景的视频信号([2] A high resolution video camera 10 having a wide angle lens 20, such as a hemispherical fisheye lens...)。
技术特征B(视频帧包括场景图像,场景经扭变成圆形区域)
D1/D5 (毫无异议公开):D5原文 [0067] 段落记载:“The partial image obtained from this lens is a planar image including the entire image circle...”(从此镜头获得的部分图像是包含整个图像圆的平面图像)。
D2 (实质公开):提及“圆形全向图像”和鱼眼成像产生的变形现象([0003] 将圆形全向图展开为矩形全景图...)。
D3 (毫无异议公开):原文记载了图像由于鱼眼镜头而发生光学扭曲,且在U-V平面上呈圆形([2] ...the digitized warped image will be roughly circular in the U-V plane.)。
技术特征C(参数值包含:圆形区域数量、中心坐标、全半径、场景半径、视野、零值区数量/位置/大小等)
D1/D5 (未公开):虽然D1/D5公开了将倾斜角数据(tilt angles)和附加信息(additional information)写入视频文件(详见D5 [0076]:“writes, into the video file, additional information needed... to convert the images”),但并未明确公开目标专利中列出的这套极其具体的几何特征参数(如场景半径、不可用的零值区等)。
D2 (部分实质公开):公开了长轴R、短轴r([0007] 确定变换图像的长轴R和短轴r),但未公开零值区等其它完整参数集。
D3 (部分实质公开):明确公开了图像具有半径(RADIUS)以及中心原点(UORIGIN, VORIGIN)([2] The warped image in the U-V plane... has a radius 220 equal to RADIUS pixels with an origin at UORIGIN and VORIGIN.),但同样未公开“场景半径”或“不可用像素的零值区”。
D4 (部分实质公开):公开了半径R和原点O([0011] ...having a radius R taking an origin O of the XY coordinate system as a center),缺少其余参数。
技术特征D(编码360度视频数据,包含编码圆形区域)
D1/D5 (毫无异议公开):D5原文 [0050] 段落记载:“The video compressing unit 214... compresses the successive frames... into image data in a predetermined video format.”(视频压缩单元将连续帧压缩成预定视频格式的图像数据)。
技术特征E(产生包含经编码的视频数据及参数值的经编码视频数据)
D1/D5 (实质公开):D1/D5明确公开了将视频数据与参数(在其语境中是倾斜角数据及转换表附加信息)共同打包输出的架构。D5原文 [0055] 记载:“outputs the two respective pieces of image data and the tilt angle data as two video files 230 and a tilt angle file 240, respectively...”。在 [0076] 中更提到将参数直接写入视频文件。虽然参数的具体内容与目标专利不同,但“将参数与视频数据一起封装输出”的技术手段已被公开。
| 技术特征 | D1 & D5 (全向相机及倾斜补偿) | D2 (鱼眼图像径向展开) | D3 (广角图像去扭变) | D4 (图像转换器及方法) |
| A: 获得全向相机捕捉的360度视频 | 毫无异议公开 | 实质公开 | 实质公开 | 实质公开 |
| B: 视频包含扭变成圆形区域的图像 | 毫无异议公开 | 毫无异议公开 | 毫无异议公开 | 毫无异议公开 |
| C: 包含完整的10余项特定畸变参数集 | 未公开 (仅公开倾斜角及表) | 未公开 (仅公开长短轴) | 未公开 (仅公开中心和半径) | 未公开 (仅公开中心和半径) |
| D: 编码包含圆形区域的视频数据 | 毫无异议公开 | 未公开 (主要为展开) | 实质公开 | 未公开 |
| E: 产生包含视频及相机参数的编码文件 | 实质公开 (打包倾斜/转换参数) | 未公开 | 未公开 | 未公开 |
在进行创造性 (Inventive Step) 分析时,选择最接近的对比文件通常应当考察整体解决的技术问题以及达到的技术效果是否与目标专利最为相近。
建议选取 D1(JP5843033B1)或 D5(US20160073024A1)作为最接近的对比文件。
分析理由如下:
相同的应用领域与架构基础:D1/D5与目标专利同属于“全向摄像机捕捉视频并进行后期处理”的领域。它们都涉及捕捉带有畸变的鱼眼图像(包含圆形图像区域),并且都使用了编码器对视频流进行压缩处理。
相近的技术问题导向:目标专利的核心技术问题是如何通过在编码的视频流中携带几何元数据(参数),让接收端能够准确无误地渲染原始鱼眼数据。 D1/D5 解决的技术问题是如何在手持拍摄导致相机倾斜时,通过在视频文件中记录倾斜参数(tilt angles)和转换表信息(additional information),让播放端能够直接进行倾斜补偿。两者在“将辅助渲染的硬件物理参数与视频码流一同封装/写入文件”这一系统架构和技术手段上具有高度的一致性。
技术演进的逻辑支点:如果以D1/D5为CPA,目标专利相对于CPA的区别技术特征就非常集中:即特征C(用场景半径、零值区等更丰富的几何空间描述参数,替代或增加了CPA中的倾角参数)。这就为我们下一步论证“本领域技术人员为了解决精确去遮挡和去除无效像素的问题,是否容易想到扩充参数结构体”提供了极其清晰和直接的路径。
相比之下,D2、D4主要侧重于单张图像的静态展开算法;D3虽然也涉及去畸变,但更多是关于播放端的变形映射算法,缺乏“将参数打包进编码视频流中用于传输”这一宏观系统层面的公开。因此,它们不适合作为最接近的对比文件。
为了进一步完善你的无效宣告请求或答辩策略,你需要我以此为基础,为你进一步撰写具体的“区别技术特征分析”以及“非显而易见性(创造性)论证”的详细逻辑吗?
| 技术特征 | D1 & D5 (全向相机及倾斜补偿) | D2 (鱼眼图像径向展开) | D3 (广角图像去扭变) | D4 (图像转换器及方法) |
| A: 获得全向相机捕捉的360度视频 | 毫无异议公开 | 实质公开 | 实质公开 | 实质公开 |
| B: 视频包含扭变成圆形区域的图像 | 毫无异议公开 | 毫无异议公开 | 毫无异议公开 | 毫无异议公开 |
| C: 包含完整的10余项特定畸变参数集 | 未公开 (仅公开倾斜角及表) | 未公开 (仅公开长短轴) | 未公开 (仅公开中心和半径) | 未公开 (仅公开中心和半径) |
| D: 编码包含圆形区域的视频数据 | 毫无异议公开 | 未公开 (主要为展开) | 实质公开 | 未公开 |
| E: 产生包含视频及相机参数的编码文件 | 实质公开 (打包倾斜/转换参数) | 未公开 | 未公开 | 未公开 |
你好!作为一名经验丰富的专利代理师,我将为你对该专利权利要求1中的技术特征E进行深度的侵权/无效维度的对比分析。
分析过程将严格遵循“权利要求解释——对比文件原文献检索与分析——特征比对与结论”的逻辑进行。
技术特征E:
“以及产生经编码视频数据,其中所述经编码视频数据包含所述经编码360度视频数据及与所述全向摄像机相关联的所述参数值。”
结合说明书的解释:
产生经编码视频数据的过程: 根据说明书[0002]和[0003]段,该方法的核心优势在于,360度视频在由全向摄像机捕捉时,未将鱼眼图像变换成其他中间格式(如等矩形格式),而是直接进行编码。
“包含……及所述参数值”的含义: 这里的“所述参数值”是一个重要的引用特征,其引用基础是技术特征C中定义的特定参数集合(包括:圆形区域数量、中心水平/垂直坐标、全半径值、场景半径值、视野值、不可用像素零值区的数量、位置及大小等)。
数据的封装形式: 根据说明书[0009]-[0013]段,说明书给出了如何将“编码视频”与“所述参数”打包在一起的具体封装实施例,例如:将参数包含在国际标准组织基本媒体文件格式(ISOBMFF)的文件层级/播放轨层级中、封装到补充增强信息(SEI)消息中、编码为SDP属性、写入MPD文件或MPEG输送流中。
技术目的: 将未经过中间格式转换的“原始”鱼眼视频数据与“描述该鱼眼图像物理和几何特征的参数”封装在同一个编码视频数据中,使得后续的播放端或处理端可以直接根据这些参数将图像映射到球面等显示格式,降低了处理时间、带宽和设备功耗。
以下逐一分析提供的对比文件是否公开了技术特征E(即:生成包含视频数据和所述特定参数值的编码视频数据)。
文献内容: D1公开了一种广角图像的去扭变(dewarping)方法和装置。根据其原文 "[2] The present invention first captures a wide angle digital video input... The captured image is then stored in a suitable memory means so portions of the image may be selected at a later time." 可知,D1主要涉及捕捉广角视频并将其存储在内存中,以便后续选择视角进行去扭变和透视校正。
针对特征E的分析: D1未公开生成一种将“编码视频数据”与“摄像机相关联的参数值”共同封装/包含在一起的“经编码视频数据”位流或文件格式。D1侧重于播放和处理端的实时计算,没有公开技术特征E。
文献内容: D2涉及多视图视频加深度(MVC+D)的视频编码和存储。根据原文 "[0163] When present in an AVC, an MVC, or a 3VC sample entry, ViewScalabilityInfoSEIBox, ViewIdentifierBox ..., IntrinsicCameraParametersBox, ExtrinsicCameraParametersBox ... apply to the entire AVC, MVC or 3VC stream." 可知,D2公开了在ISOBMFF文件格式或SEI消息中封装相机参数(如内部/外部相机参数)。
针对特征E的分析: D2虽然公开了将相机参数与视频流共同封装在“经编码视频数据”(如MP4文件或码流)中的机制,但其针对的是3D深度的相机参数,并未公开封装特征C中所限定的“所述参数值”(如圆形鱼眼区域的中心、全半径、场景半径、不可用像素零值区等)。由于缺乏特征C的基础参数,D2无法实质公开封装“所述”参数值的特征E。
文献内容: D3主要涉及可扩展视频编码(SVC)中多层视频在显示时的行为指示。根据原文 "[0338] ...some usability information may be embedded to the video bitstream indicating the intended display behavior when more than one layer is used..." 可知,D3通过在视频比特流(如SEI消息中)嵌入可用性信息来指示图层叠加的显示行为。
针对特征E的分析: 与D2类似,D3公开了在视频比特流中嵌入元数据的机制,但完全没有涉及全向摄像机的鱼眼参数。未公开技术特征E。
文献内容: D4公开了一种全向视频成像系统。根据原文 "[0076] At Step S110, the omnidirectional camera 110 writes, into the video file, additional information needed for the image processing apparatus 150 to convert the images... The additional information needed to convert the images is data for the image processing apparatus 150 to restore the conversion table conforming to the particular omnidirectional camera 110..."(在步骤S110,全向相机110将图像处理装置150转换图像所需的附加信息写入视频文件中……附加信息是用于恢复符合该特定相机的转换表的数据,可以是转换表本身、差值数据或标识信息)。
针对特征E的分析: D4公开了生成经编码的视频文件,且在该视频文件中写入了“与特定全向摄像机相关的附加信息(转换表数据)”。这一动作非常接近特征E中“产生包含编码视频数据及摄像机相关参数值的编码视频数据”。
区别点: D4写入视频文件的是**“转换表(Conversion table)”或“转换表的ID”(用于将坐标 (x,y) 映射到球面坐标 (θ, φ)),而不是特征E所严格引用的特征C中的“所述参数值”(即圆形区域的几何参数、场景半径、视野、特别是包含不可用像素的零值区(deadzones)的数量、位置和大小**)。因此,D4公开了封装的动作,但未公开封装“所述(特指的)参数值”。
| 权利要求1 技术特征 | 对比文件 D1 | 对比文件 D2 | 对比文件 D3 | 对比文件 D4 |
|
技术特征E: 以及产生经编码视频数据,其中所述经编码视频数据包含所述经编码360度视频数据及与所述全向摄像机相关联的所述参数值。 |
未公开。 D1仅涉及在内存中对图像进行去扭变计算,未公开将鱼眼视频与参数共同打包为经编码视频数据。 |
未公开。 D2公开了将相机参数(Intrinsic/Extrinsic)与MVC视频流封装在一起,但未公开包含全向相机的“所述参数值”(即鱼眼几何及零值区等参数)。 |
未公开。 D3公开了在码流中嵌入显示行为信息,未涉及全向摄像机及其参数的封装。 |
未完全公开。 D4公开了将摄像机转换图像所需的附加信息(转换表)写入视频文件中(见原文[0076]段)。但D4写入的并非特征E引用的“所述参数值”(如零值区大小、场景半径等),仅公开了该封装动作。 |
结论:对比文件 D1、D2、D3、D4 单独或组合均没有毫无疑义地公开,也未实质公开技术特征E。
深度分析与论理:
在专利审查和无效程序中,当一个技术特征中包含**“所述(said)”**字样时,它构成了严格的引用限制。技术特征E中的“所述参数值”,在权利要求1中唯一的前序基础是技术特征C中列举的那一组特定参数(圆形区域数量、中心坐标、全半径、场景半径、视野值、零值区数量/位置/大小)。
单独对比: D4是最接近的对比文件。D4在段落[0076]中明确公开了将“额外的相机转换信息(转换表)”写入视频文件(video file)中,这在“动作和机制”上与特征E高度一致。但是,D4写入的数据本质是一个映射矩阵(Matrix)或查表ID,而不是本专利特征C所提取的具有高阶几何和物理意义的参数(尤其是用于规避摄像机机身遮挡的“场景半径”和裁剪不可用像素的“零值区”参数)。因此,D4没有公开产生包含“所述参数值”的视频数据。
组合对比: 即使将D4与D2(D2提供了如何通过ISOBMFF或SEI将元数据写入视频码流的具体标准手段)结合,由于没有任何一篇对比文件公开了特征C中关于鱼眼圆形区域几何特征及“死区(Deadzone)”的具体参数集合,本领域技术人员无法通过显而易见的逻辑推导,想到将这些未公开的特定参数与360度视频数据打包在一起。
因此,技术特征E具有新颖性,且在现有技术未给出特征C参数集合启示的情况下,特征E(将特定的鱼眼及零值区参数封装进编码码流以避免中间格式转换)具备突出的实质性特点,能够支持权利要求1的创造性。
Would you like me to elaborate on the novelty and inventive step arguments for Technical Feature C, since Feature E's patentability strongly depends on it?
根据权利要求1所述的方法,其进一步包括将所述经编码360度视频数据写入到文件,且其中所述文件根据国际标准组织基本媒体文件格式ISOBMFF格式经格式化。
根据权利要求2所述的方法,其中所述参数值包含在文件层级、电影层级处,或在播放轨层级处。
根据权利要求2所述的方法,其中所述参数值中的一或多个参数值包含于受限方案信息逻辑框中,所述受限方案信息逻辑框包含原始样本项类型,其中所述原始样本项类型标识所述360度视频数据在捕捉时的原始格式,且其中,所述参数值描述所述360度视频数据从捕捉时的所述原始格式到等矩形格式或球面格式的映射。
根据权利要求1所述的方法,其进一步包括: 将所述参数值编码成一或多个补充增强信息SEI消息,其中所述一或多个SEI消息包含于所述经编码360度视频数据中。
根据权利要求5所述的方法,其中所述一或多个SEI消息根据高级视频译码AVC或高效视频译码HEVC标准经格式化。
根据权利要求1所述的方法,其进一步包括将所述参数值编码为会话数据协议SDP属性。
根据权利要求1所述的方法,其进一步包括将所述参数值写入到媒体呈现描述MPD文件中。
根据权利要求1所述的方法,其进一步包括将所述参数值写入到动画专家组MPEG输送流中。
一种用于处理经编码视频的设备,其包括: 存储器,其经配置以存储由全向摄像机捕捉的2维视频数据;以及 处理器,其在电路中实现并且经配置以: 获得由全向摄像机捕捉的360度视频数据,其中所述360度视频数据的视频帧包括包含场景的图像,且其中,在所述图像中,所述场景经扭变成所述图像的圆形区域; 获得与所述全向摄像机相关联的参数值,其中所述参数值包含:所述图像中的圆形区域的数量、标识所述圆形区域的中心的水平坐标的值、标识所述圆形区域的中心的垂直坐标的值、全半径值、场景半径值、视野值、指示在所述图像内的包含不可用像素的零值区的数量的值、指示在所述图像内的包含所述不可用像素的至少一部分的零值区域的位置的一或多个值、以及指示在所述图像内的包含所述不可用像素的所述至少一部分的零值区域的大小的一或多个值; 编码所述360度视频数据,其中所述360度视频数据包含所述图像的所述圆形区域;以及产生经编码视频数据,其中所述经编码视频数据包含所述经编码360度视频数据及与所述全向摄像机相关联的所述参数值。
根据权利要求10所述的设备,其中产生所述经编码视频数据包含将所述经编码360度视频数据写入到文件,且其中所述文件根据国际标准组织基本媒体文件格式ISOBMFF格式经格式化。
根据权利要求11所述的设备,其中所述参数值包含在文件层级、电影层级处,或在播放轨层级处。
根据权利要求11所述的设备,其中所述参数值中的一或多个参数值包含于受限方案信息逻辑框中,所述受限方案信息逻辑框包含原始样本项类型,其中所述原始样本项类型标识所述360度视频数据在捕捉时的原始格式,且其中,所述参数值描述所述360度视频数据从捕捉时的所述原始格式到等矩形格式或球面格式的映射。
根据权利要求10所述的设备,其中所述处理器进一步经配置以: 将所述参数值编码到一或多个补充增强信息SEI消息中,其中所述一或多个SEI消息包含于所述经编码360度视频数据中。
根据权利要求14所述的设备,其中所述一或多个SEI消息根据高级视频译码AVC或高效视频译码HEVC标准经格式化。
根据权利要求10所述的设备,其中产生所述经编码视频数据包含将所述参数值编码为会话数据协议SDP属性。
根据权利要求10所述的设备,其中产生所述经编码视频数据包含将所述参数值写入到媒体呈现描述MPD文件中。
根据权利要求10所述的设备,其中产生所述经编码视频数据包含将所述参数值写入到动画专家组MPEG输送流中。
根据权利要求10所述的设备,其进一步包括: 移动装置,其中所述移动装置包含所述全向摄像机。
一种非暂时性计算机可读媒体,其上存储有在由一或多个处理器执行时使得所述一或多个处理器执行以下操作的指令:获得由全向摄像机捕捉的360度视频数据,其中所述360度视频数据的视频帧包括包含场景的图像,且其中,在所述图像中,所述场景经扭变成所述图像的圆形区域; 获得与所述全向摄像机相关联的参数值,其中所述参数值包含:所述图像中的圆形区域的数量、标识所述圆形区域的中心的水平坐标的值、标识所述圆形区域的中心的垂直坐标的值、全半径值、场景半径值、视野值、指示在所述图像内的包含不可用像素的零值区的数量的值、指示在所述图像内的包含所述不可用像素的至少一部分的零值区域的位置的一或多个值、以及指示在所述图像内的包含所述不可用像素的所述至少一部分的零值区域的大小的一或多个值; 编码所述360度视频数据,其中所述360度视频数据包含所述图像的所述圆形区域;以及产生经编码视频数据,其中所述经编码视频数据包含所述经编码360度视频数据及与所述全向摄像机相关联的所述参数值。
一种设备,其包括: 用于获得由全向摄像机捕捉的360度视频数据的装置,其中所述360度视频数据的视频帧包括包含场景的图像,且其中,在所述图像中,所述场景经扭变成所述图像的圆形区域; 用于获得与所述全向摄像机相关联的参数值的装置,其中所述参数值包含:所述图像中的圆形区域的数量、标识所述圆形区域的中心的水平坐标的值、标识所述圆形区域的中心的垂直坐标的值、全半径值、场景半径值、视野值、指示在所述图像内的包含不可用像素的零值区的数量的值、指示在所述图像内的包含所述不可用像素的至少一部分的零值区域的位置的一或多个值、以及指示在所述图像内的包含所述不可用像素的所述至少一部分的零值区域的大小的一或多个值; 用于编码所述360度视频数据的装置,其中所述360度视频数据包含所述图像的所述圆形区域;以及用于产生经编码视频数据的装置,其中所述经编码视频数据包含所述经编码360度视频数据及与所述全向摄像机相关联的所述参数值。
一种处理视频数据的方法,其包括: 获得经编码视频数据,其中所述经编码视频数据包含由全向摄像机捕捉的经编码360度视频数据及与所述全向摄像机相关联的参数值; 解码所述经编码视频数据以产生360度视频数据,其中所述360度视频数据的视频帧包括包含场景的图像,且其中,在所述图像中,所述场景经扭变成所述图像的圆形区域; 确定所述参数值,所述参数值包含:所述图像中的圆形区域的数量、标识所述圆形区域的中心的水平坐标的值、标识所述圆形区域的中心的垂直坐标的值、全半径值、场景半径值、视野值、指示在所述图像内的包含不可用像素的零值区的数量的值、指示在所述图像内的包含所述不可用像素的至少一部分的零值区域的位置的一或多个值、以及指示在所述图像内的包含所述不可用像素的所述至少一部分的零值区域的大小的一或多个值;以及产生360度视频呈现,其中产生所述360度视频呈现包含使用所述参数值以将所述圆形区域映射到可用于360度视频呈现中的格式。
根据权利要求22所述的方法,其进一步包括: 将所述圆形区域映射到等矩形格式中;以及 将所述矩形格式用于所述360度视频呈现。
根据权利要求22所述的方法,其进一步包括: 将所述圆形区域直接映射到360度格式中;及 将所述360度格式用于所述360度视频呈现。
根据权利要求22所述的方法,其中所述经编码视频数据是从文件获得,其中所述文件根据国际标准组织基本媒体文件格式ISOBMFF格式经格式化。
根据权利要求25所述的方法,其中所述参数值包含在文件层级、电影层级处,或在播放轨层级处。
根据权利要求25所述的方法,其中所述参数值中的一或多个参数值包含于受限方案信息逻辑框中,所述受限方案信息逻辑框包含原始样本项类型,其中所述原始样本项类型标识所述360度视频数据在捕捉时的原始格式,且其中,所述参数值描述所述360度视频数据从捕捉时的所述原始格式到等矩形格式或球面格式的映射。
根据权利要求22所述的方法,其进一步包括: 从一或多个补充增强信息SEI消息解码所述参数值,其中所述一或多个SEI消息包含于所述经编码视频数据中。
根据权利要求28所述的方法,其中所述一或多个SEI消息根据高级视频译码AVC或高效视频译码HEVC标准经格式化。
根据权利要求22所述的方法,其进一步包括从会话数据协议SDP属性获得所述参数值。
根据权利要求22所述的方法,其进一步包括从媒体呈现描述MPD文件获得所述参数值。
根据权利要求22所述的方法,其进一步包括从动画专家组MPEG输送流获得所述参数值。
一种用于处理经编码视频的设备,其包括: 存储器,其经配置以存储由全向摄像机捕捉的2维视频数据;以及 处理器,其在电路中实现并且经配置以: 获得经编码视频数据,其中所述经编码视频数据包含由全向摄像机捕捉的经编码360度视频数据及与所述全向摄像机相关联的参数值; 解码所述经编码视频数据以产生360度视频数据,其中所述360度视频数据的视频帧包括包含场景的图像,其中,在所述图像中,所述场景经扭变成所述图像的圆形区域; 确定所述参数值,所述参数值包含:所述图像中的圆形区域的数量、标识所述圆形区域的中心的水平坐标的值、标识所述圆形区域的中心的垂直坐标的值、全半径值、场景半径值、视野值、指示在所述图像内的包含不可用像素的零值区的数量的值、指示在所述图像内的包含所述不可用像素的至少一部分的零值区域的位置的一或多个值、以及指示在所述图像内的包含所述不可用像素的所述至少一部分的零值区域的大小的一或多个值; 使用所述参数值以将所述圆形区域映射到可用于360度视频呈现中的格式;以及产生所述360度视频呈现。
根据权利要求33所述的设备,其中所述处理器进一步经配置以: 将所述圆形区域映射到等矩形格式中;以及 将所述矩形格式用于所述360度视频呈现中。
根据权利要求33所述的设备,其中所述处理器进一步经配置以: 将所述圆形区域直接映射到360度格式中;及 将所述360度格式用于所述360度视频呈现。
根据权利要求33所述的设备,其中所述经编码视频数据是从文件获得,其中所述文件根据国际标准组织基本媒体文件格式ISOBMFF格式经格式化。
根据权利要求36所述的设备,其中所述参数值包含在文件层级、电影层级处,或在播放轨层级处。
根据权利要求36所述的设备,其中所述参数值中的一或多个参数值包含于受限方案信息逻辑框中,所述受限方案信息逻辑框包含原始样本项类型,其中所述原始样本项类型标识所述360度视频数据在捕捉时的原始格式,且其中,所述参数值描述所述360度视频数据从捕捉时的所述原始格式到等矩形格式或球面格式的映射。
根据权利要求33所述的设备,其中所述处理器进一步经配置以: 从一或多个补充增强信息SEI消息解码所述参数值,其中所述一或多个SEI消息包含于所述经编码视频数据中。
根据权利要求39所述的设备,其中所述一或多个SEI消息根据高级视频译码AVC或高效视频译码HEVC标准经格式化。
根据权利要求33所述的设备,其中所述处理器进一步经配置以从会话数据协议SDP属性获得所述参数值。
根据权利要求33所述的设备,其中所述处理器进一步经配置以从媒体呈现描述MPD文件获得所述参数值。
根据权利要求33所述的设备,其中所述处理器进一步经配置以从动画专家组MPEG输送流获得所述参数值。
根据权利要求33所述的设备,其中所述设备是移动装置,其中所述移动装置包含经配置以显示所述360度视频呈现的显示器。
一种非暂时性计算机可读媒体,其上存储有在由一或多个处理器执行时使得所述一或多个处理器执行以下操作的指令:获得经编码视频数据,其中所述经编码视频数据包含由全向摄像机捕捉的经编码360度视频数据及与所述全向摄像机相关联的参数值; 解码所述经编码视频数据以产生360度视频数据,其中所述360度视频数据的视频帧包括包含场景的图像,且其中,在所述图像中,所述场景经扭变成所述图像的圆形区域; 确定所述参数值,所述参数值包含:所述图像中的圆形区域的数量、标识所述圆形区域的中心的水平坐标的值、标识所述圆形区域的中心的垂直坐标的值、全半径值、场景半径值、视野值、指示在所述图像内的包含不可用像素的零值区的数量的值、指示在所述图像内的包含所述不可用像素的至少一部分的零值区域的位置的一或多个值、以及指示在所述图像内的包含所述不可用像素的所述至少一部分的零值区域的大小的一或多个值;以及产生360度视频呈现,其中在由所述一或多个处理器执行时使得所述一或多个处理器产生所述360度视频呈现的指令包括在由所述一或多个处理器执行时使得所述一或多个处理器进行以下操作的指令:使用所述参数值以将所述圆形区域映射到可用于所述360度视频呈现中的格式。
一种设备,其包括: 用于获得经编码视频数据的装置,其中所述经编码视频数据包含由全向摄像机捕捉的经编码360度视频数据及与所述全向摄像机相关联的参数值; 用于解码所述经编码视频数据以产生360度视频数据的装置,其中所述360度视频数据的视频帧包括包含场景的图像,其中,在所述图像中,所述场景经扭变成所述图像的圆形区域; 用于确定所述参数值的装置,所述参数值包含:所述图像中的圆形区域的数量、标识所述圆形区域的中心的水平坐标的值、标识所述圆形区域的中心的垂直坐标的值、全半径值、场景半径值、视野值、指示在所述图像内的包含不可用像素的零值区的数量的值、指示在所述图像内的包含所述不可用像素的至少一部分的零值区域的位置的一或多个值、以及指示在所述图像内的包含所述不可用像素的所述至少一部分的零值区域的大小的一或多个值; 以及 用于产生360度视频呈现的装置,其中用于产生所述360度视频呈现的装置包含用于使用所述参数值以将所述圆形区域映射到可用于360度视频呈现中的格式的装置。