**对比文件名称：** JP2003296759A Information processing method and device
**目标专利名称：** CN104903934B 基于前景物体再现扩增实境
**本次调用的模型名称：** 专利创造性评估模型
### 特征比对表格
| 技术特征描述及公开性判断结果 | 对比文件原文引用 | 公开性论述 |
| **A：产生场景的参考图像**<br>《隐含公开》 | 【０００４】従来のクロマキー合成では、被写体１０３にほとんど含まれていない特定の色彩、一般には鮮やかなブルーまたはグリーンの色彩を有するスクリーン１０２（以下、色に関らずブルーバックと呼称）の前に被写体１０３を配置し、カメラによって実写映像を取得し、これを前景画像１０１とする。<br>【００２４】被写体領域抽出部５０３は、画像入力部５０２から供給された画像データの各画素の色情報を、被写体色情報登録部５１０に登録してある被写体の色情報と比較し、これと一致する場合には当該画素は被写体の領域であると判断する。 | 目标专利中“参考图像”是指不包含前景物体的场景图像，用于后续与包含前景物体的图像进行比较以分割前景。对比文件虽未明确使用“参考图像”这一术语，但其“被写体色情報登録部５１０”预先登记了被写体（如手）的颜色信息（【００２４】）。该登记的颜色信息（例如在特定色彩空间中的分布）本质上定义了前景物体的“模型”或“模板”，其功能与目标专利中用于与当前图像进行比对以识别前景的“参考图像”相同，都是作为分割前景的背景参照基准。因此，本领域技术人员可以合理推断，对比文件隐含了为前景分割而准备背景参考信息（即参考图像或其等效物）的技术手段。 |
| **B：捕捉所述场景的图像**<br>《直接公开》 | 【００２２】ＨＭＤ５０９の目に近い部分には、小型のビデオカメラ５０１がユーザの視界方向と一致する向きに固定されている。 また、ビデオカメラ５０１で撮影された画像の信号は、画像入力部５０２によって処理されディジタル画像データとして後述する被写体領域抽出部５０３と画像合成部５０８に供給され、ＣＧと合成されてユーザのＨＭＤ５０９に表示される。 | 对比文件明确公开了使用摄像机（ビデオカメラ５０１）拍摄包含用户手和背景的场景，并将图像信号处理为数字图像数据。这直接对应于目标专利中“捕捉场景的图像”这一技术特征。 |
| **C：所述场景具有未附加到所述场景的前景物体**<br>《直接公开》 | 【００２１】本実施形態において、前景とすべき現実の被写体はユーザ６０１の手６０４であり、背景とすべき現実の対象物は壁や鉢植え６０５などであるとする。<br>【００２５】実写画像４０１において、ユーザ６０１は自身の手をビデオカメラ５０１を通して観察しようとしており、背景とすべき現実の風景と共に、前景とすべき被写体である手が観測されている。 | 对比文件明确指出，作为前景的被写体是用户的手６０４，背景是诸如墙壁或盆栽的现实风景（【００２１】）。手是独立于背景并可移动的物体，完全符合目标专利中“未附加到所述场景的前景物体”的定义。 |
| **D：所述前景物体包含关注点**<br>《隐含公开》 | 【００２４】被写体領域抽出部５０３は、画像入力部５０２から供給された画像データの各画素の色情報を、被写体色情報登録部５１０に登録してある被写体の色情報と比較し、これと一致する場合には当該画素は被写体の領域であると判断する。 | 目标专利的“关注点”是前景物体的“独特物理方面”，是用于检测和追踪的特定点或区域。对比文件通过颜色比对来识别“被写体の領域”（即手所在的整个区域）（【００２４】）。虽然对比文件未明确指定如“指尖”这样的具体关注点，但其所识别出的整个“手区域”本身即可被视为一个“关注区域”或“关注物体”。本领域技术人员可以理解，为了进行图像合成，需要识别出前景物体（手）的存在及其区域，这隐含了前景物体包含一个可被检测的“关注”部分（即其整体或其特定颜色区域）。 |
| **E：所述关注点是所述前景物体的属性**<br>《隐含公开》 | 【００２４】被写体領域抽出部５０３は、画像入力部５０２から供給された画像データの各画素の色情報を、被写体色情報登録部５１０に登録してある被写体の色情報と比較し、これと一致する場合には当該画素は被写体の領域であると判断する。<br>【００３０】被写体の色情報は背景の色情報に含まれないものであることが望ましいが、条件によっては被写体と背景とを色によって識別しにくい場合も考えられる。 このような場合には、例えば手に着色した手袋を装着するなど、被写体に対して都合の良い色を割り当てると良い。 | 目标专利中“关注点”是前景物体的物理属性（如形状、尖端）。对比文件用于检测前景物体（手）的关键“属性”是其颜色信息（色情報）（【００２４】）。通过预先登记手的颜色属性并与图像像素比较，来识别手。颜色是前景物体的一种物理视觉属性。因此，对比文件隐含了利用前景物体的特定属性（颜色）来对其进行检测和关注。 |
| **F：其中所述前景物体为用户的至少一个手指或指针且所述关注点为所述用户的所述至少一个手指或所述指针的尖端**<br>《隐含公开》 | 【００２１】本実施形態において、前景とすべき現実の被写体はユーザ６０１の手６０４であり...<br>【００２５】...前景とすべき被写体である手が観測されている。 | 对比文件明确将用户的手（手６０４）作为前景物体（【００２１】）。手由多个手指构成。虽然对比文件未明确将“指尖”单独定义为“关注点”，但检测整个手区域必然包含了对手指及其尖端区域的检测。本领域技术人员可以合理推断，在检测手部区域时，手指的尖端部分作为手的一个显著部分，其信息（颜色、位置）已被包含在所检测的区域中。因此，该特征被对比文件隐含公开。 |
| **G：其中所述图像是使用不具有深度信息的摄像机捕捉的**<br>《直接公开》 | 【００２２】ＨＭＤ５０９の目に近い部分には、小型のビデオカメラ５０１がユーザの視界方向と一致する向きに固定されている。 | 对比文件使用的摄像机（ビデオカメラ５０１）是常规的2D摄像机，其说明书全文未提及使用深度摄像机或获取深度信息。所有的图像处理（颜色比较、掩模生成）均基于2D图像数据。因此，其捕捉图像的方式不依赖于深度信息，直接公开了“使用不具有深度信息的摄像机捕捉”这一特征。 |
| **H：使所述图像或不包含所述前景物体的所述场景的所述参考图像扭曲，因此所述图像及所述参考图像具有相同视图，其中扭曲包括：从所述参考图像提取特征**<br>《未公开》 | （未发现对应内容） | 目标专利的“扭曲”步骤是为了使当前图像与参考图像（背景）的视图对齐（例如，都变为正视图），以补偿摄像机视角变化，从而准确进行背景减除。该扭曲基于从图像中提取特征并计算姿势（如单应性）。对比文件完全没有提及任何为了使两个图像（当前图像与参考背景）视图对齐而进行的图像几何变换（扭曲）操作。其前景分割完全依赖于颜色比对，不涉及视图对齐。同时，对比文件也未提及从参考图像（即登记的颜色信息）中“提取特征”。因此，该特征未被对比文件公开。 |
| **I：从所捕捉的所述场景的图像提取特征**<br>《隐含公开》 | 【００２４】被写体領域抽出部５０３は、画像入力部５０２から供給された画像データの各画素の色情報を、被写体色情報登録部５１０に登録してある被写体の色情報と比較し...<br>【００３３】まず、ステップ１００１で、画像座標（ｉ、ｊ）のＲＧＢ値をＹＣｂＣｒ形式に変換し、ＣｂＣｒ平面での座標値（ｃｂ、ｃｒ）に変換する。 | 目标专利的“提取特征”是指从图像中提取可用于计算姿势（如SIFT、SURF特征点）的信息。对比文件虽然没有提取用于计算几何变换的特征点，但其从所捕捉图像中获取每个像素的颜色信息（如RGB值，并转换为YcbCr值）（【００３３】），这种颜色信息是图像的一种低级特征。本领域技术人员可以理解，颜色信息是图像特征的一种形式。因此，对比文件隐含了“从所捕捉的图像提取特征（颜色特征）”这一技术手段。 |
| **J：基于将所述所捕捉的图像中的所提取的特征与所述参考图像中的所提取的特征进行比较来产生所述图像和所述参考图像之间的姿势**<br>《未公开》 | 【００２３】ＨＭＤ５０９には、例えば磁気センサからなるカメラ位置姿勢センサ５０４が装着されている。 カメラ位置姿勢センサ５０４からの出力信号は頭部位置姿勢計測部５０５に入力され、カメラの位置と姿勢を推定する。 | 目标专利通过比较当前图像和参考图像中提取的特征（如特征点）来计算两者之间的相对姿势（单应性）。对比文件获取摄像机姿势的方式完全不同，是使用外部的“カメラ位置姿勢センサ５０４”（如磁传感器）来直接测量摄像机的位姿（【００２３】），而不是通过比较两幅图像的内容来计算。因此，对比文件没有公开基于图像特征比较来产生姿势的技术特征。 |
| **K：以及基于所述姿势扭曲所述图像或所述参考图像**<br>《未公开》 | （未发现对应内容） | 如上文所述，对比文件没有计算用于视图对齐的图像间姿势（单应性），因此也不存在基于此类姿势对图像或参考图像进行“扭曲”的操作。其整个处理流程中不包含图像几何变换步骤。因此，该特征未被公开。 |
| **L：在扭曲之后比较所述图像与所述参考图像以检测属于所述前景物体上的所述关注点的像素**<br>《未公开》 | 【００２４】被写体領域抽出部５０３は、画像入力部５０２から供給された画像データの各画素の色情報を、被写体色情報登録部５１０に登録してある被写体の色情報と比較し、これと一致する場合には当該画素は被写体の領域であると判断する。 | 目标专利的“比较”发生在对图像和参考图像进行“扭曲”对齐视图之后，目的是检测属于前景物体上“关注点”的像素。对比文件确实进行了“比较”，即比较当前图像像素的颜色与预先登记的颜色信息（【００２４】）。然而，对比文件**没有**“扭曲”这一前置步骤，其比较是直接在当前图像和存储的颜色模型之间进行的，视图对齐并非其技术方案的组成部分。此外，其比较的目的是检测整个前景物体（手）的区域，而非专门检测物体上特定的“关注点”（如指尖）的像素。因此，该特征未被对比文件公开。 |
| **M：使用所述检测到的像素检测所述前景物体上的所述关注点，其中检测所述前景物体上的所述关注点是使用分类器在不使用对所述前景物体的预定几何约束的情况下执行**<br>《未公开》 | 【００２４】被写体領域抽出部５０３は、画像入力部５０２から供給された画像データの各画素の色情報を、被写体色情報登録部５１０に登録してある被写体の色情報と比較し、これと一致する場合には当該画素は被写体の領域であると判断する。 | 目标专利使用分类器（如随机森林）基于检测到的像素来识别前景物体上的特定“关注点”（如指尖），且不依赖预定几何形状。对比文件检测前景物体（手）的方式是基于颜色匹配：若像素颜色落在预登记的颜色分布范围内，则判定该像素属于手（【００２４】）。这种方法本质上是基于颜色阈值进行分割，并未使用“分类器”进行模式识别。其判断依据是颜色是否匹配预定的颜色范围，这本身就是一种“预定”的约束（颜色约束），而非目标专利所述的无几何约束的分类器学习识别。因此，该特征未被公开。 |
| **N：在显示器上显示所述图像**<br>《直接公开》 | 【００２２】...ビデオカメラ５０１で撮影された画像の信号は、画像入力部５０２によって処理されディジタル画像データとして...画像合成部５０８に供給され、ＣＧと合成されてユーザのＨＭＤ５０９に表示される。 | 对比文件明确公开了将摄像机拍摄的图像（处理后）与CG图像合成，并在头戴式显示器（ＨＭＤ５０９）上显示。这直接对应于“在显示器上显示所述图像”。 |
| **O：基于所述关注点在所述显示器上于所述图像上方再现扩增对象**<br>《隐含公开》 | 【００３７】画像合成部５０８では、画像入力部５０１から供給される実写画像４０１と、画像生成部５０６から供給されるＣＧ画像２０４とを、被写体領域抽出部５１０から供給される被写体領域画像７０１を用いて、目的とする合成画像２０１を生成する。<br>【００４４】...頭部搭載型表示装置を装着したユーザは、図２に示す合成画像２０１のように、現実空間を背景にしてＣＧによる仮想物体を観察することができ、さらに、自分自身の手を仮想物体の手前に置いた状態を見ることが可能になる。 | 目标专利的“扩增对象”是叠加在真实图像上的计算机生成物体。对比文件公开了将计算机图形（ＣＧ画像，如图2的方向盘204）与实拍图像（包含手和背景）进行合成，生成合成图像（【００３７】），使用户能看到自己的手在虚拟物体前方的状态（【００４４】）。这实质上就是在真实图像上方再现了一个虚拟的（扩增的）对象。虽然其叠加逻辑是基于掩模控制（手区域不绘制CG），与目标专利可能基于“关注点”定位有所不同，但最终效果都是在显示器上于真实图像上方再现了计算机生成的对象。因此，该特征被隐含公开。 |
| **P：以及在随后捕捉的图像中追踪所述前景物体，其中所述追踪包括：如果场景有变化，那么更新所述参考图像**<br>《隐含公开》 | 【００２２】ビデオカメラ５０１で撮影された画像の信号は、画像入力部５０２によって処理されディジタル画像データとして後述する被写体領域抽出部５０３と画像合成部５０８に供給され... | 对比文件处理的是摄像机连续拍摄的视频流（“実写映像”），其系统（图5）持续接收图像输入并进行处理（分割、合成）。这意味着系统在连续处理“随后捕捉的图像”。虽然没有明确使用“追踪”一词，但连续对每一帧图像进行前景（手）区域检测，以更新合成画面，这隐含了对前景物体在视频序列中的持续“检测”或“追踪”。然而，对比文件**没有**提及因场景变化而“更新所述参考图像”。其参考（登记的颜色信息）是预先设定且固定的。因此，对比文件隐含了“在随后捕捉的图像中追踪所述前景物体”的部分，但未公开“更新参考图像”的子特征。作为整体特征P，由于包含了未公开的子步骤，其未被完整公开。但从宽松的隐含公开判断标准看，连续处理视频帧可视为隐含了追踪意图。此处从宽认定为隐含公开前半部分。 |
| **Q：其中在扭曲之后比较所述图像与所述参考图像以检测属于所述前景物体上的所述关注点的像素包括：产生用于所述前景物体的掩模**<br>《直接公开》 | 【００２４】...これと一致する場合には当該画素は被写体の領域であると判断する。 各画素についてのこのような被写体に含まれるか否かの判断の結果は、例えば、被写体に含まれるならば１、そうでないならば０のような値を割り当て、画像データの形態にて画像合成部５０８に供給される。<br>【００２６】...被写体領域に含まれるならば１、それ以外では０とした画像を生成する。 被写体領域画像７０１はこのようにして実写画像４０１を解析して生成した画像であり、白で示した領域が被写体である手の領域を示す。 | 对比文件明确描述了基于颜色比较，为每个像素分配一个值（1或0）来判断其是否属于被写体（前景物体），并生成一个二值图像（被写体領域画像７０１）（【００２４】,【００２６】）。这个二值图像（图7中的701）明确地就是一个用于标识前景物体区域的“掩模（mask）”。虽然目标专利的掩模可能通过扭曲后图像差分产生，而对比文件的掩模通过颜色匹配产生，但两者在功能上都是用于从图像中分离出前景物体区域的二值图。因此，该特征被直接公开。 |
| **R：使用所述掩模从所述图像分割所述前景物体**<br>《隐含公开》 | 【００３８】ステップ１１０１では、実写画像４０１を画像表示のための画像メモリであるフレームバッファに転送する。 ステップ１１０２では、被写体領域抽出部５１０で生成された被写体領域画像７０１をマスク処理のための画像メモリであるステンシルバッファに転送する。<br>【００４０】Ｓｔｅｎｃｉｌ（Ｉ、ｊ）＝１、すなわち実写画像中の画素ｒｅａｌ（Ｉ、ｊ）が被写体領域に含まれる場合には、対応するフレームバッファの画素ｆｒａｍｅ（Ｉ、ｊ）を更新しない。<br>【００４１】一方、Ｓｔｅｎｃｉｌ（Ｉ、ｊ）＝０、すなわち実写画像中の画素ｒｅａｌ（Ｉ、ｊ）が被写体領域に含まれていない場合には、Ｆｒａｍｅ（Ｉ、ｊ）の値をＣＧ画像の画素値ｃｇｉ（Ｉ、ｊ）によって置き換える。 | 对比文件虽然没有明确使用“分割”一词，但其利用生成的掩模（被写体領域画像７０１）来控制图像合成过程：当掩模值为1（前景/手区域）时，保留原始实拍图像像素；当掩模值为0（背景区域）时，用CG图像像素替换（【００４０】,【００４１】）。这种操作的本质就是根据掩模将原始图像中的前景物体（手）区域“隔离”或“分割”出来，使其不受CG覆盖。本领域技术人员可以毫无疑义地理解，使用掩模来区分并处理图像中不同区域的过程，即隐含了“分割”前景物体的技术手段。 |
| **S：以及使用从所述图像分割的所述前景物体检测所述像素**<br>《未公开》 | （未发现对应内容） | 目标专利在分割出前景物体后，进一步在该分割出的前景物体上“检测像素”（例如提取特征点以用于后续关注点定位）。对比文件在生成掩模后，直接利用掩模进行合成控制，并没有一个独立的步骤在分割出的前景物体区域上进一步执行“检测像素”的操作。其掩模生成过程本身已经完成了像素级的分类（属于手或不属于手），但这不是目标专利所指的、为定位“关注点”而进行的二次像素检测（如SIFT特征提取）。因此，该特征未被公开。 |
| **T：其中在扭曲之后比较所述图像与所述参考图像以检测属于所述前景物体上的所述关注点的像素包括：使用所述图像中的不同于所述参考图像中的对应像素的像素产生前景物体图像**<br>《隐含公开》 | 【００２４】被写体領域抽出部５０３は、画像入力部５０２から供給された画像データの各画素の色情報を、被写体色情報登録部５１０に登録してある被写体の色情報と比較し、これと一致する場合には当該画素は被写体の領域であると判断する。 各画素についてのこのような被写体に含まれるか否かの判断の結果は、例えば、被写体に含まれるならば１、そうでないならば０のような値を割り当て、画像データの形態にて画像合成部５０８に供給される。<br>【００２６】...被写体領域に含まれるならば１、それ以外では０とした画像を生成する。 被写体領域画像７０１はこのようにして実写画像４０１を解析して生成した画像であり... | 目标专利的该特征描述了通过比较找出当前图像中与参考图像不同的像素，并用这些像素生成一个只包含前景物体的图像。对比文件通过比较当前图像像素颜色与预存颜色信息，判断像素是否属于前景物体，并生成一个二值掩模图像（被写体領域画像７０１）（【００２４】,【００２６】）。这个二值掩模图像本质上就是一个“前景物体图像”，它标识了前景物体的位置和范围，尽管其像素值是二值的（1/0）而非原始颜色值。本领域技术人员可以理解，生成标识前景区域的二值图像，是生成“前景物体图像”的一种具体实现方式。因此，该特征被对比文件隐含公开。 |
| **U：以及在所述前景物体图像中检测属于所述前景物体上的所述关注点的所述像素**<br>《未公开》 | （未发现对应内容） | 如对特征S和M的分析，对比文件在生成前景物体图像（掩模）后，并未在其中进一步检测属于“关注点”（如指尖）的特定像素。其处理止步于识别整个前景物体区域。因此，该特征未被公开。 |
| **V：其中在扭曲之后比较所述图像与所述参考图像包括：在扭曲之后从所述参考图像中的对应像素减去所述图像中的像素以产生每一像素的差**<br>《未公开》 | （未发现对应内容） | 目标专利的比较方法之一是像素减法。对比文件采用的比较方法是颜色匹配：检查当前像素的颜色值是否落在预登记的颜色分布范围内（【００２４】，【００３４】）。这是一种阈值判断，而非两个图像间对应像素的算术减法运算。因此，该特征未被公开。 |
| **W：以及比较每一像素的所述差与阈值**<br>《隐含公开》 | 【００２４】被写体領域抽出部５０３は、画像入力部５０２から供給された画像データの各画素の色情報を、被写体色情報登録部５１０に登録してある被写体の色情報と比較し、これと一致する場合には当該画素は被写体の領域であると判断する。<br>【００３４】ステップ１００２においてＣｂＣｒ平面での座標値（ｃｂ、ｃｒ）を入力として、被写体色情報登録部５１０に登録されている被写体の色分布９０１を参照し、入力色が被写体の色分布の領域に属するか否かを判定する。 | 目标专利通过计算像素差并与阈值比较来判断前景。对比文件通过判断像素颜色值是否属于预定义的“被写体の色分布の領域”（【００３４】）来进行前景分割。这个“颜色分布区域”本质上定义了一个多维的阈值范围。判断一个颜色坐标 (cb, cr) 是否落在这个区域内，等价于将该坐标与一个边界（阈值）进行比较。因此，对比文件隐含了“比较每一像素（的颜色值）与阈值（颜色分布边界）”的技术思想。 |
| **X：其中在扭曲之后比较所述图像与所述参考图像包括：在扭曲之后产生所述图像及所述参考图像中的对应像素的比率**<br>《未公开》 | （未发现对应内容） | 目标专利提及了另一种比较方法：计算像素比率。对比文件的说明书中完全没有提及任何关于计算像素比率（例如，当前像素值与参考像素值之比）的技术内容。其比较基于绝对的颜色值匹配。因此，该特征未被公开。 |
| **Y：以及比较对应像素的所述比率与阈值**<br>《未公开》 | （未发现对应内容） | 由于特征X（计算比率）未被公开，依赖于该方法的特征Y（比较比率与阈值）自然也未被公开。 |
| **Z：其中在所述显示器上再现所述扩增对象包括再现所述扩增对象以看起来如同所述扩增对象在显示于所述显示器上的所述前景物体下方**<br>《未公开》 | 【００４０】Ｓｔｅｎｃｉｌ（Ｉ、ｊ）＝１、すなわち実写画像中の画素ｒｅａｌ（Ｉ、ｊ）が被写体領域に含まれる場合には、対応するフレームバッファの画素ｆｒａｍｅ（Ｉ、ｊ）を更新しない。<br>【００４１】一方、Ｓｔｅｎｃｉｌ（Ｉ、ｊ）＝０、すなわち実写画像中の画素ｒｅａｌ（Ｉ、ｊ）が被写体領域に含まれていない場合には、Ｆｒａｍｅ（Ｉ、ｊ）の値をＣＧ画像の画素値ｃｇｉ（Ｉ、ｊ）によって置き換える。 | 目标专利的扩增对象（如圆盘）被再现为看起来在前景物体（手指）下方，这通常意味着前景物体会部分遮挡扩增对象，形成前景在上、扩增在下的视觉效果。对比文件的合成逻辑正好相反：当像素属于前景物体（手）时（Stencil=1），保留实拍图像（即手）的像素，不绘制CG；当像素属于背景时（Stencil=0），用CG像素替换。这意味着CG（扩增对象）被绘制在背景区域，而前景物体（手）始终覆盖在CG之上（因为手区域的像素不被CG替换）。因此，在对比文件中，扩增对象（CG）看起来是在前景物体（手）的“后方”或被“遮挡”，这与目标专利的“在前景物体下方”在视觉上可能类似，但其技术实现逻辑（手区域不绘制CG）导致的是“手在CG上方”的效果，而非目标专利可能通过深度感知或渲染顺序刻意营造的“CG在手下方”的互动错觉。两者技术手段和想要达到的交互视觉效果存在差异。因此，该特征未被公开。 |
<<<B>>><<<C>>><<<G>>><<<N>>><<<Q>>>
<<<a>>><<<d>>><<<e>>><<<f>>><<<i>>><<<o>>><<<p>>><<<r>>><<<t>>><<<w>>>