目标专利:129用于360度视频的混合图形及像素域架构
专利公开号:CN109074161B
专利权人:高通股份有限公司
无效请求书提交日期:2026年
非显而易见性评估仅供参考,不构成法律建议。
| 编号 | 名称 |
|---|---|
| 0 | 发明专利_DE112006002298T5 Optical disk device and adjustment method for this.docx |
| 0 | 发明申请_WO2014005297A1 PANORAMA BASED 3D VIDEO CODING_+++A_b_c_d_e_f_i+++.docx |
| 0 | 发明申请_WO2014191990A1 METHOD AND SYSTEM FOR LOW COST TELEVISION PRODUCTION_+++A_b_c_d_f_g_i_j+++.docx |
| 0 | 发明申请_WO2015134400A1 METHODS AND APPARATUS FOR STREAMING CONTENT_+++A_b_f_h_j+++.docx |
| 0 | 发明申请_WO2016010668A1 SYSTEM AND METHOD FOR USE IN PLAYING BACK PANORAMA VIDEO CONTENT_+++A_B_E_H_c_d_f_g_h_i_j+++.docx |
| 0 | 发明申请_WO2016026526A2 VIDEO COMPOSITION_+++A_b+++.docx |
| 0 | 发明申请_WO2016026526A3 VIDEO COMPOSITION_+++A+++.docx |
| 0 | 发明申请_WO2016040161A1 SIMULTANEOUS LOCALIZATION AND MAPPING FOR VIDEO CODING_+++A+++.docx |
| 0 | 发明申请_WO2016140083A1 画像処理装置および画像処理方法_+++A_B_E_h_j+++.docx |
| 0 | 发明申请_WO2003041011A3 METHOD AND APPARATUS FOR THE COMPUTATION OF PANORAMIC VIEWS AND _PERSPECTIVE PROJECTIONS FROM OMNIDIRECTIONAL IMAGES_+++A_B_D_E_F_H_J_c_g_i+++.docx |
| 0 | 发明专利_GB0802875D0 Optical disk device and method of regulating the same.docx |
| 0 | 发明专利_GB2442693A Optical disk device and method of regulating the same.docx |
| 0 | 发明专利_GB2442693B Optical disk device and adjusting method thereof.docx |
| 0 | 发明专利_JP3853347B1 Optical disk device and a method for adjusting.docx |
| 0 | 发明专利_JP2007073146A Optical disk system and its adjusting method.docx |
| 0 | 发明专利_JP2015521442A パノラマベースの3Dビデオコーディング_+++A_e+++.docx |
| 0 | 发明专利_JP2016010021A 画像・音声配信システム、画像・音声配信装置および画像・音声配信プログラム_+++A_e+++.docx |
| 0 | 发明专利_JP2016015705A 映像配信装置及び映像再生装置_+++A_B+++.docx |
| 0 | 发明申请_US20160048941A1 TEXTURE ELEMENT STREAMING_+++A+++.docx |
| 0 | 发明公开_CN104350745A 基于全景的3D视频译码_+++A+++.docx |
| 0 | 发明申请_US20030095131A1 Method and apparatus for processing photographic images_+++A+++.docx |
| 0 | 发明申请_US20140087867A1 WEARABLE DISPLAY SYSTEM AND METHOD_+++a_c+++.docx |
| 0 | 发明申请_US20140098185A1 Interactive user selected video_audio views by real time stitching and selective delivery of multiple video_audio sources_+++A+++.docx |
| 0 | 发明申请_US20140191990A1 TOUCH PAD FOR HANDHELD DEVICE.docx |
| 0 | 发明申请_US20150287240A1 Mapping Multi-Rate Shading to Monolithic Programs_+++A+++.docx |
| 0 | 发明申请_US20150379730A1 SAMPLING, FAULT MANAGEMENT, AND_OR CONTEXT SWITCHING VIA A COMPUTE PIPELINE_+++a+++.docx |
| 0 | 发明申请_US20160012855A1 SYSTEM AND METHOD FOR USE IN PLAYING BACK PANORAMA VIDEO CONTENT_+++A_B_F_e+++.docx |
| 0 | 发明公开_CN1625246A 处理和浏览所提供的视频_音频信号的方法和设备_+++A+++.docx |
| 0 | 发明申请_US20160063964A1 STREAMING VIDEO DATA IN THE GRAPHICS DOMAIN_+++A_c_i+++.docx |
| 0 | 发明申请_US20160104510A1 METHOD AND SYSTEM FOR LOW COST TELEVISION PRODUCTION_+++A_B_e+++.docx |
| 0 | 发明申请_US20160127443A1 COMPRESSION OF GRAPHICAL COMMANDS FOR REMOTE DISPLAY_+++A_c+++.docx |
| 0 | 发明申请_US20160241836A1 METHODS AND APPARATUS FOR RECEIVING AND_OR USING REDUCED RESOLUTION IMAGES_+++A_B_c_d_e_f_h+++.docx |
| 0 | 发明申请_WO03027766A3 SYSTEM AND METHOD FOR PANORAMIC IMAGING_+++A_E_b_c_d_f_i+++.docx |
| 0 | 发明申请_WO2003027766A2 SYSTEM AND METHOD FOR PANORAMIC IMAGING_+++a_c+++.docx |
| 0 | 发明申请_WO2003041011A2 METHOD AND APPARATUS FOR PROCESSING PHOTOGRAPHIC IMAGES_+++A_C_E_F+++.docx |
一种经配置以处理视频数据的设备,所述设备包括:存储器,其经配置以存储所述视频数据; 一或多个处理器,其经配置以在像素域中编码所存储的视频数据的一部分以产生像素域视频数据,其中,所述像素域视频数据包括各自具有360视频图像的一部分的多个图块; 第一图形处理单元,其经配置以在图形域中处理所述视频数据以产生图形域视频数据,其中所述图形域视频数据包括具有所述360视频图像的全部的纹理;以及接口,其用以发射包含具有所述360视频图像的所述全部的所述纹理的所述图形域视频数据及包含所述多个图块的子集的所述像素域视频数据的子集,其中,所述一或多个处理器进一步经配置以将所述视频数据拼接在一起以形成等矩形画布,且其中,所述第一图形处理单元进一步经配置以将所述等矩形画布转换为所述纹理且在球体内部显现所述纹理,其中,所述第一图形处理单元经配置以经由所述接口以第一帧率发射所述纹理,且其中所述一或多个处理器进一步经配置以经由所述接口以大于所述第一帧率的第二帧率发射所述像素域视频数据的所述子集,并且其中,所述第一图形处理单元经配置以经由所述接口以第一分辨率发射所述纹理,且其中,所述一或多个处理器进一步经配置以经由所述接口以大于所述第一分辨率的第二分辨率发射所述像素域视频数据的所述子集。
作为一名专业的专利代理师,我将针对目标专利说明书以及权利要求1中的技术特征G,结合您提供的三份对比文件进行详细的侵权/无效比对分析。
为了便于说明,以下分析将采用您指定的代号指代各对比文件:
D1: 发明申请_WO2003041011A3
D2: 发明申请_WO2014191990A1
D3: 发明申请_WO2016010668A1
在进行比对之前,我们需要结合目标专利说明书对技术特征G进行准确的解释:
技术特征G:“其中,所述第一图形处理单元经配置以经由所述接口以第一帧率发射所述纹理,”
结合目标专利的整体权利要求逻辑(特别是特征C、F和H)以及说明书内容(例如段落 [0049])可知:
“纹理”的内涵:由特征C和F可知,该“纹理”属于“图形域视频数据”,是由等矩形画布转换而来,且包含了“所述360视频图像的全部”。
“第一帧率”的相对意义:由特征H可知,处理器发射像素域视频数据子集的帧率为“第二帧率”,且第二帧率大于第一帧率。说明书段落 [0049] 明确记载:“由GPU流式发射的经发射纹理可以相对低的帧率(例如每秒2帧(fps))发送……像素域中的经编码视频可以较高帧率(例如60fps)及较高分辨率发送”。
技术目的:特征G的核心在于采用混合域架构(图形域与像素域分离),利用**第一图形处理单元(GPU)**在图形域中以较低的“第一帧率”发射完整的360度背景纹理,以提供基线质量并减少开销;同时依靠处理器以较高的帧率发送用户视野内的高清像素域图块(特征H)。
原文出处:根据您提供的提示词,D1的内容为“无说明书 译”。
分析结论:D1未公开任何实质性的技术内容,因此未公开技术特征G。
主要内容:D2涉及一种低成本的远程电视制作系统,主要思想是将摄像机阵列捕捉的原始高数据率视频流转换为低数据率的全景视图(panoramic views)发送给远程制作团队,由团队选择感兴趣的区域(ROI)后,服务器再生成该区域的高分辨率帧。
原文出处与比对:
D2在段落 [0009] 及 [0083] 中记载了数据率的差异:“converting the stream of raw video images at a first data rate to a stream of panoramic views at a second data rate. The second data rate is less than one third of the first data rate.”(将第一数据速率的原始视频图像流转换为第二数据速率的全景视图流。第二数据速率小于第一数据速率的三分之一)。
分析结论:尽管D2提到了传输“降低了数据率(data rate)”的全景视图,且数据率与帧率存在相关性,但D2并未公开使用“第一图形处理单元(GPU)”将360视频转换为“图形域的纹理”并经由接口发射。D2的架构仍然是传统的像素域视频压缩和传输(如段落 [0051] 提到的JPEG2000, MPEG2),且未明确指出全景视图流与高清局部图块在“帧率(frame rate)”上的具体高低配合关系,更没有涉及图形域与像素域的混合架构。因此,D2未公开技术特征G。
主要内容:D3涉及一种全景视频播放系统,其核心思想是为了降低解码压力,将等矩形格式(equirectangular format)的全景视频帧划分为多个相邻的区段(sections),解码器仅解码用户当前视野(FOV)内的区段,而不解码视野外的区段。
原文出处与比对:
D3在段落 [0059] 提到了帧率:“Often, panorama content is provided in one or both high resolution and high display frame rates... enabling a higher frame rate, a higher resolution panorama, or both.”(全景内容通常以高分辨率和/或高显示帧率提供……从而实现更高的帧率、更高分辨率的全景,或两者兼而有之)。
D3在段落 [0034] 提到了将帧切分为区段(sections)的像素域操作。
分析结论:D3公开了基于用户FOV仅解码部分图块(sections)以维持高帧率和高分辨率的像素域处理技术。然而,D3的整个逻辑均在像素域内进行(编码/解码比特流),完全没有提及引入“图形处理单元”来生成代表整个360图像的“图形域纹理”,更没有提及将全景纹理以“第一帧率”作为背景流进行发射。因此,D3未公开技术特征G。
| 权利要求技术特征 | 目标专利说明书支撑 | D1 (WO2003041011A3) | D2 (WO2014191990A1) | D3 (WO2016010668A1) | 结论 |
| 技术特征G:其中,所述第一图形处理单元经配置以经由所述接口以第一帧率发射所述纹理, | [0049] 由GPU流式发射的经发射纹理可以相对低的帧率(例如每秒2帧(fps))发送 | 无实质内容。 |
未公开。 段落 [0009], [0083] 仅公开了将原始视频转换为较低“数据率”的全景流,未公开GPU生成图形域纹理并以特定帧率发射。 |
未公开。 全篇仅涉及像素域内区段(sections)的编码和解码,未涉及图形域纹理传输,也未针对纹理和局部图块设置双重帧率传输架构。 |
未被单独或结合公开 |
基于上述详细的原文比对与分析,对比文件 D1、D2、D3 均未能单独公开技术特征G。
此外,即使尝试将这些对比文件进行组合:D2提供了“低数据率全景流+高分辨率局部流”的宏观概念,D3提供了“像素域内基于FOV的区段切分与解码”的技术细节。但这两者均隶属于传统的纯像素域(Pixel Domain)视频编码架构。目标专利特征G所主张的混合域架构(Hybrid graphics and pixel domain architecture)——即特定引入GPU在图形域生成并以较低帧率发射全景纹理——在D1、D2、D3中既没有教导,也没有任何技术启示去促使本领域技术人员将纯视频流处理架构修改为混合图形渲染架构。
因此,对比文件D1、D2和D3既没有单独毫无疑义地公开、也没有实质公开技术特征G,且它们的结合也不足以破坏包含技术特征G的权利要求的创造性。
请问您是否需要我继续针对权利要求1中的其他技术特征(例如特征E关于等矩形画布的拼接,或特征I、J关于分辨率的差异配置)进行深入的对比文件比对分析?
根据权利要求1所述的设备,其中,所述一或多个处理器经配置以将所述等矩形画布映射到立方图或金字塔形投影中的一者,并以多种分辨率编码所述多个图块,且其中,所述多个图块的所述子集在用户视野内。
根据权利要求2所述的设备,其中,所述一或多个处理器经配置以确定所述用户的运动适应性,并基于所确定的所述用户的运动适应性来确定所述视野。
根据权利要求2所述的设备,其中,所述一或多个处理器经配置以确定所述用户的运动适应性,基于所确定的所述用户的运动适应性来确定所述视野,且基于经确定的视野来调适环绕声视频。
根据权利要求3所述的设备,其中,所述一或多个处理器经配置以在第三分辨率下基于所述运动适应性发射所述图块子集中处于所述视野的中心的图块,且在低于所述第三分辨率的第四分辨率下发射所述图块子集中在所述视野内但不在所述视野的所述中心的图块。
一种经配置以处理视频数据的设备,所述设备包括:存储器,其经配置以存储包括像素域视频数据及图形域视频数据的视频流; 一或多个处理器,其经配置以将所存储的视频流剖析成图形流及音频‑视频流,并对所剖析的视频流进行解码,其中,所解码的视频流包括像素域数据,所述像素域数据包含各自具有360视频图像的一部分的多个图块,且其中,所述多个图块总共包含少于所述360视频图像的全部; 传感器,其用以感测用户的运动适应性;及 图形处理单元,其经配置以利用来自所述图形流的纹理信息在球面表面上产生画布,并基于所感测的所述用户的运动适应性来显现视野,其中所述纹理信息包含所述360视频图像的所述全部,其中,在所述图形流中的所述纹理信息是以第一帧率存在于所述图形流中的,并且所述像素域数据是以大于所述第一帧率的第二帧率存在于所解码的视频流中的,其中,所述纹理信息是采用第一分辨率的,且所述像素域数据是采用大于所述第一分辨率的第二分辨率的。
根据权利要求6所述的设备,其中,所述一或多个处理器经配置以对处于所述用户的所述视野内的所述多个图块进行解码,对所述多个图块中是低分辨率图块的图块和所述多个图块中是高分辨率图块的图块进行上采样,并组合所述低分辨率图块和所述高分辨率图块以形成单一图像覆盖。
根据权利要求7所述的设备,其中,所述一或多个处理器经配置以基于所述用户的经感测运动适应性来形成所述单一图像覆盖。
根据权利要求8所述的设备,其中,所述一或多个处理器经配置以基于确定所述用户的所述经感测运动适应性导致经上采样图块在所述视野外而不形成所述单一图像覆盖。
根据权利要求9所述的设备,其中,所述用户的所述经感测运动适应性包括头部运动轨道。
根据权利要求9所述的设备,其中,所述一或多个处理器经配置以将所述用户的头部运动范围与可视性窗口进行比较。
一种处理视频数据的方法,其包括: 存储所述视频数据; 在像素域中编码所述视频数据的一部分以产生像素域视频数据,其中,所述像素域视频数据包括各自具有360视频图像的一部分的多个图块; 在图形域中处理所述视频数据以产生图形域视频数据,其中,所述图形域视频数据包括具有所述360视频图像的全部的纹理; 将所述视频数据拼接在一起以形成等矩形画布; 将所述等矩形画布转换为所述纹理; 在球体内部显现所述纹理;以及 发射包含具有所述360视频图像的所述全部的所述纹理的所述图形域视频数据及包含所述多个图块的子集的所述像素域视频数据的子集,其中,所述发射包括:以第一帧率和第一分辨率来发射所述纹理;以及 以大于所述第一帧率的第二帧率和大于所述第一分辨率的第二分辨率来发射所述像素域视频数据的所述子集。
根据权利要求12所述的方法,其进一步包括: 将所述等矩形画布映射到立方图或金字塔形投影中的一者;及以多种分辨率编码所述多个图块,其中所述多个图块中的所述子集在用户的视野内。
根据权利要求13所述的方法,其进一步包括: 确定所述用户的运动适应性;及 基于所述用户的经确定运动适应性来确定所述视野。
根据权利要求13所述的方法,其进一步包括: 确定所述用户的运动适应性; 基于所确定的所述用户的运动适应性来确定所述视野;及基于所确定的视野来调适环绕声视频。
根据权利要求14所述的方法,其进一步包括: 基于所确定的运动适应性,以第三分辨率发射所述图块子集中处于所述视野的中心的图块;及以低于所述第三分辨率的第四分辨率发射所述图块子集中在所述视野内但不在所述视野的所述中心的图块。
根据权利要求12所述的方法,其进一步包括: 解码所述视频数据及将所述视频数据剖析成图形流及音频‑视频流; 感测用户的运动适应性; 利用从所述图形流接收的纹理信息在球面表面上产生画布;及基于所感测的所述用户的运动适应性来显现视野。
一种处理视频数据的方法,其包括: 存储包括像素域视频数据及图形域视频数据的视频流; 将所存储的视频流剖析成图形流及音频‑视频流并解码所述视频流,其中,所解码的视频流包括像素域数据,所述像素域数据包含各自具有360视频图像的一部分的多个图块,且其中所述多个图块总共包含少于所述360视频图像的全部; 感测用户的运动适应性; 利用来自所述图形流的纹理信息在球面表面上产生画布,其中,所述纹理信息包含所述360视频图像的所述全部;及基于所感测的所述用户的运动适应性来显现视野, 其中,在所述图形流中的所述纹理信息是以第一帧率存在于所述图形流中的,并且所述像素域数据是以大于所述第一帧率的第二帧率存在于所解码的视频流中的,其中,所述纹理信息是采用第一分辨率的,且所述像素域数据是采用大于所述第一分辨率的第二分辨率的。
根据权利要求18所述的方法,其进一步包括: 解码在所述用户的所述视野内的所述多个图块; 对所述多个图块中是低分辨率图块的图块和所述多个图块中是高分辨率图块的图块进行上采样;及组合所述低分辨率图块和所述高分辨率图块以形成单一图像覆盖。
根据权利要求19所述的方法,其进一步包括:基于所感测的所述用户的运动适应性来形成所述单一图像覆盖。
根据权利要求20所述的方法,其进一步包括:基于确定所感测的所述用户的运动适应性导致经上采样的图块在所述视野外而不形成所述单一图像覆盖。
根据权利要求21所述的方法,其中,所感测的所述用户的运动适应性包括头部运动轨道。
根据权利要求21所述的方法,其进一步包括:将所述用户的头部运动范围与可视性窗口进行比较。