会员体验
专利管家(专利管理)
工作空间(专利管理)
风险监控(情报监控)
数据分析(专利分析)
侵权分析(诉讼无效)
联系我们
交流群
官方交流:
QQ群: 891211   
微信请扫码    >>>
现在联系顾问~
首页 / 专利库 / 专利权 / 专利合作条约 / 第I章 / 国际申请 / 附图 / 用于在视频编码中随机存取和逐步更新图像的方法

用于在视频编码中随机存取和逐步更新图像的方法

阅读:413发布:2021-02-19

IPRDB可以提供用于在视频编码中随机存取和逐步更新图像的方法专利检索,专利查询,专利分析的服务。并且本发明公开了一种用于在视频编码中随机存取和逐步更新图像的方法。逐步解码器更新是通过使用隔离区域、灵活的宏块顺序(附图4)和在切片边界关闭环路滤波器来实现的。还提供一种用于随机存取操作的可靠检测和引导帧及开路解码器更新(ODR)图像的可靠信令的机制。,下面是用于在视频编码中随机存取和逐步更新图像的方法专利的具体信息内容。

1.一种对视频序列进行编码的方法,包括: 参考一个或多个先前编码的参考图像,使用运动补偿预测对第一图像进行编码,该第一图像在显示顺序上在INTRA编码的图像之前,并且在编码顺序上在该INTRA编码的图像之后; 在编码的比特流中提供与该第一图像对应的指示,该指示表明被用于对该第一图像进行编码的该一个或多个先前编码的参考图像中的至少一个在解码顺序上是否在该INTRA编码的图像之前。

2. 根据权利要求1的方法,其中在网^tt象层单元^M语法中衝共该指示。

3. 根据权利要求1的方法,其中在图像报头中衝共銜旨示。

4. 根据权利要求1的方法,其中在切片报头中衝共该指示。

5. 根据权利要求l的方法,还在,的比特流中衝共与该INTRA ,的图 ^^t应的附加指示,该附加指示表明是否#«参考在该INTRA编码的图^^前的 图像謝彌码的至4"个图像,iSA一个图像具有在该INTRA编码的图像之前 的显示)l,和在该INTRA编码的图#^前的解码",。

6. 根据权利要求1的方法,还包括iOT子序列标识ftt^共随m^取点的附 加指示。

7. —种编码器,该编码繊隨成:参考—个或多错前编码的参考图像,鹏运动韦M舒页测鄉一图繊满 码,i魏一图像顿示",上在INTRA编码的图駄前,并且在编陶l,上在该 INTRA编码的图it^后;在编码柳匕特流中麟与織一图《树应的f际,该f繊明,細于对織 —图像謝f^码的该一个或多,前编码的参考图像中的至少一个^?码i^上 是否在该INTRA编码的图^^前。

8. 根据权利要求7的鄉马器,其中在网細象层单^M吾法中鹏该J标。

9. 根据权利要求7的^^器,其中在图像报头中衝共该t际。

10. 根据权利要求7的ii^,其中在切片报头中衝共谢际。

11. 根据权利要求7的编码器,其中该编码器还被12g鹏编码柳匕特流中 提供与该INTRA编码的图〗W应的附加J际,该附加J际表明g,参考在该 INTRA编码的图^t前的图^it^m的至少一个图像,,^"个图像具有在该INTRA编码的图歡前的显示",和在该INTRA i^马的图貌前的解码顺 序。

12. 根据权利要求7的编石驟,其中该编石^l还被配置成4顿子序列极只符 繊繊膽te的附加指示。

13. —种对编码的挪鹏列进備码的方法,包括: 在该编码的枧辦列中翻i臓膽取腿 对在该随m^取,处的编码图ftiffffl?码;从该编码的柳鹏列中检索与第一图f^t应的指示,織一图像是参考一个 或多个先前编码的参考图像、《顿运动州尝预测进伊J码的,織一图像具有在 该随机存取位置处的编码图像之前的显玩1^和在该随,取位置处的编码图像 之后的解卿,;以及如果所检索到的与该第一图像对应的信眉表明,该一个或多^前编码的参 考图像中的至少一个在解陶IIW上在该随TO取,处的鄉马图^t前,贝赃没 有进^lf码的情况下丢弃该编码的第一图像,并且利用^l?码)l,上在该第一图 ^t后的鄉马图像,续iM?码迹呈。

14. 根据权利要求13的方法,其中从网,象层单元鄉语法中驗该f际。

15. 根据权利要求13的方法,其中从图像报头中检索该f际。

16. 根据权利要求13的方法,其中从切片报头中麟该J际。

17. 根据权利要求13的方法,还包括:从该编码的柳鹏列中総与在该随 机存取位置处的编码图^"应的附加J际,该附加^^明皿#^##在该随机存取位置处的编码图^t前的图像謝彌码的至d^个图像,该至d^个图像具有在该随机存取錢处的编码图H前的显示)I醉和在该随纟膽取體处的编 码图fe前的解卿醉。

18. 根据权利要求13的方法,其中随t/l^取隨的检I抱括:総并检查各 编码图像的子序列标识符。

19. —种鹏器,i^?^M隨成: 在编码的现辦列中检测随+膝取隨的J际;对在该随m^取^s处的鄉马图^i^m码;从该编码的柳辦列中総与第一图{树应的信息,織一图像是参考一个 或多个先前编码的参考图像、《柳运动,M尝预测进t彌码的,i魏一图像具有在该随机存取^l处的编码图駄前的显示)i^和在该随丰膽取隨处的綱图像 之后的角軒马鹂以及如果所检索到的与该第一图纟树应的信息表明,该一个或多个先前编码的参 考图像中的至少一个在解卿»上在该随机存取^处的,图#^前,贝赃没 有进^1#马的情况下丢弃该编码的第一图像,并且利用在解卿,上在该第一图^^后的,马图像,续iMTO战呈。

20. 根据权利要求19的鯽马器,其中从网,象层单元鄉语法中総该指示。

21. 根据权利要求19的解码器,其中从图像报头中检索该^^。

22. 根据权利要求19的解码器,其中从切片报头中检索该f际。

23. 根据权利要求19的解码器,其中i^?码器还被lfi2成:从该编码的枧频 序列中检索与在该随机存取隨处的编码断^t应的附加指示,该附加^^表明 是否,参考在该随机存取皿处的编码图^t前的图^i^彌码的至^"个图 像,该至少一个图像具有在该随t膽取健处的编码斷&前的显示〗l,和在该 随机存刺iS处的编码图Jti前的解码)i醉。

24. 根据权利要求19的解码器,其中随机存刺ifi的检测包括:驗并检查 各编码图像的子序列标识符。

25. —种自码的柳频序列进fi^码的方法,i^^S括: 接收在该编码的视辦列中随t膽取錢的指示; 在该随机存取隨处的编码图像处开始该编码的冬J^列的解码跟呈; 从该编码的柳鹏列中鶴与第一图i树应的信息,織一图像是参考一个或多个先前编码的参考图像、使用运动州尝预测进fi^码的,该第一图像具有在 该随机存取位置处的编码图像之前的显玩1»和在该随#1#取皿处的1^马图像 之后的解卿,;以及如果所检索到的与織一图«应的信肩表明,该一个或多钱前编码的参 考图像中的至少一个,卿,上在该随禾膽取,处的编码Ste前,贝脏没 有进1滩码的情况下丢弃该^^马的第一图像,并且利用^lf卿鹏上在織一图 fc后的编码图像鄉续繊码鹏。

26. 根据权利要求25的方法,其中在网,象层单元IIM语法中,该J标。

27. 根据权利要求25的方法,其中在图像报头中掛共该t际。

28. 根据权利要求25的方法,其中在切片报头中衝共该^f^。

29. —种解码器,繊繊皮配驗接收在该编码的ij^序列中随m^取,的ji^在该随机存取腿处的綱图像处开始该编码的现辦列的解码鹏 从该编码的现频序列中检索与第一副t^t应的信息,该第一图像是参考一个 或多个先前编码的参考图像、〗顿运动州尝预测进fim的,織一图像具有在 该随机存取位置处的编码图#^前的显示1»和在该随机存取隨处的编码图像 之后的解码鹏以及如果所检索到的与織一图像对应的信息表明,该一个鄉^前编码的参 考图像中的至少一个^l?卿,上在该随丰膽取,处的编码图^^前,贝赃没 有进^滩码的情况下丢弃该编码的第一图像,并且利用»^)1,上在織一图 齢后的编码图像纖卖繊马鹏。

30. 根据权利要求29的解石骤,其中在网乡細象层单元鄉语法中衝共该指示。

31. 根据权利要求29的解石骤,其中在图像报头中鄉该指示。

32. 根据权利要求29的f^,其中在切片报头中樹共该J际。

说明书全文

用于在柳频编码中随IM取和逐步,图像的方法 相关申请的参考本申请是国家申请号为03816727.1的申请的分案申请,该申请的国际申请日 是2003年7月16日,国际申请号是PCT/US2003/022262,发明名称是"AMETHOD FOR RANDOM ACCESS AND GRADUAL PICTURE REFRESH IN VIDEO CODING (用于在现频编码中随机存取和逐步魏图像的方法)"。相关申请的^X参考本专利申请要求申i转为60396200,申请日为2002年4月16的申请的优先权。本发明主要涉M柳顷图像的随机存取和逐步Mff。特别地,本发明涉及一禾中在根据ITU-T H.264|ISO/EC MPEG4第十部分柳鹏码标准编码的现辦歹仲的柳频图像的随m^取和逐步,的方法。背景脉视频齐列由一系列的静止图4»1>條^;。视/!M^方^S于^HJi!/,列的 兀余的以及与感知上不相关的部分。柳频,列中的冗余可以分类为频谱、空间和 时间冗余。频谱冗余涉及到同一图像中不同颜色成分之间的相似性,而空间冗余 是由于图像中的相邻象素之间的糊以ffiM的。时间冗余是因为在先前图像中出 现的物体在当前图像中很可育级会出现而存在的。fi^PI以Mil利用时间冗余和 根据另一个被称为锚定或##图像的图像將页测当前图像来誠。实际上,这是 3iil产生一个描述在当前謝射晩前图^t间的运动的运动彬尝,来完成的。视频压缩方法典型地区分禾,时间兀余减少的图像和那些不利用时间冗余 «>的图像。不利用时间冗余»>方法的臓图{繊常被称为INTRA域I)帧 或图像。在时间上预测的图^M常是根据在当前图^^前出现的图像向前预测出 的,并且被称为INTER或P帧。在INTER帧的情况下,预测的运动卑M尝图傲艮 难足够精确,因而空间臓的预测體帧会伴随魏一个INTER帧。INTER图像 可以包括INTRA ^?马区域。B图像|«入到I称或P帧的锚定图f树之间,并根据其中的一个或两,定图 像5l^翻!)。 B图{魏常产生与向前预测的INTER编码的P斷象相比增强的臓。 B图像不当作固定器(anchor)图像{顿,iMI是,其它的图像不根据它们^J页测。 因此,它们可以被丢弃(有mtlM^意地),而不会影响将来的图像的图像质量。 同时,与P图像比较,B图像可以改善i^缩性能,它们的产生需要更大的计算复 杂性和存储器《顿,并且它们还4引入附加的延时。对于例如挪频流的非实时应 用来说这可能不是一个问题,但就于例如现^i义的实时鹏来说就会弓跑问 题。因而,如上面所阐述的, 一个ii^的挪^l^典型地由图像序列^臓,该图 像序列被粗略地分类为在时间上独立的INTRA图像,在时间上被不同编码的 INTER图像和(可能的)双向预测B图像。由于INTRA编码图像的M效率通 常低于INTER编码图像的臓效率,所以f顿INTRA图像比肺约,特别是在 低比特率应用中。然而,因为INTRA编码图像可以3te于现辦列中的其它图像 而被解码,所以每一个INTRA图衞馐一^\^的现鹏歹啲入口 (體随 机存取点)厄就是一M莉马的起始点。因而,在编码的柳辦列中包含一定M 的INTRA编码图像是有禾啲,例如每隔一定间隔,以便允许随丰赌取游列。此 外, 一个典型的视»列包含很多的,和3^续镜头。由于图像内«—个场景 和另一个场景之间可能有很值得注意的区别,因jlt^每一條力錄的第一图像以 INTRA格^i^彌鹏是有利的。这样,即使没有其它的INTRA编磡贞包含在 编码序列中,至少每一个力綠中的第Hi贞衛共了一个随+膽取点。编稱见辦列 中的每^a可^^解码的图像都以INTRA编石别贞(构成随tJl^取点)开始并且以 紧接在下一个INTRA繊别贞之前的帧结束,它通常被称为图條且或简写为GOP。某些随机存TO作是由终端用户产生的(例如,挪鹏列的3船),例如由 于用户在流传输的视频文件中,«新位置。在这禾衬青况下,解码激艮可能得至, 户产生的随机存取操作附际并且可以相/SJ4执行。但是,在一些瞎况下,随机 存取操作不是由终端用户控制的。例如,在^»流中,,纖辑过的M 流可能包括一些具有与用户实施的随机存鹏作糊以的特点的"切入口 (cut)"。 但是,在后面的这种情况下,解石^^就可會继收不至IJ这样的切入口B^产生的指 示,并且可能不能正确ifel?码序列中te的图像。因此为视^P码:^lf共一种用于检测编蹄1«中的随*0#«作或切入口的可靠的方法慰«^的。现代现频编码标准定义了"^自给自足的年鹏比特流的语法。在撰写本文最流行的标准是国际电信M ITU-T建议H.263 ,"用于低比特率通信的柳«^ (Video coding for low bit rate communication) ", 1998年2月;国际标准fb^纟R/国 际电子工程委员会ISO/正C 14496-2,"音视^J^的普il^码.第二部分:柳频 (Generic Coding of Audiovisual Object. Part2:Visual) ",1999 ^(称为MPEG4);以及 ITU-T建议H.262(ISO/EC 13818-2)(称为MPEG-2)。 i^^标准为比特流以及相应 地为图像序列及图像定义了"^别。财卜的柳MW标准仍^M中。f親提, 对H.263的长期接任者的研究的标准化努力,如已知的ITU-T H.264|ISO/IEC MPEG4第十部分正在被称为ISO/EC MPEG (运动图像专家组)的^^视频iS (JVT)和ITU-T VCEG (枧«码专家组)的标准化主体的S^支持下进行。这 些标准的一^^方面和特别是与本发明相关的H.264冬jj^编码标准的那對寺性 在下面将被描述。附图1 ^^了一个传统的编码图,列,包括INTRA编码的I图像,INTER 编码的P图像和双向编码的B图像,并被排列为具有形式IB B P…籍的駄。 方框表明以显玩l,咧的帧,箭头表明运动W尝,滩中的字職明帧的鄉, 并且方框中的数錢帧的编号(如根据H264柳频编码标准指定的)表明帧的编 麵„。术语"引导帧"或"引导图像"被用于描述樹可在随t/U^取先前的I帧之 后不能被正确«码的帧或图像,并且它们的显示时间是在I帧的显示时间之前 (附图l中的B帧B17是弓I导帧的例子)。在该描述中,术语"开路l^^l更新" (ODR)图像,細于标识一个具有弓l导图像的可随丰膽取的帧。与附图1所示的相类似的编石别贞的模式是普遍的,并且使得对ODR图像的 随机存取尽可肖她简单是希望得到的。B^^^很多可供逃择的iW4^存取ODR图像。 一个典型的解决方案只是 简单地丢弃一些引导B图像。这是一种在不允许参考图^i^f2U6?码和显示)l鹏 的去耦的1见«码标准中典3^的方法,其中I图像始终是一,丰膽取点。该问题的另一^I?决方案是将紧随在一个I帧(按照编5矽解码)i鹏)后面的 所有未存储的帧视为引导帧。当该方法在附图1所描述的简单的情况下工作时, 它缺少AbS存储的弓l导帧的性能。附图2示出了一賴码方案的例子,其中在可随机存取的I帧之前具有一个存储的引导帧。在该例子中,刚才描述的引导帧的简单的lt^示识符并没有正Wkx作。另夕卜一个简明的想法是将所有在I帧(按照编砂解陶1»)之后出现的B图 像视为引导图像。但是,引导图像并不是始终是B图像。例如,由Miska MHannuksela写的科学论文,题目为:"Simple Packet Loss Recovery Method for Video Streaming", Proceedings of Packet Video Workshop 2001, Kyongju,韩国,2001年4 月30日一5月1日以及ITU-TSG16/Q15文献Q15-K38提出一种用于改善在柳频 编码中的i^M弹性(eirorresiliency)的INTRA帧M3S方法,该方法的,使得这 个用于标识弓l导帧的简单方法不可行。附图3示出了一个lteifi了一个存储的帧 间隔的INTRA帧的例子。因此,有一个按照湿玩l,先于INTRA帧的P帧(P17)。JVT«JVT-B063提出一帧可以与予體52iE相关联(在现频比特流中, 作为补充增强信息),其用于指示魏一伟定的帧开女^#马之后用于按照显示顺 序的所有遊卖的帧在内容上,綜全^IE^占用的时间。在存取ODR图像时,可以 {鲷该予體舰SEI信息。但是,有三错点伴随^^种方法。第一,用于雌 SEI信息的解码«^是制示准化的,也就是它不是H.264标准的命令部分并且因 而不必由所有的根据H.264实现的鹏马器支持。因此,可以有一个月g^标准的不 矢爐SEI的解石^l来随t條柳g^标准的流,但是由于它缺少用于弓i导图像的参 考帧而不旨战軒马该«流。第二,解码器可能会不必要»^~^«,如存储 的引导帧,因为它并不知道它们对魏操作来说是朋的。第三,参鄉少的帧 的驢的解码繊作变得更鋭。因此,该方制乍为ODR图像随t膽取的解决方 案不劍雄的。H,264挪鄉码标准(如在JVT委员会草案中指定的)舰"瞬时解码器更 新"和"独立GOP"的概念。术语"瞬时解码器更新"涉诞lj—种"整洁"的随 机存取方法,其中在解码ai呈中,不设计先于INTRA帧的数据。 一刊te GOP 是一个可以3te于先前或以后的图像^lf码的图像组。 —个"瞬时l^马器更新" (IDR)图像发出一條的3蚊GOP开始的信号。因此,根据H.264, 一个IDR 图像可以当作一个随m^取点使用。(详情参见« JVT-B041,它分析了瞬时解 码器,的必^f牛,和JVTC083,其提出了该特性的语法,语义,和标准文本。) 建议包含在H.264视频编码标准中的另一个概念是"逐步解码器更新" (GDR)。它被称为"不整洁"的随,取,其中涉及先前编码的但可能没有接收至啲娜,并脏确的图像内^tl据多^fHi畐编码图像被逐频恢复。GDR允许 使用任何一种帧的随机存取功能。 一种用于GDR的信令机制首先在JVT « JVT-B063中提出(并且随后在JVT出版:^JVT-B109中)。JVT-B063断定主要 有两个基本的可供选择的办^fMGDR,处理,"最佳效果解码"和"保险 解码"。在最佳效mil码中,所有不可用的帧S^予體为中间等级總,开始所有 帧的解码,但仅仅在确定的指示^f牛满;^t后才认为它"旌内容上完全正确。在 "保险解码"中解码器从一个I帧开々辦码,然后在试图解蹄if可更多的非I帧之 前等待,以确保剩余的帧不包含对不可用的数据的参考。该"最^^果"可供选 择的方法在JVT-B063中是首选的。关于逐^?码器,的编码的问题在JVT,JVR:074中研究。i^m断 定GDR不可能实现使用在当时有效的JVTH.264编码解石^^版本,并提出一种称 为"隔离区m^" GREG)的方法应被用于GDR编码。该隔离区:^t是在JVT,JVKX)72中提出的。该隔离区J^^块的一 个可靠区域,用于定勉界的微,环路滤波在穿过该边界时应被关闭以及空间 图像内预测被限制于该边界。参考顷中的隔离区嫩卜面的时间预测也应被禁止。 在大量连续的编码图像期间,隔离区域的皿可以Ji^展的。在图像组(GOP) 中,隔离区域的形状取决于先前图像中的相应的隔离区域的皿,并且该图像组 包括具有絲进行时间预测的情况下编码的原始隔离区域的图像,这种图^^且被 称为"具有謝七的隔离区域的图像组"(IREGGOP)。相应的周期(根据编码参考 帧)被称为"i^七的隔离区域周期"或者"IREG周期"。如上面所述,IREG提供了一种实实现GDR功能的极好的方袪并且可以被用 于衝共體弹性和恢复(参见JVT规JVTC073),感兴趣区鄉码和优先化, 画中画功能,和遮掩的视频皿转变的,(参见« JVTC075)。基于IREG 的逐步随丰几存取,能实现接收机W^体信道的转换,月艮务器的比特繊换,并且 还允许新来者在多点传输^Sffi中很容易进行存取。改进的隔离区域的误差弹性特性和逐步解码器更,性可以同时应用。因 此,当一个编码器纟顿隔离区鄉^^?码器魏时,不用附加的比特斜口 ,性的代价可以"免费"得到«的^弹性。包含在H.264视频编码标准中的另外一个概念是"灵活的宏块顺序" (FMO) 。 FMO首先在JVT娜JVT-C089中提出,随后被包含在H.264标准的JVT委员会草案中。il31将图像分割为切片组,FMO允许以一种不同于典型的光 栅扫描顺序的顺序编码宏块。由该机制实现的主要娜是聽弹性方法、例如离 散切片(slice)(参见JVT,JVT-C090)和切片!^^只(如在JVT ,JVTC091 中提出的)的执行。由于它的灵活性,具有灵活的宏與顿序的其它应用也是可以 的。JVT « JVT-D095提出了一自FMO的增强。在文献JVTC117中提出了在切片边界上关闭环路搶波器来改善^M弹性和 支持理想的GDR。该环路搶波器的P蹄惧有两个另外的tt^:第一,撒共了一种 关于FMO投术中固有的荆于^M问题的很好的解决方案,并,二它是及时 实现舌,切片的正确解码所必须的。发明内容本发明弓1入用于实现随机存取和逐步^«蹄]^»列中的图像的方法。它 特别是基于在H.264视繊J码标准的发展期间提出的逐i^f码器更新的方法并且 提出了一种用于在H.264枧,码解码器环境中的GDR的可行实I肪案。但是, 应该知道本发明并不仅P艮于在H.264标准的限制范围的应用iTPT以应用于其它视 频编码标准,其中挪频序列4OT INTRA和INTER编码帧的组合,码,并且其 采用了与在H.264中所4OT的语法相對以的语法。更明确地,本发明提出了M^顿隔离区域、可對嫁與l,和在切片边界 上关闭环路滤波器来实现逐步解码器更新的实现方案。特别是,本发明使得 JVTC072的初始的隔离区微术适舒被包含在辻264柳鄉码标准中,并且引 入了一种用于3^^石马^l,的jf令方法。本发明iQi出了一种用于可«^«测随丰膽«作的机制。本发明,出了用于引导帧和ODR图像的可靠的jt令^制。附图说明附图1描述了一个IB B P编^li贞模式并示出了引导B帧的位置; 附图2示出了具有存储的弓l导帧的可随机存取的I帧; 附图3描述了INTRA巾J^fi的S7lt:和附图4描述了根据本发明的方框外部顺时针方向^^展的增扮顿序。 具体实《式JM描述一个根据本发明的逐^^码器Mf?的可行实m^案。如同本发明的背景狱中所描述的,在切片边界上环路滤波的关闭有利于逐步解码器更新的执行。特别是,穿过已更新的区:l^i界的环路滤te该被关闭以 避免在正常解码时和在随机存te的i^马期间的象素值失配。没有环路滤波器限制(也就是具有仍欽活的环路滤波的)的逐^I?码器顿是可能的并且令AM恶的失配不是非常可會^生,但^制失配的振幅和传謝艮困难,所以关闭环路滤波器是更可取的。因此,本发明建iOT以下方絲P蹄杯路滤波,即将切片边界 作为图{敏界进行鹏。这个P蹄何以在逐图像的敲HU:用信令総。更特别地, 根据本发明的一^Ht^实施例,如果一个宏iM其Si的相邻宏块属于不同的切 片,该宏块如同在图像左边界一#1皮、2^波。如果一个宏:tM其上面的相邻宏^! 于不同的切片,则戯块如同在图像中社面一行宏块中一稱皮滤波。本发明进一步引入用于结^,码器更新一起^ffi的概念"切片组"。根 据本发明, 一个切片组被定义为MM图像的一定区域的一组切片,在该组中的每 一个切片的尺寸是可以多te调整的。有利地, 一个切片的綱尺寸根据雌的传 输包尺寸进纟预整。 一个切片组,如根据本发明定义的,对于执行細隔离区域方法的逐^lf码器更新(如JVT^MJVT"C072介绍和先ttT^本文中描述的)来 说是理想的。特别是, 一个隔离区^^一定的空间区域,该区域可以包括多于 一个切片并且它的边界应当采用与切片边界相似的方^4行皿(特别是,环路 熗波禾呐部预测必须停止)。当隔离区繊細于执ffi^W^^魏时,隔离区域的形伏,尺寸,位置产生演4七,因为,,的区m型ite图iti间增长。当这种^R^可以M H.264柳«码标准的FMO语^^传达时,当用于,演 变的特定的FMO语法被定义时,很多比特可以被节省。根据本发明,在3^j)贞中的隔离区域的^R和^l信息被存储。 ±^信息被 用T^动估计。执^i謝古计/州尝的方、她被修^^舰隔离区域的4柳。特别 的,当进行全象素运动估计时,在相应的##()贞中盼涉及隔离区嫩卜的运动向量 被丢弃而不计織码駄。顿非^^素併Jf率抛fit动估计/州尝时,特定的 措施也是4fe^、要的。H.264年li^编码标准允许对1/4或1/8象素精确度执ffi^动估 计/州尝。不同的内掛虑波親細于内插V4和1/8子象素。对于1/4象素精确度, 1/2抽樹i^顿6抽头^1«内插,并且1/4抽#^1^平均^^ 1/2抽 靴置上的两个最近的抽样来内插。有一个不同于战一船见则的例外,被称为 "^#&H",它M31平均就的四个S^样来获得。内插M的结果是,雜 "剩余(left-over)"区^响位于内部但敲巨离隔离区:^界少于两个«^素的子象素。根据本发明,当执行对子象素^fl率的运謝古计时,这一事实被考虑。 更特另哋,涉朋巨离隔离区鄉界近于两个象素的块的运动向量被丢弃而不用计織码鉢。当1/8象素併,率用于运动估计/州尝时,进行一个类似,作。如上面阐明的,当使用隔离区«,,»码器,时,隔离区:^尺寸, 微和位置上产生演化。最终,作为逐^?码器魏处理的结果,获得一个可靠 的(即完全重建的)帧。这在隔离区^^为等于»^贞(即驢了針图像区 域)时实现。根据本发明,一fiiii腿种情况,下面的限制就会3勧肝后面帧的编码:1.新的隔离区^^、须避,据先前的IREGGOP进^M测; 对于剩余区域,应该避免参考先于可^1J贞的帧中的剩余区域的预测和参考在时间 上处于先前的IREG GOP之前的帧中招可块的预测。应用适当的类似于上面描述 的参考帧限制和运动向量限讳睐满^^两个要求。在4顿了禾佣根据本发明实现的隔离区域的GDR技术的帧中,每一幅图像 包括一个隔离区嫩d—个剩余区域。该隔离区i^i—个切片组,并助除区鹏 另一个切片组。根据用信令通知的区域的增长率,两个切片组的区^W^M变 化并随着图^^间的隔离区^M。本发明还弓l入了另外的包含在H.264冬见频^^马标准中的用于启动隔离区域的 信令的语法。更特别,根据本发明, 一些新的mb—allocationjn^—types被增加到 H,264标准语法中。这些在下面的表格l中示出,其中增加的被弓l入以支持隔离区 域的语法元素由右手列中的"EREG"表示以及"RECT"表示矩形切片组(如 JVT-D095中提出的):table see original document page 14

表格1:根据本发明的用于支撤te区域的语法^^格1中,当mtLallocationjnapJype是4, 5,或6的时候(«是只有 两个切片组在图像中),,num—slice_jroiqD—minusl被设定为1。参数growth_rate ^^^幅图像中隔离区«长的宏块的数量。使用growth—rate参数和得矢P^皮更 新的图像的尺寸, 一,码器可以决定完全更新整个图像所需要的时间(称为 GDR周期)。例如,在QCEF图像(在U X9的娜P车列中其包括99个16X16的象素宏块)和每幅图像中10个宏块的growtii—rate的情况下,^一个完全, 的图像需要从GDR周期开始(包含的)的ceil (99/10) =10幅图像。新的mtuallocationjiiap—types 4, 5, 6和根据本发明定义的并在表格1中示 出的evdutioiuiirections定义隔离区域的六个切片组演化模式,如下面表格2所示:(
table see original document page 15

表格2:根据本发明的,刀片组演化牛M在表格2中示出的六个区職化模貌义如下-1. 光栅扫描:隔离区域的第一个宏块是图像顶端《^的宏块。隔离区域 以«扫描的)1,增长。2. 反向光栅扫描:隔离区域的第一个宏块是图像底部最右边的宏块。隔离 区域以反向娜扫描的)l,增长。3. 向右擦除:隔离区域的第一个宏块是图像顶端te边的宏i央。隔离区域从顶部向底部增长。在一列的驗部的宏块之后的下一个宏賊銜佑判啲那 列的最顶部的宏块。4. 向錢除:隔离区域的第一个宏块是图像底部最右边的宏块。隔离区域从底部向顶部增长。在一列的最顶部的宏块之后的下一个宏块是在銜i」的左^i5. 口:^卜部顺时针方向:^f柳一个原点在顶端teii^舰并且具有宏块 间隔尺寸的(、y)坐标系,以及{顿H ^^图像中编码宏块的行数, <顿W 来表示图像中编码宏块的列数,隔离区域中的第一宏块是具有坐标(x0,y0) KW/2JH/2)的宏块。"/"标舍位除法(divisionbytruncation)。隔离区域增抝l, 的定义如附图4中别示。6. ,外部反时针方向:使用与在上面5中所介绍的相同的坐标系,和数学运算的定义,隔离区域中的第一宏块是具有坐标为(x0,y0) =<(W-1>2, ((H-iy2)的宏块。增份顷序与附图4所示的相似,但是沿反时针方向。为了4撫麟、繊马范围编辑单飛啊络单膽易辨别一个随禾膽取点,本 发明的一^HM实施例提出GDR周期的开始根据网络适配层(NAL)单^IM 的H264语法用信令総。GDR周期的第一幅图像被称为一个GDR图像。并不 需要精确的语法,但是可能f顿的示例的语法可以在JVT-C074工作草案中找到。本发明鹏出了用于可靠的指示ODR图《斜卩引导帧的机制。以与冈l沐结合GDR图像的信令附寸论的相类似的方式,本发明提出了带有 专用的NAL单^«的ODR图像。财卜,在本发明的一4^实施例中,弓l导帧被明确舰示识出。由于其纖 码^#1行没有强加任何限制和^^化,并且衝共了一种机制,编码器可以M31该 机制容易地i朋咄引导帧,因此駄法是首选的。根据本发明,引导图像可以是 樹可运动W尝图像,例如,P, B和SP图像(SP图像鄉是鹏H,264定义的运 动彬尝图像的#^鄉)。有利地,一个净斜己(被称为leading_picture_flag)与这些 图像鄉相关并被加Alij H.264 NAL单^iE吾法中赫断誠切片报头语法 中,以提供一个明确的指示即麟的图像是一个引导图像。这1择是非常有利 的,由于它需對艮少跡需要比特率TO并且易于编5^I和解码器的《糊。根据本发明,使用如JVT;^JVT-D098中所描述的"子序列丰斜只符"菊旨 示随即存取点。用于GDR和ODR图像以及弓l导图像的信令的准确的语法可以根据应用于 H.264视,码标准的NAL单^^语法的细节来改变。 根据本发明定义的一个ODR图像具有以下特征:1. 解码鹏可以在一个随t膝鹏作后从—个ODR图像开始M新幵始。2. —个ODR图像只包括I或SI切片;3. ODRNAL单元包括一^K刀片EBSP;以及4. ODR NAL单元^OT于所有包含一个ODR图像的编码宏±«^的NAL单元。根据本发明定义的一个GDR图像具有以下特征:1. 解码鹏可以在一领船鹏作后从一个GDR图像开始驢新开始。2. —个GDR图像可以以樹可^^^进fi^码。200810003744.3说明书第12/12页3 • GDR NAL单^Mffi于所有包含一个GDR图像的綱宏^W的NAL 单元。根据本发明,与弓l导图像相关联的leadingj)icture一flag具有以下餘征:1. 如果解码,开々好按照J?^llW的的前一幅ODR图像并且按照J?^顺 序在当前图像和该ODR图^t间没有出现一个IDR图像,则leadingj)icture一flag 标明—个不应该,码的图像。2. leadingjcture—flag使倉^tODR图像的随la^取,该图像OT作为按照i 示Jil^在时间上絲的图像的运动丰M尝参考,如果ODR副象被随丰赌取,贝怀解 码这些不能被正确魏的帧。在H.264解码M中的以下改变是由于采用ODR和GDR图f斜n随t/l^取点 的信令机制以及如根据本发明定义的弓瞎巾麻导致的.-1. 如果一个GDR或ODR图像的子序列标识符与先臓收至啲子序列标识 符不同,贝,码離断一个GDR或ODR图像^ff操作,并M大的长期帧索引 體为0。2. 如果一个ODR操作开$纤一个ODR图像并且如果自从原始ODR图像 没有ODR或IDR图像被解码, 一个具有leadingj)icture一flag等于"1"的图像不,马。3. 如果一个GDR操作开^好一个GDR图像,解码器不l^fif可剩余区域 并且如果没有接收到剩余区域,就不推断娜的丢失。17

标题 发布/更新时间 阅读量
一种附图翻译方法、装置及存储介质-专利编号CN109657619A 2020-05-11 1015
一种专利附图检索法-专利编号CN105630820A 2020-05-11 204
PVC管表面附图工艺-专利编号CN109435518A 2020-05-11 907
基于大数据绘制说明书附图的方法及装置-专利编号CN106503474A 2020-05-13 297
基于大数据绘制摘要附图的方法及装置-专利编号CN106776766A 2020-05-12 426
专利首页摘要附图切割方法及系统-专利编号CN102609932A 2020-05-12 257
基于大数据撰写附图说明的方法及装置-专利编号CN106776762A 2020-05-13 125
一种基于专利全文的专利附图标注的附图展示方式-专利编号CN104573126A 2020-05-11 669
WebGIS环境下规划与自然资源业务附图的制图方法-专利编号CN109977183A 2020-05-13 625
专利摘要附图下载方法及系统-专利编号CN103164458A 2020-05-12 867

高效检索全球专利

IPRDB是专利检索,专利查询,专利分析-国家发明专利查询检索分析平台,是提供专利分析,专利查询专利检索等数据服务功能的知识产权数据服务商。

我们的产品包含105个国家的1.26亿组数据,专利查询、专利分析

电话:13651749426

侵权分析

IPRDB的侵权分析产品是IPRDB结合多位一线专利维权律师和专利侵权分析师的智慧,开发出来的一款特色产品,也是市面上唯一一款帮助企业研发人员、科研工作者、专利律师、专利分析师快速定位侵权分析的产品,极大的减少了用户重复工作量,提升工作效率,降低无效或侵权分析的准入门槛。

立即试用