[go: up one dir, main page]

CN103561273B - 编码装置及方法、错误检测装置及方法、解码装置及方法 - Google Patents

编码装置及方法、错误检测装置及方法、解码装置及方法 Download PDF

Info

Publication number
CN103561273B
CN103561273B CN201310573476.XA CN201310573476A CN103561273B CN 103561273 B CN103561273 B CN 103561273B CN 201310573476 A CN201310573476 A CN 201310573476A CN 103561273 B CN103561273 B CN 103561273B
Authority
CN
China
Prior art keywords
unit
view
error
list
modification
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201310573476.XA
Other languages
English (en)
Other versions
CN103561273A (zh
Inventor
林宗顺
西孝启
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sun Patent Trust Inc
Original Assignee
Panasonic Intellectual Property Corp of America
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Intellectual Property Corp of America filed Critical Panasonic Intellectual Property Corp of America
Publication of CN103561273A publication Critical patent/CN103561273A/zh
Application granted granted Critical
Publication of CN103561273B publication Critical patent/CN103561273B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/174—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/114—Adapting the group of pictures [GOP] structure, e.g. number of B-frames between two anchor frames
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

提供一种能够削减将参照索引编码所需要的编码量、提高编码效率的编码方法及编码装置。有关本发明的编码方法，是利用视点间参照将能够随机访问的图片编码的编码方法，包括：片段头写入步骤（S103），将用来修正参照图片已将视点间参照图片配置到开头的参照列表修正句法写入到能够随机访问的图片的片段头中；配置步骤（S104），将视点间参照图片配置到参照图片列表的开头；以及编码步骤（S105），使用参照图片列表，将能够随机访问的图片的对象片段编码。

Description

编码装置及方法、错误检测装置及方法、解码装置及方法
本申请是申请日为2010年3月26日，申请号为201080001719.7，发明名称为“编码装置及方法、错误检测装置及方法、解码装置及方法”的申请的分案申请。
技术领域
本发明涉及在所有的多媒体数据的编码及解码中使用的编码方法、错误检测方法及解码方法，特别涉及在多视点影像的编码及解码中使用的编码方法、错误检测方法及解码方法。
背景技术
为了对视听者提供3维的视觉效果，有几个方法。一个是使视听者的左右眼分别看到两个影像的方法。这被称作立体摄像，是使用两台照相机摄影两个影像的方法。为了显示立体影像从以前就使用的技术之一中，有将颜色成分过滤以便能够使每个单眼看到的方法。在这样的技术中，达到各眼的图像的分辨率变低。
通过近年来的显示技术的进步，现在视听者能够用单眼视听最大分辨率的影像。H.264/MPEG-4AVC多视点影像编码(MVC)的影像规格是这样的将各视点(view)以最大分辨率显示的情况下的、以3维图像的压缩为对象而制定的。
H.264/MPEG-4AVC多视点影像编码(MVC)的影像规格提供了能够将以多个视点的集(set)为对象的运动图像高效率地压缩的压缩工具集。根据MVC的影像规格，能够使用基于视点集不同的重构图片的预测编码将图片压缩。该“视点间”预测利用由各个照相机大致同时摄影的图像的相关关系而将图片高效率地压缩。
在MVC的影像规格中，“视点间”预测仅对具有相同的图片序列号(Picture order count)信息的不同视点的图片进行。图片序列号信息为了表示相同视点的重构图片的顺序而使用。在MVC影像规格中，将具有相同的图片序列号信息的不同视点的图片(即由MVC规格定义的视点组件)作为称作访问单元的容器集中。
在MVC的影像规格中，将哪个片段都只参照相同的访问单元内的片段的编码图片称作锚图片。如图1所示，基于在编码图片的NAL单元头中带有的位、具体而言基于表示anchor_pic_flag的位识别锚图片。另外，图1是表示访问单元的数据结构的一例的图。
通过该位，MVC解码器能够识别编码视频序列的锚图片，并且能够将这些锚图片作为MVC解码器能够不将处于锚图片之前的图片解码而重构图像的随机访问点使用。
另外，如图1所示，包含在访问单元中的视点组件仅第一视点组件为基础视点组件，其余的视点组件为非基础视点组件。在基础视点组件之后出现的非基础视点组件为第一非基础视点组件。
H.264/MPEG-4AVC高端类(High Profile)在HD存储媒体(介质)及HD数字广播等各种用途中广泛使用。由MVC影像规格定义的多视点高端类是将H.264/MPEG-4AVC高端类扩展而制定的，已经实现的H.264/MPEG-4AVC高端类解码器通过简单的修正就能够对应于使用多视点高端类的压缩影像流的解码。
如上所述，锚图片可以作为随机访问点使用。因而，锚图片对于需要特殊再现或流切换等的功能的应用是不可或缺的。
锚图片在MVC的影像规格中定义为哪个片段都仅参照同一访问单元内的片段的编码图片。在MVC的影像规格上，访问单元根据对应视点数而由1个以上的视点组件构成。
在许多应用中，为了提高压缩效率，在锚访问单元的视点组件中，被内编码的组件只有1个，将该锚访问单元的其余的视点组件互编码。互编码的视点组件利用从被内编码的视点组件的视点间预测。内编码的视点组件为了重构视点而仅利用空间预测工具(例如内预测)。
在H.264/MPEG-4AVC规格或MVC等的影像规格中，使用参照图片列表按照图像识别能够用于样本的预测的参照图片。编码图片的各编码块通过对参照图片列表发信索引而能够参照预测用的参照图片(参照专利文献1)。
关于各视点组件的样本，制作互预测及视点间预测两者的列表的初始化处理由MVC规定。如在MVC的影像规格中规定那样，参照列表的初始化处理将同一视点的参照图片置于列表的开头，将视点间参照图片放在参照图片列表的最后。在图2中表示这样的参照图片列表的例子。另外，图2是用来说明以往的参照图片列表的初始化处理的一例的图。
以上，能够使用表示视点内参照图片(互预测)和视点间参照图片的参照列表进行预测编码。
专利文献1：日本特开2007－159111号公报
发明内容
但是，在上述以往技术中，需要按照视点组件的块将索引(参照索引)发送给参照图片列表，传送这些参照索引的位变多，有编码效率不好的问题。
如图1所示，参照索引的发信按照片段的宏块进行。锚图片由于不能进行互预测(通过相同视点的已重构图片进行的预测)，所以参照图片列表的索引的大半没有被使用。
具体而言，在图2所示的例子中，在包含在访问单元10中的图片是锚图片的情况下，在将包含在第二视点中的视点组件20编码时，不参照参照图片A～D，在将视点组件20编码时，参照视点间参照图片E。因而，在每个宏块中，参照索引[4]被编码的情况较多，而参照索引[0]～[3]没有被编码。
此时，一般用来对参照图片列表发送参照索引的位如图3所示，随着参照索引的值而增加。图3表示在片段的编码中使用的熵编码的种类是可变长编码的情况下的参照索引的值与将参照索引编码时的位数的关系。
如图3所示，由于视点间参照图片总是被放在参照图片列表的最后，所以视点间参照图片用的参照索引(在图2的例子中是表示视点间参照图片的参照索引)的值不会变小。因而，视点组件的用来将这样的参照索引编码的位变得相当多。
所以，本发明是为了解决上述问题而做出的，目的是提供一种能够削减将参照索引编码所需要的编码量、提高编码效率的编码方法及编码装置。
为了解决上述问题，有关本发明的编码方法，是利用视点间参照将能够随机访问的图片编码的编码方法，包括：片段头写入步骤，将用来修正第一参照图片列表以将视点间参照图片配置到开头的第一参照列表修正句法写入到上述能够随机访问的图片的片段头中；配置步骤，将上述视点间参照图片配置到上述第一参照图片列表的开头；以及编码步骤，使用上述第一参照图片列表，将上述能够随机访问的图片的对象片段编码。
在能够随机访问的图片中，由于参照视点间参照图片的情况较多，所以根据有关本发明的编码方法，表示视点间参照图片的参照索引成为较小的值，能够削减将参照索引编码所需要的代码量，提高编码效率。
此外，也可以是，上述编码方法还包括对NAL单元头进行写入的NAL单元头写入步骤；在上述NAL单元头写入步骤中，将表示上述对象片段是包含在锚图片中的片段的值设定在anchor_pic_flag中，将上述anchor_pic_flag写入到上述NAL单元头中。
由此，能够将表示是锚图片的值写入到NAL单元头中，所以在解码时，仅通过计息NAL单元头就能够判断解码对象的图像是否是锚图片。
此外，也可以是，上述片段头写入步骤还判断上述对象片段的片段类型是否是B片段，在上述对象片段的片段类型是B片段的情况下，将用来修正与上述第一参照图片列表不同的第二参照图片列表以将视点间参照图片配置到开头的第二参照列表修正句法写入到上述片段头中。
由此，即使在利用多个参照图片列表的情况下，也能够将视点间参照图片配置在各个参照图片列表的开头，能够削减将参照索引编码所需要的代码量，提高代码效率。
此外，也可以是，在上述第一参照列表修正句法的写入中，将表示修正上述第一参照图片列表的值设定到ref_pic_list_modification_flag_l0中；将上述ref_pic_list_modification_flag_l0写入到上述片段头中；将表示第一abs_diff_view_idx_minus1对应于对视点间参照索引的预测值加上的值的值设定在第一modification_of_pic_nums_idc中；将上述第一modification_of_pic_nums_idc写入到上述片段头中；将0设定到上述第一abs_diff_view_idx_minus1中；将上述第一abs_diff_view_idx_minus1写入到上述片段头中；将表示结束上述第一参照图片列表的修正的值设定在第二modification_of_pic_nums_idc中；将上述第二modification_of_pic_nums_idc写入到上述片段头中。
由此，能够通过多个参数向片段头写入将视点间参照图片配置到参照图片列表的开头的情况，所以在解码时仅通过解析片段头就能够判断是否修正了参照图片。
此外，也可以是，在上述第一参照列表修正句法的写入中，将上述ref_pic_list_modification_flag_l0、上述第一modification_of_pic_nums_idc、和上述第一abs_diff_view_idx_minus1依次连续写入到上述片段头中。
由此，将各参数依次连续写入，所以解码时的片段头的解析变得容易。
此外，也可以是，在上述第二参照列表修正句法的写入中，将表示修正上述第二参照图片列表的值设定到ref_pic_list_modification_flag_l1中；将上述ref_pic_list_modification_flag_l1写入到上述片段头中；将表示第二abs_diff_view_idx_minus1对应于对视点间参照索引的预测值加上的值的值设定在第三modification_of_pic_nums_idc中；将上述第三modification_of_pic_nums_idc写入到上述片段头中；将0设定到上述第二abs_diff_view_idx_minus1中；将上述第二abs_diff_view_idx_minus1写入到上述片段头中；将表示结束上述第二参照图片列表的修正的值设定在第四modification_of_pic_nums_idc中；将上述第四modification_of_pic_nums_idc写入到上述片段头中。
由此，即使是利用多个参照图片列表的情况，也能够通过多个参数按照参数图片列表向片段头写入将视点间参照图片配置到参照图片列表的开头的情况，所以在解码时仅通过解析片段头就能够判断各个参照图片列表是否被修正了。
此外，也可以是，在上述第二参照列表修正句法的写入中，将上述ref_pic_list_modification_flag_l1、上述第三modification_of_pic_nums_idc、和上述第二abs_diff_view_idx_minus1依次连续写入到上述片段头中。
由此，将各参数依次连续写入，所以解码时的片段头的解析变得容易。
此外，也可以是，上述能够随机访问的图片是锚图片。
此外，有关本发明的错误检测方法，是检测利用视点间参照来编码的能够随机访问的图片的错误的错误检测方法，包括：初始化步骤，将表示在上述能够随机访问的图片中没有发生错误的值设定到detected_error_flag中；判断步骤，将在用来修正参照图片列表以将视点间参照图片配置到开头的修正句法中包含的至少1个参数从上述能够随机访问的图片的片段头中读出，判断在所读出的参数中是否发生了错误；以及设定步骤，在判断为发生了上述错误的情况下，将表示在上述能够随机访问的图片中发生了错误的值设定到上述detected_error_flag中；在上述判断步骤中，进行以下的至少1个判断处理：(i)第一判断处理，从上述片段头中，作为上述参数而读出ref_pic_list_modification_flag_l0，判断所读出的ref_pic_list_modification_flag_l0是否是表示将上述参照图片列表修正的值，将上述ref_pic_list_modification_flag_l0不是表示将上述参照图片列表修正的值的情况判断为发生了错误；(ii)第二判断处理，从上述片段头中，作为上述参数而读出modification_of_pic_nums_idc，判断所读出的modification_of_pic_nums_idc是否是表示abs_diff_view_idx_minus1对应于对视点间参照索引的预测值加上的值的值，将上述modification_of_pic_nums_idc不是表示上述abs_diff_view_idx_minus1是对应于对上述预测值加上的值的情况判断为发生了错误；(iii)第三判断处理，从上述片段头中，作为上述参数而读出abs_diff_view_idx_minus1，判断所读出的abs_diff_view_idx_minus1的值是否是0，将上述abs_diff_view_idx_minus1不是0的情况判断为发生了错误。
由此，能够判断将参照图片列表修正以将视点间参照图片配置到参照图片列表的开头而编码的能够随机访问的图片是否被正确地编码。
此外，也可以是，在上述片段头中，依次连续写入上述ref_pic_list_modification_flag_l0、上述modification_of_pic_nums_idc、和上述abs_diff_view_idx_minus1；在上述判断步骤中，依次进行上述第一判断处理、上述第二判断处理和上述第三判断处理，直到由上述第一判断处理、上述第二判断处理和上述第三判断处理的某个判断处理判断为发生了错误。
由此，在多个参数中的即使1个没有被写入正确的值的情况下能够检测到错误。
此外，也可以是，上述能够随机访问的图片是锚图片。
此外，有关本发明的解码方法，是将利用视点间参照编码的能够随机访问的图片解码的解码方法，包括：解析步骤，通过将上述能够随机访问的图片的片段头解析，判断是否修正了参照图片列表以将视点间参照图片配置到开头；预测步骤，在判断为修正了上述参照图片列表的情况下，按照预先设定的规格生成预测图像，在判断为没有修正上述参照图片列表的情况下，按照与上述规格不同的方法生成预测图像；解码步骤，基于上述预测图像，将上述能够随机访问的图片的对象片段解码。
由此，能够将修正参照图片列表以将视点间参照图片配置到参照图片列表的开头而编码的能够随机访问的图片正确地解码。
此外，也可以是，在上述解析步骤中，通过将上述片段头解析，判断ref_pic_list_modification_flag_l0是否是表示修正了上述参照图片列表的值。
由此，仅通过读取ref_pic_list_modification_flag_l0，就能够判断参照图片列表是否被修正。
此外，也可以是，在上述预测步骤中，在上述ref_pic_list_modification_flag_l0是表示修正了上述参照图片列表的情况下，(i)将用来修正上述参照图片列表的修正句法从片段头读出；(ii)将上述视点间参照图片配置到上述参照图片列表的开头；(iii)通过使用上述参照图片列表进行运动预测，生成上述预测图像。
由此，仅通过按照规格解码，就能够进行参照图片列表的修正，能够正确地将能够随机访问的编码图片解码。
此外，也可以是，在上述预测步骤中，在上述ref_pic_list_modification_flag_l0不是表示修正了上述参照图片列表的值的情况下，不参照参照索引，而将基础视点的图像作为参照图像生成上述预测图像。
由此，即使是参照图片列表没有被修正的情况，也能够将能够随机访问的编码图片解码。
另外，本发明不仅能够作为编码方法、错误检测方法及解码方法实现，还能够作为具备包含在该编码方法、错误检测方法及解码方法中的处理步骤作为处理部的装置实现。
根据本发明，能够削减将参照索引编码所需要的代码量、提高编码效率。
附图说明
图1是表示访问单元的数据结构的一例的图。
图2是用来说明以往的参照图片列表的初始化处理的一例的图。
图3是表示参照索引的值、与通过可变长熵编码将参照索引的值编码时的位数的关系的一例的图。
图4是表示有关本发明的实施方式1的编码装置的结构的一例的框图。
图5是表示将有关本发明的实施方式1的非基础视点组件编码的编码部的结构的一例的框图。
图6是用来说明有关本发明的实施方式1的参照图片列表的修正的一例的图。
图7A是表示将有关本发明的实施方式1的锚访问单元的非基础视点组件(P图片)编码的情况下的流结构的一例的图。
图7B是表示将有关本发明的实施方式1的锚访问单元的非基础视点组件(B图片)编码的情况下的流结构的一例的图。
图8是表示将有关本发明的实施方式1的锚访问单元非基础视点组件编码的处理的一例的流程图。
图9是表示在将有关本发明的实施方式1的锚访问单元的非基础视点组件编码时、将参照列表MVC修正句法写入的处理的一例的流程图。
图10是表示有关本发明的实施方式2的解码装置的结构的一例的框图。
图11是表示有关本发明的实施方式2的错误检测部的结构的一例的框图。
图12是表示检测有关本发明的实施方式2的锚访问单元非基础视点组件的错误的处理的一例的流程图。
图13是表示有关本发明的实施方式2的MVC解码器部的结构的一例的框图。
图14是表示有关本发明的实施方式2的MVC解码器部的详细的结构的一例的框图。
图15是表示将有关本发明的实施方式2的锚访问单元非基础视点组件解码的处理的一例的流程图。
图16是表示有关本发明的实施方式的变形例的解码装置的结构的一例的框图。
图17是表示有关本发明的实施方式的变形例的解码装置的动作的一例的框图。
图18是表示实现内容分发服务的内容供给系统的整体结构的一例的示意图。
图19是表示便携电话的外观的图。
图20是表示便携电话的结构例的框图。
图21是表示数字广播用系统的整体结构的一例的示意图。
图22是表示电视机的结构例的框图。
图23是表示对作为光盘的记录媒体进行信息的读写的信息再现记录部的结构例的框图。
图24是表示作为光盘的记录媒体的结构例的图。
图25是表示实现有关各实施方式的图像编码方法及图像解码方法的集成电路的结构例的框图。
具体实施方式
以下，使用附图对本发明的实施方式详细地说明。
(实施方式1)
有关本发明的实施方式1的编码方法，是利用视点间参照将能够随机访问的图片编码的编码方法，其特征在于，包括：片段头写入步骤，将用来修正参照图片列表以将视点间参照图片配置到开头的修正句法写入到能够随机访问的图片的片段头中，所述参照图片列表表示视点内参照图片和视点间参照图片；配置步骤，将视点间参照图片配置到参照图片列表的开头；编码步骤，使用参照图片列表，将能够随机访问的图片的对象片段编码。
首先，对实施有关本发明的编码方法的编码装置的一例进行说明。
图4是表示有关本发明的实施方式1的编码装置100的结构的一例的图。编码装置100是将包括多个视点的图像进行编码的装置，在图4所示的例子中，将基础视点的图像与非基础视点的图像编码。编码装置100具备第一视点组件编码部110、存储部120、和第二视点组件编码部130。
第一视点组件编码部110取得第一视点的图像即基础视点的图像201，通过将所取得的基础视点的图像201压缩编码，生成压缩基础视点组件202。将生成的压缩基础视点组件202作为位流输出。进而，第一视点组件编码部110通过将压缩基础视点组件202进行本地解码，生成重构图像203。将所生成的重构图像203保存到存储部120中。
存储部120是用来存储参照图像的存储器。具体而言，存储部120将由第一视点组件编码部110生成的重构图像203作为参照图像存储。
第二视点组件编码部130取得第二视点的图像即非基础视点的图像211，通过将所取得的非基础视点的图像压缩编码，生成压缩非基础视点组件212。具体而言，第二视点组件编码部130从存储部120中读出参照图像213，使用所读出的参照图像213生成预测图像，将所生成的预测图像与非基础视点的图像211的差分编码。另外，将所生成的压缩非基础视点组件212作为位流输出。
此外，第二视点组件编码部130在将能够随机访问的图片、例如锚图片编码时，进行参照图片列表的修正。关于第二视点组件编码部130的详细的结构，使用图5在后面说明。
图5是表示将有关本发明的实施方式1的第二视点组件编码部130的结构的一例的框图。如图5所示，第二视点组件编码部130具备编码部301、头写入部302和列表修正部303。
编码部301通过将非基础视点的图像211使用参照图片列表编码，生成压缩非基础视点组件212。具体而言，编码部301在编码对象的非基础视点的图像211是包含在能够随机访问的图片中的图像的情况下，使用由列表修正部303修正后的参照图片列表，从存储部120读出参照图像213。另外，能够随机访问的图片例如是锚图片。
在将锚图片编码时进行视点间参照的情况下，从存储部120读出的参照图像213是包含在同一访问单元中的基础视点的重构图像。并且，编码部301使用参照图像213生成预测图像，将所生成的预测图像与非基础视点的图像211的差编码。
头写入部302在非基础视点的图像211是包含在能够随机访问的图片中的图像的情况下，将用来变更参照图片列表的修正句法写入到片段头中。修正句法例如是参照列表MVC修正句法，是图1所示的ref_pic_list_mvc_modifications()。关于头写入部302写入的修正句法的具体例在后面说明。
另外，参照图片列表是表示参照索引与参照图像的对应关系的列表。如图2所示，参照图片列表将视点内参照图片与视点间参照图片与多个参照索引分别建立对应表示。
进而，头写入部302将anchor_pic_flag写入到NAL单元头中。具体而言，头写入部302在非基础视点的图像211是包含在锚图片中的图像的情况下，将表示是锚图片的值(具体而言为1)设定在anchor_pic_flag中，将设定的anchor_pic_flag写入到NAL单元头中。另外，关于anchor_pic_flag的具体例在后面说明。
列表修正部303是有关本发明的配置部的一例，修正参照图片列表，以将视点间参照图片配置到参照图片列表的开头。即，列表修正部303变更参照索引与参照图片的对应关系。具体而言，变更参照图片列表，以使参照索引[0]表示视点间参照图片。
例如，如图6所示，列表修正部303将参照图片列表修正，以将与参照索引[4]建立了对应的视点间参照图片E与参照索引[0]建立对应。由此，在非基础视点的图像211是包含在锚图片中的图像的情况下，能够削减将参照索引编码所需要的代码量。
例如，在包含在图2的视点组件20中的非基础视点的图像211是包含在锚图片中的图像的情况下，仅同一访问单元内的图像为参照图像。即，在将非基础视点的图像211编码时，不参照参照图片A～D而参照视点间参照图片E。
因而，被频繁使用的参照索引是参照索引[0]，在图3所示的例子中，能够用1位表现。在参照图片的修正前，表示视点间参照图片E的参照索引是参照索引[4]，需要5位，所以能够削减将参照索引编码所需要的编码量。
通过以上的结构，有关本发明的编码装置100在将能够随机访问的图片编码时，将视点间参照图片配置在参照图片列表的开头。由此，频繁被使用的视点间参照图片的参照索引成为较小的值，能够削减为了将参照索引编码所需要的代码量、即表示参照索引的位，所以能够提高编码效率。
以下，对通过将有关本发明的实施方式1的锚访问单元的非基础视点组件编码而生成的流结构的一例进行说明。另外，访问单元的非基础视点组件的位置为图1所示那样。
图7A是表示将锚访问单元的非基础视点组件编码的P片段的流结构的一例的图。
如图7A所示，anchor_pic_flag被写入在NAL单元头中。anchor_pic_flag是为了判断该anchor_pic_flag被赋予的图像是否是包含在锚图片中的图像而使用的标志。
具体而言，anchor_pic_flag的值是1表示构成图片的全部的片段仅参照同一访问单元内的片段进行编码、即没有使用互预测(时间方向)。此外，anchor_pic_flag的值是1表示以显示顺序后接的编码图片没有参照在解码顺序中比该编码图片靠前的图片。
即，被赋予了值设定为1的anchor_pic_flag的图片能够被随机访问。反之，被赋予了值设定为0的anchor_pic_flag不能被随机访问。因而，例如将包含在锚图片的全部的NAL单元中的anchor_pic_flag设定为1。
此外，如图7A所示，将ref_pic_list_modification_flag_l0、modification_of_pic_nums_idc以及abs_diff_view_idx_minus1写入在片段头中。这3个参数对应于图1所示的ref_pic_list_mvc_modifications()、即参照列表MVC修正句法。
ref_pic_list_modification_flag_l0是表示是否将参照图片列表修正的参数。具体而言，ref_pic_list_modification_flag_l0的值是1表示将第一参照图片列表(列表0)修正，ref_pic_list_modification_flag_l0的值是0表示不将第一参照图片列表(列表0)修正。
另外，第一参照图片列表例如是表示P图片参照的参照图像的列表。或者，第一参照图片列表例如是表示B图片参照的参照图像中的、一方向(例如前方)的参照图像的列表。
modification_of_pic_nums_idc与abs_diff_view_idx_minus1等的其他参数一起使用，是表示参照图像列表的修正方法的参数。例如，modification_of_pic_nums_idc的值是5表示abs_diff_view_idx_minus1的值对应于对视点间参照句法的预测值加上的值。此外，modification_of_pic_nums_idc的值是3表示参照图片列表的修正处理已完成。
abs_diff_view_idx_minus1表示关于视点间参照索引的值。具体而言，在modification_of_pic_nums_idc的值是5的情况下，abs_diff_view_idx_minus1的值对应于对视点间参照索引的预测值加上的差值。因而，在abs_diff_view_idx_minus1的值是0的情况下，视点间参照索引为[0]，视点间参照图片配置在参照列表的开头。
图7B是表示锚访问单元的非基础视点组件的编码B片段的流结构的一例的图。与图7A所示的编码P片段的情况相比，还将ref_pic_list_modification_l1、modification_of_pic_nums_idc及abs_diff_view_idx_minus1写入到片段头中。
ref_pic_list_modification_l1是表示是否将参照图片列表进行修正的参数。具体而言，ref_pic_list_modification_flag_l1的值是1表示将第二参照图片列表(列表1)进行修正，ref_pic_list_modification_flag_l1的值是0表示不将第二参照图片列表(列表0)进行修正。另外，第二参照图片列表例如是表示B图片参照的参照图像中的一方向(例如后方)的参照图像的列表。
关于modification_of_pic_nums_idc及abs_diff_view_idx_minus1，与图7A所示的是相同的，所以省略说明。
以下，对有关本发明的实施方式1的编码装置100的动作进行说明。
图8是表示将有关本发明的实施方式1的锚访问单元非基础视点组件的编码处理的一例的流程图。
如图8所示，首先，头写入部302将anchor_pic_flag参数的值设定为1(S101)。接着，头写入部302将anchor_pic_flag参数写入到片段的NAL单元头中(S102)。
接着，头写入部302将参照列表MVC修正句法写入到片段头中(S103)。然后，列表修正部303将视点间参照图片放置到参照图片列表的开头(S104)。视点间参照图片例如是锚访问单元的基础视点组件。
最后，编码部301使用视点间参照图片将非基础视点组件编码(S105)。
以上，有关本发明的实施方式1的编码装置100在编码对象的图像是包含在锚图片等的能够随机访问的图片中的图像的情况下，将参照图片列表修正，以将视点间参照图片配置到参照列表的开头。以下，对具体的参照列表MVC修正句法的写入处理(S103)进行说明。
图9是表示在将有关本发明的实施方式1的锚访问单元的非基础视点组件编码时、写入参照列表MVC修正句法的处理的一例的流程图。
如图9所示，首先，头写入部302将ref_pic_list_modification_flag_l0的参数的值设定为1(S201)。接着，头写入部302将ref_pic_list_modification_flag_l0参数写入到片段头中(S202)。这样，头写入部302将表示对参照图片列表(第一参照图片列表)进行修正的值写入到片段头中。
接着，头写入部302将第一modification_of_pic_nums_idc参数的值设定为5(S203)。然后，头写入部302在片段头的ref_pic_list_modification_flag_l0参数之后的位置中写入第一modification_of_pic_nums_idc参数(S204)。
接着，头写入部302将abs_diff_view_idx_minus1参数的值设定为0(S205)。接着，头写入部302在片段头的第一modification_of_pic_nums_idc参数之后的位置中写入abs_diff_view_idx_minus1参数(S206)。这样，头写入部302将表示将视点间参照图片配置到参照列表的开头的值写入到片段头中。
接着，头写入部302将第二modification_of_pic_nums_idc参数的值设定为3(S207)。接着，头写入部302在片段头的第一abs_diff_view_idx_minus1参数之后的位置中，将第二modification_of_pic_nums_idc参数写入到片段头中(S208)。这样，头写入部302将表示完成参照图片列表的修正处理的值写入到片段头中。
但是，也有在片段头中不是紧接abs_diff_view_idx_minus1参数之后写入第二modification_of_pic_nums_idc的数值3的情况，而至少一次写入到比ref_pic_list_modification_flag_l1参数靠前的位置中、或者写入到参照列表MVC修正句法的最后的参数位置中。
这里，判断片段类型是否是B片段(S209)。该判断例如由编码部301或控制部(在图4及图5中没有图示)实施。
在片段类型是P片段的情况下(S209中“否”)，参照列表MVC修正句法的写入处理结束。
在片段类型是B片段的情况下(S209中“是”)，头写入部302在片段头中的第二modification_of_pic_nums_idc参数的数值3之后写入新的参数。具体而言，首先，头写入部302将ref_pic_list_modification_flag_l1参数的值设定为1(S210)。接着，头写入部302将ref_pic_list_modification_flag_l1写入到片段头中(S211)。这样，头写入部302将表示修正第二参照图片列表的值写入到片段头中。
接着，头写入部302将新的modification_of_pic_nums_idc参数的值设定为5(S212)，写入到片段头的ref_pic_list_modification_flag_l1参数之后的位置中(S213)。进而，头写入部302将新的abs_diff_view_idx_minus1参数的值设定为0(S214)，写入到片段头的modification_of_pic_nums_idc参数之后的位置中(S215)。这样，头写入部302将表示将视点间参照图片配置到参照列表的开头的值写入到片段头中。
最后，头写入部302将末尾的modification_of_pic_nums_idc参数的值设定为3(S216)，写入到参照列表MVC修正句法的最后的参数位置中(S217)。
以上，有关本发明的实施方式1的编码装置100在将能够随机访问的图片、例如锚图片编码时，将表示将视点间参照图片配置到参照图片列表的开头的句法写入到片段头中。进而，编码装置100在将包含在非基础视点的锚图片中的图像编码时，将参照图片列表修正以将视点间参照图片配置到参照图片列表的开头，按照所修正的参照图片列表将非基础视点的图像编码。
由此，能够减小被频繁使用的视点间参照图片的参照索引的值，能够削减将参照索引编码所需要的代码量。此外，由于在编码流的片段头中包含有表示将参照图片列表修正的句法，所以能够在解码装置侧将编码流适当地解码。
另外，在上述实施方式中，表示了锚访问单元由基础视点组件和非基础视点组件的两个视点组件构成的例子，但如图1所示，锚访问单元也可以包含多个非基础视点组件。
在此情况下，列表修正部303修正参照图片列表，以使分别表示多个视点间参照图片的参照索引比表示视点内参照图片的参照索引值小。例如，在1个非基础视点组件(第一非基础视点组件)参照多个视点组件(基础视点组件及第二基础视点组件)的情况下，例如列表修正部303将参照图片列表修正，以使参照索引[0]表示基础视点组件、参照索引[1]表示第二非基础视点组件。
(实施方式2)
有关本发明的实施方式2的错误检测方法，是检测利用帧间参照来编码的能够随机访问的图片的错误的错误检测方法，其特征在于，包括：初始化步骤，将表示在能够随机访问的图片中没有发生错误的值设定到规定的错误检测标志中；判断步骤，将在用来修正参照图片列表以将视点间参照图片配置到开头的修正句法中包含的参数从片段头中读出，判断在所读出的参数中是否发生了错误；设定步骤，在判断为发生了错误的情况下，将表示在发生了错误的值设定到错误检测标志中。
此外，有关本发明的实施方式2的解码方法，是将利用视点间参照来编码的能够随机访问的图片解码的解码方法，其特征在于，包括：解析步骤，通过将能够随机访问的图片的片段头解析，判断是否修正了参照图片列表以将视点间参照图片配置到开头；预测步骤，在判断为修正了参照图片列表的情况下，按照预先设定的规格生成预测图像，在判断为没有修正参照图片列表的情况下，按照与上述规格不同的方法生成预测图像；解码步骤，基于预测图像，将能够随机访问的图片的对象片段解码。
首先，对实施有关本发明的实施方式2的错误检测方法及解码方法的解码装置的一例进行说明。
图10是表示有关本发明的实施方式2的解码装置400的结构的一例的框图。解码装置400是将编码了多个视点的图像而生成的编码流(MVC位流501)解码的装置，具备检测位流的错误的功能。如图10所示，解码装置400具备错误检测部410、切换部420、MVC解码器部430、存储部440、和错误隐藏部450。
错误检测部410是实施有关本发明的实施方式2的错误检测方法的处理部的一例。错误检测部410是包含在MVC位流501中的编码图片，检测利用视点间参照来编码的能够随机访问的图片的错误。例如，错误检测部410判断在包含于锚单元中的压缩非基础视点组件中是否发生了错误。
在检测到错误的情况下，错误检测部410对预先设定的错误检测标志502设定表示发生了错误的值，将所设定的错误检测标志502向切换部420输出。在图10所示的例子中，错误检测标志502是detected_error_flag，在检测到错误的情况下在detected_error_flag中设定1。在没有检测到错误的情况下，例如在初始状态下，将detected_error_flag设定0。另外，关于错误检测部410的详细的结构在后面进行说明。
切换部420根据错误检测标志502切换将MVC位流501输出给MVC解码器部430及错误隐藏部450的哪个。具体而言，切换部420在错误检测标志502表示发生了错误的情况下，将MVC位流501向错误隐藏部450输出。例如切换部420在detected_error_flag的值是1的情况下，将MVC位流501向错误隐藏部450输出。
此外，切换部420在错误检测标志502表示没有发生错误的情况下，将MVC位流501向MVC解码器部430输出。例如，切换部420在detected_error_flag的值是0的情况下，将MVC位流501向MVC解码器部430输出。
MVC解码器部430是实施有关本发明的实施方式2的解码方法的处理部的一例，将MVC位流501解码。具体而言，MVC解码器部430从存储部440读出参照图像503，使用读出的参照图像503生成预测图像，利用所生成的预测图像将包含在MVC位流501中的能够随机访问的图片解码。将通过解码生成的重构图像504输出到外部并保存到存储部440中。另外，关于MVC解码器部430的详细的结构在后面说明。
存储部440是用来存储重构图像504的存储器。另外，在存储部440中，也可以仅存储由MVC解码器部430生成的重构图像504中的、有可能被后续的处理参照的图像。
错误隐藏部450实施将压缩非基础视点组件中产生的错误隐藏的错误隐藏处理。例如，错误隐藏部450将包含在与发生了错误的非基础视点组件相同的访问单元中的、重构的基础视点组件505从存储部440读出，将所读出的重构的基础视点组件505作为非基础视点组件的重构图像506输出。
另外，错误隐藏部450实施的错误隐藏处理并不限于此，也可以通过执行利用其他图像的运动预测及运动补偿处理等，生成错误隐藏图像，将所生成的错误隐藏图像作为重构图像506输出。
这里，简单地按照数据流对图10所示的解码装置400的处理部的动作进行说明。首先，由错误检测部410读取MVC位流501，输出作为错误检测标志502的一例的detected_error_flag参数。
切换部420从错误检测部410读取detected_error_flag参数，如果detected_error_flag的值是0，则将包含在MVC位流501中的编码视点组件输出给MVC解码器部430。MVC解码器部430读取编码视点组件，从存储部440读取参照图像503，输出重构图像504。另外，重构图像504然后被保存到存储部440中。
在detected_error_flag的值是1的情况下，切换部420将包含在MVC位流501中的非基础视点组件发送给错误隐藏部450。错误隐藏部450将重构的基础视点组件505及编码非基础视点组件读取，将错误隐藏图像作为重构图像506输出。在错误隐藏部450使用的错误隐藏方法中，例如有将重构基础视点复制、作为非基础视点输出的方法。
接着，使用图11对有实施关本发明的实施方式2的错误检测方法的错误检测部410的结构进行说明。另外，图11是表示将有关本发明的实施方式2的错误检测部410的结构的一例的框图。
如图11所示，错误检测部410具备参数判断部601和错误标志设定部602。
参数判断部601将包含在用来修正参照图片列表的修正句法中的至少1个参数从片段头读出，判断在所读出的参数中是否发生了错误。具体而言，参数判断部601进行以下的3个第一～第三判断处理的至少其一。
第一判断处理是从片段头读出ref_pic_list_modification_flag_l0作为参数、判断所读出的ref_pic_list_modification_flag_l0是否是表示将参照图片列表修正的值(例如1)的处理。在第一判断处理中，将ref_pic_list_modification_flag_l0不是表示将参照图片列表修正的值(例如1)的情况判断为发生了错误。
第二判断处理是从片段头读出modification_of_pic_nums_idc作为参数、判断所读出的modification_of_pic_nums_idc是否是表示abs_diff_view_idx_minus1对应于对视点间参照索引的预测值加上的值的值(例如5)的处理。在第二判断处理中，将modification_of_pic_nums_idc不是表示abs_diff_view_idx_minus1对应于对视点间参照索引的预测值加上的值的值(例如5)的情况判断为发生了错误。
第三判断处理是从片段头读出abs_diff_view_idx_minus1作为参数、判断所读出的abs_diff_view_idx_minus1的值是否是0。在第三判断处理中，将abs_diff_view_idx_minus1不是0的情况判断为发生了错误。
另外，如图7A及图7B所示，在片段头中，依次连续写入了ref_pic_list_modification_flag_l0、modification_of_pic_nums_idc、和abs_diff_view_idx_minus1。因而，参数判断部601具体而言依次进行第一～第三判断处理，直到由第一～第三判断处理的某个判断处理判断为发生了错误。
错误标志设定部602首先作为错误检测标志的初始化处理，将表示在能够随机访问的图片中没有发生错误的值设定到detected_error_flag中。进而，错误标志设定部602在由参数判断部601判断为发生了错误的情况下，在detected_error_flag中设定表示在能够随机访问的图片中发生了错误的值(例如1)。
接着，使用图12对实施有关本发明的实施方式2的错误检测方法的错误检测部410的动作的一例进行说明。图12是表示检测有关本发明的实施方式2的锚访问单元非基础视点组件的错误的处理的一例的流程图。
首先，错误标志设定部602通过将detected_error_flag参数设定为数值0，将detected_error_flag参数初始化(S301)。使用该参数，表示在非基础视点组件中是否没有错误。即，如上所述，该参数的值是1的情况是非基础视点组件包含有某种错误的情况。除此以外的情况即detected_error_flag参数的值是0的情况意味着在非基础视点组件中没有错误。
接着，参数判断部601从NAL单元头读取anchor_pic_flag参数(S302)。并且，参数判断部601判断所读出的anchor_pic_flag参数是否是1(S303)。即，参数判断部601判断非基础视点组件是否是锚图片。
关于锚访问单元的非基础视点组件，在该参数的值不是1的情况下(S303中“否”)，即在非基础视点组件不是锚图片的情况下，错误标志设定部602将detected_error_flag的值设定为1(S310)。
关于锚访问单元的非基础视点组件，在anchor_pic_flag参数的值是1的情况下(S303中“是”)，即在非基础视点组件是锚图片的情况下，参数判断部601从片段头中读取ref_pic_list_modification_flag_l0(S304)。该ref_pic_list_modification_flag_l0参数的位置是图7A及图7B所示那样的。
接着，参数判断部601判断所读出的ref_pic_list_modification_flag_l0的参数的值是否是1(S304)。即，参数判断部601对于锚访问单元的非基础视点组件判断是否修正参照图片列表。
在该ref_pic_list_modification_flag_l0参数的值不是1的情况下(S305中“否”)，即在不修正参数图片列表的情况下，错误标志设定部602将detected_error_flag参数的值设定为1(S310)。
在ref_pic_list_modification_flag_l0参数的值是1的情况下(S305中“是”)，即在修正参照图片列表的情况下，参数判断部601从片段头读取modification_of_pic_nums_idc参数(S306)。该modification_of_pic_nums_idc参数的位置是图7A及图7B所示那样的。
接着，参数判断部601判断所读出的modification_of_pic_nums_idc参数的值是否是5(S307)。即，参数判断部601判断modification_of_pic_nums_idc参数是否是表示abs_diff_view_idx_minus1对应于对视点间参照索引的预测值加上的值的值。
在modification_of_pic_nums_idc参数的值不是5的情况下(S307中“否”)，即在modification_of_pic_nums_idc参数不是表示abs_diff_view_idx_minus1对应于对视点间参照索引的预测值加上的值的值的情况下，错误标志设定部602将detected_error_flag参数的值设定为1(S310)。
在modification_of_pic_nums_idc参数的值是5的情况下(S307中“是”)，即在modification_of_pic_nums_idc参数是表示abs_diff_view_idx_minus1对应于对视点间参照索引的预测值加上的值的值的情况下，参数判断部601从片段头中读取abs_diff_view_idx_minus1参数(S308)。另外，在片段头中，ref_pic_list_modification_flag_l0、modification_of_pic_nums_idc及abs_diff_view_idx_minus1的各参数如图7A及图7B所示那样依次连续。
并且，最后参数判断部601判断abs_diff_view_idx_minus1参数的值是否是0(S309)。
在abs_diff_view_idx_minus1参数的值不是0的情况下(S309中“否”)，错误标志设定部602将detected_error_flag参数的值设定为1(S310)。在abs_diff_view_idx_minus1参数的值是0的情况下(S309中“是”)，错误标志设定部602将detected_error_flag参数的值保持为0而向切换部420输出。
以上，有关本发明的实施方式2的错误检测部410能够判断将参照图片列表修正以将视点间参照图片配置到参照图片列表的开头并编码的能够随机访问的图片是否被正确地编码。
接着，对实施有关本发明的实施方式2的解码方法的MVC解码器部430的结构进行说明。
图13是表示有关本发明的实施方式2的MVC解码器部430的结构的一例的框图。MVC解码器部430具备解析部710、预测部720和解码部730。
解析部710通过将片段头解析，来判断参照图片列表是否被修正。具体而言，解析部710在解码对象的图像是包含在能够随机访问的图片中的、并包含在非基础视点组件中的图像的情况下，判断参照图片列表是否被修正。
预测部720在由解析部710判断为参照图片列表被修正的情况下，按照预先设定的规格生成预测图像。例如，预测部720在判断参照图片列表被修正的情况下，基于H.264/AVC MVC影像规格生成预测图像。
此外，预测部720在由解析部710判断为参照图片列表没有被修正的情况下，按照与上述规格不同的方法生成预测图像。例如，预测部720将包含在与非基础视点组件的解码对象的图像相同的访问单元中的基础视点组件作为参照图像，生成预测图像。
解码部730基于由预测部720生成的预测图像，将是包含在非基础视点组件中的、能够随机访问的图片的图像解码。
以下，对MVC解码器部430的更详细的结构进行说明。
图14是表示有关本发明的实施方式2的MVC解码器部430的详细的结构的一例的框图。如图14所示，MVC解码器部430具备解析部710、预测部720、解码部730、和存储部740。
如图14所示，解析部710具备ref_pic_list_modification_flag_l0参数解析部711。此外，预测部720具备切换部721、参照列表修正句法解析部722、参照列表修正部723、第一运动预测部724、基础视点搜索部725、和第二运动预测部726。此外，解码部730具备图片重构部731。
ref_pic_list_modification_flag_l0参数解析部711读取锚访问单元的非基础视点组件801的片段头，将ref_pic_list_modification_flag_l0参数802的值输出给切换部721。
切换部721在ref_pic_list_modification_flag_l0参数的值是1的情况下，将非基础视点组件801传送给参照列表修正句法解析部722。此外，切换部721在ref_pic_list_modification_flag_l0参数的值是0的情况下，将非基础视点组件801传送给基础视点搜索部725。
参照列表修正句法解析部722读取非基础视点组件801的片段头，将参照列表修正句法803输出给参照列表修正部723。
参照列表修正部723读取参照列表修正句法803，基于所读取的参照列表修正句法803修正参照图片列表，将修正后的参照图片列表804输出给第一运动预测部724。
第一运动预测部724将修正后的参照图片列表用于运动预测，作为预测图像805输出给图片重构部731。
基础视点搜索部725从存储部740中找出对应的基础视点组件806，将找到的基础视点组件806输出给第二运动预测部726。
第二运动预测部726将搜索到的基础视点组件806用于运动预测，将预测图像807输出给图片重构部731。
图片重构部731读取预测图像805或807，重构非基础视点的重构图像，将重构后的非基础视点的重构图像输出。
通过以上的结构，有关本发明的实施方式2的解码装置400能够将修正参照图片列表以将视点间参照图片配置到参照图片列表的开头并编码的能够随机访问的图片正确地解码。
接着，对有关本发明的实施方式2的解码装置400的动作进行说明。
图15是表示将有关本发明的实施方式2的锚访问单元非基础视点组件解码的处理的一例的流程图。
首先，解析部710从片段头读取ref_pic_list_modification_flag_l0参数(S401)。并且，解析部710判断ref_pic_list_modification_flag_l0参数的值是否是0(S402)。即，解析部710对锚访问单元的非基础视点组件判断是否修正了参照图片列表。
在ref_pic_list_modification_flag_l0参数的值是0的情况下(S402中“是”)，即在参照图片列表没有被修正的情况下，基础视点探测部725搜索保持在存储部740内的锚图片的对应的基础视点组件(S403)。锚图片的对应的基础视点组件具有与解码处理中的非基础视点组件相同的图片序列号。即，是包含在相同的访问单元中的基础视点组件。
接着，第二运动预测部726使用搜索到的基础视点组件进行运动预测(S404)。在编码后的非基础视点组件中，也有将用来识别应将参照列表中的哪个参照图片用于运动预测的参照索引附加在宏块头中的情况。但是，第二运动预测部726不参照这些参照索引，而选择搜索到的基础视点组件(基础视点的图像)作为在运动预测中使用的参照图片。
此外，在ref_pic_list_modification_flag_l0参数的值不是0的情况下(S402中“否”)，即在参照图片列表被修正的情况下，参照列表修正句法解析部722从片段头中读取参照列表修正句法(S405)。并且，参照列表修正部723基于所读出的参照列表修正句法修正参照列表(S406)。具体而言，如图6所示，修正参照图片列表，以将视点间参照图片配置到参照图片列表的开头。接着，第一运动预测部724使用修正后的参照列表进行运动预测(S407)。
最后，在进行运动预测之后，图片重构部731重构非基础视点的重构图像(S408)。
以上，有关本发明的实施方式2的解码装置400在基于修正后的参照图片列表将编码的能够随机访问的图片、例如编码后的锚图片解码时，判断在包含在编码流中的、表示已修正参照图片列表的句法中是否发生了错误。此外，解码装置400基于从编码流读出的句法将参照图片列表修正，使用修正后的参照图片列表，将基于修正后的参照图片列表编码的能够随机访问的图片、例如编码的锚图片解码。
由此，能够检测使用修正后的参照图片列表编码的能够随机访问的图片的错误、并且能够正确地将该图片解码。
另外，有关本发明的实施方式2的解码装置400也可以不具备错误检测部410。具体而言，有关本发明的解码装置如果仅具备MVC解码器部430，也能够参照修正后的参照图片列表将编码的能够随机访问的图片解码。
此外，有关本发明的实施方式2的错误检测部410也可以不装备在解码装置400中。也可以作为与编码装置及解码装置独立的错误检测装置实现。此外，为了确认正确地进行了编码，编码装置也可以具备错误检测部410。
此外，作为有关本发明的解码装置及解码方法的变形例，在解码对象的图像是能够随机访问的图片的情况下，也可以不论参照索引的值如何都使用与解码对象的图像相同的访问单元的基础视点组件作为参照图像。
图16是表示有关本发明的实施方式的变形例的解码装置900的结构的一例的框图。如图16所示，解码装置900具备判断部910和解码部920。
判断部910判断是否进行随机访问。具体而言，判断部901判断是否从用户接受到开始随机访问的指示，在接受到随机访问开始的指示的情况下，判断为进行随机访问。或者，判断部910也可以判断开始解码时的最初的基础视点的图像是否是包含在I图片中的图像。在最初的基础视点的图像是包含在I图片中的图像的情况下，判断部910判断为进行随机访问。
解码部920在由判断部910判断为进行随机访问的情况下，在将包含随机访问的最初的图片的访问单元的非基础视点解码时，不论参照索引如何，都将相同的访问单元的基础视点组件作为参照图像进行非基础视点组件的解码。此外，也可以禁止将与包含随机访问的最初的图片的访问单元不同的访问单元的基础视点组件作为参照图像、而仅将包含随机访问的最初的图片的访问单元的基础视点组件作为参照图像进行非基础视点组件的解码。
以下，使用图17对有关本发明的实施方式的变形例的解码装置900的动作进行说明。图17是表示有关本发明的实施方式的变形例的解码装置900的动作的一例的流程图。
首先，判断部910判断是否执行随机访问(S501)。例如，判断部910判断是否接受到来自用户的开始随机访问的指示，在接受到随机访问开始的指示的情况下，判断为执行随机访问。此外，判断部910也可以判断包含在非基础视点组件中的解码对象的图像参照的基础视点组件是否是I图片，在基础视点组件是I图片的情况下判断为执行随机访问。
并且，在判断为执行随机访问的情况下(S501中“是”)，解码部920忽视参照索引，将基础视点组件作为参照图像，将非基础视点组件的解码对象的图像解码(S502)。
在没有判断为执行随机访问的情况下(S501中“否”)，按照预先设定的规格、例如H.264/AVC MVC影像规格将解码对象的图像解码(S503)。
以上，有关本发明的变形例的解码装置900具备判断是否进行随机访问的判断部，在进行随机访问的情况下，不论参照索引的值如何都将同一访问单元的基础视点组件作为参照图像进行非基础视点组件的解码。由此，不论在编码侧以怎样的顺序附加了参照索引，都能够将能够随机访问的编码图像解码。
此外，有关本发明的变形例的解码装置也可以具备指定解码开始图片的解码开始图片指定部、在解码开始图片指定部中指定的基础视点的图片是I图片的情况下判断为开始随机访问的判断部、在判断部中判断为开始随机访问的情况下、在将包含I图片的随机访问单元的非基础视点解码时、禁止随机访问单元以外的随机访问单元的基础视点的图片的参照、仅参照随机访问单元内的基础视点的图片进行解码的解码部。
(实施方式3)
可以通过将用来实现在上述实施方式中表示的图像编码方法或图像解码方法的结构的程序记录到存储媒体中、在独立的计算机系统中简单地实施上述实施方式所示的处理。存储媒体可以是磁盘、光盘、光磁盘、IC卡、半导体存储器等、只要是能够记录程序的媒体就可以。
进而，这里说明在上述实施方式中表示的图像编码方法及图像解码方法的应用例和使用它的系统。
图18是表示实现内容分发服务的内容供给系统ex100的整体结构的图。将通信服务的提供区域分割为希望的大小，在各小区内分别设置作为固定无线站的基站ex106～ex110。
该内容供给系统ex100在因特网ex101上经由因特网服务提供商ex102及电话网ex104、以及基站ex106～ex110连接着计算机ex111、PDA(PersonalDigital Assistant)ex112、照相机ex113、便携电话ex114、游戏机ex115等的各设备。
但是，内容供给系统ex100并不限定于图18那样的结构，也可以将某些构成要素组合连接。此外，也可以不经由作为固定无线站的基站ex106～ex110而将各设备直接连接在电话网ex104上。此外，各设备也可以经由近距离无线等直接相互连接。
照相机ex113是数字摄像机等的能够进行运动摄影的设备，照相机ex116是数字照相机等的能够进行硬质图像摄影、运动图像摄影的设备。此外，便携电话ex114是GSM(Global System for Mobile Communications)方式、CDMA(Code Division Multiple Access)方式、W-CDMA(Wideband-Code Division Multiple Access)方式、或者LTE(Long TermEvolution)方式、HSPA(High Speed Packet Access)的便携电话机或PHS(Personal Handyphone System)等，是哪种都可以。
在内容供给系统ex100中，通过将照相机ex113等经由基站ex109、电话网ex104连接在流媒体服务器ex103上，能够进行现场分发等。在现场分发中，对用户使用照相机ex113摄影的内容(例如音乐会现场的影像等)如上述实施方式中说明那样进行编码，发送给流媒体服务器ex103。另一方面，流媒体服务器ex103将发送来的内容数据对有请求的客户端进行流分发。作为客户端，有能够将上述编码处理后的数据解码的、计算机ex111、PDAex112、照相机ex113、便携电话ex114、游戏机ex115等。在接收到分发的数据的各设备中，将接收到的数据解码处理并再现。
另外，摄影的数据的编码处理既可以由照相机ex113进行，也可以由进行数据的发送处理的流媒体服务器ex103进行，也可以相互分担进行。同样，分发后的数据的解码处理既可以由客户端进行，也可以由流媒体服务器ex103进行，也可以相互分担进行。此外，并不限定于照相机ex113，也可以将由照相机ex116摄影的静止图像及/或运动图像数据经由计算机ex111发送给流媒体服务器ex103。此情况下的编码处理由照相机ex116、计算机ex111、流媒体服务器ex103的哪个进行都可以，也可以相互分担进行。
此外，这些编码处理及解码处理一般在计算机ex111及各设备具有的LSI(Large Scale Integration)ex500中处理。LSIex500既可以是单芯片也可以是由多芯片构成的结构。另外，也可以将图像编码用及图像解码用的软件装入到能够由计算机ex111等读取的某种记录媒体(CD-ROM、软盘、硬盘等)中、使用该软件进行编码处理及解码处理。进而，在便携电话ex114是带有照相机的情况下，也可以将由该照相机取得的运动图像数据发送。此时的运动图像数据是用便携电话ex114具有的LSIex500编码处理后的数据。
此外，流媒体服务器ex103也可以是多个服务器或多个计算机、是将数据分散处理或记录分发的结构。
以上，在内容供给系统ex100中，客户端能够接收编码的数据并再现。这样，在内容供给系统ex100中，客户端能够将用户发送的信息实时地接收并解码、再现，即使是不具有特别的权利或设备的用户也能够实现个人广播。
在构成该内容供给系统的各设备的编码、解码中，只要使用上述实施方式所示的图像编码方法或图像解码方法就可以。
作为其一例，对便携电话ex114进行说明。
图19是表示使用在上述实施方式中说明的图像编码方法和图像解码方法的便携电话ex114的图。便携电话ex114具有用来在与基站ex110之间收发电波的天线ex601、CCD照相机等的能够摄影影像、静止图像的照相机部ex603、显示由照相机部ex603摄影的影像、由天线ex601接收到的影像等的解码后的数据的液晶显示器等的显示部ex602、由操作键ex604群构成的主体部、用来进行声音输出的麦克风等的声音输入部ex608、用来进行声音输入的麦克等声音输入部ex605、用来将摄影的运动图像或静止图像的数据、接收到的邮件的数据、运动图像的数据或静止图像的数据等、编码后的数据或解码后的数据保存的记录媒体ex607、用来使记录媒体ex607能够安装到便携电话ex114中的插槽部ex606。记录媒体ex607是SD卡等的在塑料壳体内收纳有作为是能够电气地改写及删除的非易失性存储器的EEPROM的一种的闪存存储器元件的结构。
进而，使用图20对便携电话ex114进行说明。便携电话ex114对于综合控制具备显示部ex602及操作键ex604的主体部的各部的主控制部ex711经由同步总线ex713相互连接电源电路部ex710、操作输入控制部ex704、图像编码部ex712、照相机接口部ex703、LCD(Liquid Crystal Display)控制部ex702、图像解码部ex709、多路复用分离部ex708、记录再现部ex707、调制解调电路部ex706及声音处理部ex705。
电源电路部ex710如果通过用户的操作使结束通话及电源键成为开启状态，则通过从电池组对各部供给电力，将带有照相机的数字便携电话ex114启动为能够动作的状态。
便携电话ex114基于由CPU、ROM及RAM等构成的主控制部ex711的控制，在声音通话模式时将由声音输入部ex605集音的声音信号通过声音处理部ex705变换为数字声音数据，将其用调制解调电路部ex706进行谱扩散处理，由收发电路部ex701实施数字模拟变换处理及频率变换处理之后经由天线ex601发送。此外，便携电话ex114在声音通话模式时，将由天线ex601接收到的接收数据放大而实施频率变换处理及模拟数字变换处理，由调制解调电路部ex706进行谱逆扩散处理，由声音处理部ex705变换为模拟声音数据之后，经由声音输出部ex608将其输出。
进而，在数据通信模式时发送电子邮件的情况下，将通过主体部的操作键ex604的操作输入的电子邮件的文本数据经由操作输入控制部ex704向主控制部ex711送出。主控制部ex711将文本数据用调制解调电路部ex706进行谱扩散处理，由收发电路部ex701实施数字模拟变换处理及频率变换处理之后，经由天线ex601向基站ex110发送。
在数据通信模式时发送图像数据的情况下，将由照相机部ex603摄像的图像数据经由照相机接口部ex703供给到图像编码部ex712中。此外，在不发送图像数据的情况下，也可以将由照相机部ex603摄像的图像数据经由照相机接口部ex703及LCD控制部ex702直接显示在显示部ex602上。
图像编码部ex712是具备在本发明中说明的图像编码装置的结构，通过将从照相机部ex603供给的图像数据用在上述实施方式所示的图像编码装置中使用的编码方法压缩编码而变换为编码图像数据，将其向多路复用分离部ex708送出。此外，与此同时，便携电话ex114将在用照相机部ex603摄像中由声音输入部ex605集音的声音经由声音处理部ex705作为数字的声音数据向多路复用分离部ex708送出。
多路复用分离部ex708将从图像编码部ex712供给的编码的图像数据和从声音处理部ex705供给的声音数据以规定的方式多路复用，将结果得到的多路复用数据用调制解调电路部ex706进行谱扩散处理，由收发电路部ex701实施数字模拟变换处理及频率变换处理之后经由天线ex601发送。
在数据通信模式时，在接收到链接在主页等上的运动图像文件的数据的情况下，将经由天线ex601从基站ex110接收到的接收数据用调制解调电路部ex706谱逆扩散处理，将结果得到的多路复用数据向多路分离部ex708送出。
此外，为了将经由天线ex601接收到的多路复用数据解码，多路分离部ex708通过将多路复用数据分离而分为图像数据的位流和声音数据的位流，经由同步总线ex713将该编码图像数据供给到图像解码部ex709中，并且将该声音数据供给到声音处理部ex705中。
接着，图像解码部ex709是具备在本申请中说明的图像解码装置的结构，通过将图像数据的位流用对应于上述实施方式所示的编码方法的解码方法解码而生成再现运动图像数据，将其经由LCD控制部ex702供给到显示部ex602中，由此，显示例如链接到主页上的运动图像文件中包含的运动图像数据。与此同时，声音处理部ex705将声音数据变换为模拟声音数据之后，将其供给到声音输出部ex608中，由此，将例如链接在主页上的运动图像文件中包含的声音数据再现。
另外，并不限于上述系统的例子，最近卫星、地面波的数字广播成为关注点，如图21所示，在数字广播用系统中也能够装入上述实施方式的至少图像编码装置或图像解码装置。具体而言，在广播局ex201中将声音数据、影像数据或多路复用了这些数据的位流经由电波通信或传送给广播卫星ex202。接受到它的广播卫星ex202发送广播用的电波，具有卫星广播接收设备的家庭的天线ex204接收该电波，电视机(接收机)ex300或机顶盒(STB)ex217等的装置将位流解码并将其再现。此外，在将记录在作为记录媒体的CD及DVD等的记录媒体ex215、ex216中的多路复用了图像数据和声音数据的位流读取、解码的读取器/记录器ex218中也能够安装上述实施方式所示的图像解码装置。在此情况下，将再现的影像信号显示在监视器ex219上。此外，也可以考虑将图像解码装置安装到连接在有线电视用的线缆ex203或卫星/地面波广播的天线ex204上的机顶盒ex217内、将其用电视机的监视器ex219再现的结构。此时，也可以不是在机顶盒中、而在电视机内装入图像解码装置。此外，也可以用具有天线ex205的车ex210从卫星ex202或基站等接收信号、在车ex210具有的汽车导航仪ex211等的显示装置上再现运动图像。
此外，在将记录在DVD、BD等的记录媒体ex215中的声音数据、影像数据或多路复用了这些数据的编码位流读取并解码、或者将声音数据、影像数据或这些数据编码作为多路复用数据记录到记录媒体ex215中的读取/记录机ex218中也能够安装上述实施方式所示的图像解码装置或图像编码装置。在此情况下，将再现的影像信号显示在监视器ex219上。此外，通过记录有编码位流的记录媒体ex215，其他装置及系统能够再现影像信号。例如，其他再现装置ex212可以使用复制了编码位流的记录媒体ex214将影像信号再现到监视器ex213上。
此外，也可以在连接在有线电视用的线缆ex203或卫星/地面波广播的天线ex204上的机顶盒ex217内安装图像解码装置、将其用电视机的监视器ex219显示。此时，也可以不是在机顶盒内、而在电视机内装入图像解码装置。
图22是表示采用上述实施方式中说明的图像解码方法及图像编码方法的电视机(接收机)ex300的图。电视机ex300具备经由接收上述广播的天线ex204或线缆ex203等取得或输出电影信息的位流的调谐器ex301、将接收到的编码数据解调、或将生成的编码数据为了向外部发送而进行调制的调制/解调部ex302、和将解调后的影像数据和声音数据分离，或者将编码的影像数据与声音数据多路复用的多路复用/分离部ex303。此外，电视机ex300具备具有将声音数据、影像数据分别解码、或将各信息编码的声音信号处理部ex304、影像信号处理部ex305的信号处理部ex306、和具有将解码后的声音信号输出的扬声器ex307、显示解码后的影像信号的显示器等的显示部ex308的输出部ex309。进而，电视机ex300具备具有受理用户操作的输入的操作输入部ex312等的接口部ex317。进而，电视机ex300具有综合控制各部的控制部ex310、和对各部供给电力的电源电路部ex311。接口部ex317也可以除了操作输入部ex312以外还具有与读取/记录机ex218等的外部设备连接的桥接器ex313、用来能够安装SD卡等的记录媒体ex216的插槽部ex314、用来与硬盘等的外部记录媒体连接的驱动器ex315、与电话网连接的调制解调器ex316等。另外，记录媒体ex216是能够通过保存的非易失性/易失性的半导体存储器元件电气地进行信息的记录的媒体。电视机ex300的各部经由同步总线相互连接。
首先，对电视机ex300将通过天线ex204等从外部取得的数据解码、再现的结构进行说明。电视机ex300接受来自遥控器ex220等的用户操作，基于具有CPU等的控制部ex310的控制，将由调制/解调部ex302解调后的影像数据、声音数据用多路复用/分离部ex303分离。进而，电视机ex300将分离后的声音数据用声音信号处理部ex304解码，将分离后的影像数据用影像信号处理部ex305使用上述实施方式中说明的解码方法解码。将解码后的声音信号、影像信号分别从输出部ex309朝向外部输出。在输出时，也可以将这些信号临时储存到缓存ex318、ex319等中、以使声音信号与影像信号同步再现。此外，电视机ex300也可以不从广播等、而从磁/光盘、SD卡等的记录媒体ex215、ex216读出编码的编码位流。接着，对电视机ex300将声音信号及影像信号编码、向外部发送或写入到记录媒体等中的结构进行说明。电视机ex300接受来自遥控器ex220等的用户操作，基于控制部ex310的控制，用声音信号处理部ex304将声音信号编码，用影像信号处理部ex305使用在上述实施方式中说明的编码方法将影像信号编码。将编码后的声音信号、影像信号用多路复用/分离部ex303多路复用并向外部输出。在多路复用时，可以临时将这些信号储存到缓存ex320、ex321等中，以使声音信号与影像信号同步。另外，缓存ex318～ex321既可以如图示那样具备多个，也可以是共用一个以上的缓存的结构。进而，也可以在图示以外还在调制/解调部ex302与多路复用/分离部ex303之间等也作为避免系统的溢出及下溢的缓冲机构而将数据储存到缓存中。
此外，电视机ex300也可以除了从广播及记录媒体等取得声音数据及影像数据以外还具备麦克风及照相机的受理AV输入的结构，对从它们取得的数据进行编码处理。另外，这里设电视机ex300为能够进行上述编码处理、多路复用及外部输出的结构进行了说明，但也可以是不能进行这些全部的处理、而仅能够进行上述接收、解码处理及外部输出中的某种的结构。
此外，在用读取/记录机ex218从记录媒体读出编码位流或写入的情况下，上述解码处理或编码处理既可以由电视机ex300及读取/记录机ex218中的某个进行，也可以是电视机ex300和读取/记录机ex218相互分担进行。
作为一例，在图23中表示从光盘进行数据的读入或写入的情况下的信息再现/记录部ex400的结构。信息再现/记录部ex400具备以下说明的要素ex401～ex407。光头ex401对作为光盘的记录媒体ex215的记录面照射激光斑而写入信息，检测来自记录媒体ex215的记录面的反射光而读入信息。调制记录部ex402电驱动内置在光头ex401中的半导体激光，对应于记录数据进行激光的调制。再现解调部ex403将由内置在光头ex401中的光检测器电检测来自记录面的反射光的再现信号放大，将记录在记录媒体ex215中的信号成分分离而解调，将需要的信息再现。缓存ex404将用来记录到记录媒体ex215中的信息及从记录媒体ex215再现的信息临时保持。盘马达ex405使记录媒体ex215旋转。伺服控制部ex406一边控制盘马达ex405的旋转驱动一边使光头ex401移动到规定的信息轨道，进行激光斑的追随处理。系统控制部ex407进行信息再现/记录部ex400整体的控制。上述读出及写入的处理由系统控制部ex407利用保持在缓存ex404中的各种信息、或根据需要而进行新的信息的生成及追加、并且一边使调制记录部ex402、再现解调部ex403及伺服控制部ex406协调动作、一边通过光头ex401进行信息的记录再现来实现。系统控制部ex407例如由微处理器构成，通过执行读出写入的程序来执行这些处理。
以上，设光头ex401照射激光斑而进行了说明，但也可以是使用接近场光进行更高密度的记录的结构。
在图24中表示作为光盘的记录媒体ex215的示意图。在记录媒体ex215的记录面上以螺旋状形成有导引槽(沟槽)，在信息轨道ex230中，预先通过沟槽的形状的变化记录有辨识盘上的绝对位置的地址信息。该地址信息包括用来确定作为记录数据的单位的记录块ex231的位置的信息，进行记录及再现的装置通过将信息轨道ex230再现而读取地址信息，能够确定记录块。此外，记录媒体ex215包括数据记录区域ex233、内周区域ex232、外周区域ex234。为了记录用户数据而使用的区域是数据记录区域ex233，配置在数据记录区域ex233的内周或外周的内周区域ex232和外周区域ex234被用于用户数据记录以外的特定用途。信息再现/记录部ex400对这样的记录媒体ex215的数据记录区域ex233进行编码的声音数据、影像数据或多路复用了这些数据的编码数据的读写。
以上，举例说明了1层的DVD、BD等的光盘，但并不限于这些，也可以是多层结构、在表面以外也能够记录的光盘。此外，也可以是在盘的相同的地方使用各种不同波长的颜色的光来记录信息、或从各种角度记录不同信息的层等、进行多维的记录/再现的结构的光盘。
此外，在数字广播用系统ex200中，也可以由具有天线ex205的车ex210从卫星ex202等接收数据，在车ex210具有的汽车导航仪ex211等的显示装置上再现运动图像。另外，汽车导航仪ex211的结构可以考虑加上了图22所示的结构中的GPS接收部的结构，在计算机ex111及便携电话ex114等中也可以考虑同样的结构。此外，上述便携电话ex114等的终端与电视机ex300同样，可以考虑除了具有编码器及解码器两者的收发型终端以外、还有仅编码器的发送终端、仅解码器的接收终端的3种安装形式。
这样，将上述实施方式所示的图像编码方法或图像解码方法用在上述哪种设备及系统中都可以，通过这样，能够得到在上述实施方式中说明的效果。
此外，本发明并不限定于上述实施方式，能够不脱离本发明的范围而进行各种变形或修正。
(实施方式4)
上述各实施方式所示的图像编码方法及装置、图像解码方法及装置典型地通过作为集成电路的LSI实现。作为一例，在图25中表示1芯片化的LSIex500的结构。LSIex500具备以下说明的构成要素ex501～ex509，各结构要素经由总线ex510连接。电源电路部ex505通过在电源开启的状态的情况下对各部供给电力，启动为能够动作的状态。
例如在进行编码处理的情况下，LSIex500基于具有CPUex502、存储器控制器ex503及流控制器ex504等的控制部ex501的控制，由AV I/Oex509从麦克风ex117及照相机ex113等受理AV信号的输入。将输入的AV信号临时储存到SDRAM等的外部的存储器ex511中。基于控制部ex501的控制，将储存的数据根据处理量及处理速度适当分为多次等，发送给信号处理部ex507。信号处理部ex507进行声音信号的编码及/或影像信号的编码。这里，影像信号的编码处理是在上述实施方式中说明的编码处理。在信号处理部ex507中还根据情况而进行将编码的声音数据与编码的影像数据多路复用等的处理，从流I/Oex506向外部输出。将该输出的位流朝向基站ex107发送、或写入到记录媒体ex215中。另外，也可以临时将数据储存到缓存ex508中，以使得在多路复用时同步。
此外，例如在进行解码处理的情况下，LSIex500基于控制部ex501的控制，将由流I/Oex506经由基站ex107得到的编码数据、或从记录媒体ex215读出得到的编码数据临时储存到存储器ex511等中。基于控制部ex501的控制，将储存的数据根据处理量及处理速度适当分多次等发送给信号处理部ex507。信号处理部ex507进行声音数据的解码及/或影像数据的解码。这里，影像信号的解码处理是在上述实施方式中说明的解码处理。进而，根据情况，也可以将各个信号临时储存到缓存ex508等中，以便能够将解码后的声音信号与解码后的影像信号同步再现。将解码后的输出信号一边适当经由存储器ex511等，一边从便携电话ex114、游戏机ex115及电视机ex300等的各输出部输出。
另外，在上述中，设存储器ex511为LSIex500的外部的结构而进行了说明，但也可以是包含在LSIex500的内部中的结构。缓存ex508也并不限于一个，也可以具备多个缓存。此外，LSIex500既可以1芯片化，也可以多芯片化。
另外，这里设为LSI，但根据集成度的差异，也有称作IC、系统LSI、超级LSI、超大规模LSI的情况。
此外，集成电路化的方法并不限于LSI，也可以由专用电路或通用处理器实现。也可以使用在LSI制造后能够编程的FPGA或能够再构成LSI内部的电路单元的连接及设定的可重构处理器。
进而，如果因半导体技术的进步或派生的其他技术而出现代替LSI的集成电路化的技术，则当然也可以使用该技术进行功能块的集成化。有可能是生物技术的应用等。
以上，基于实施方式对有关本发明的编码方法、编码装置、错误检测方法、错误检测装置、解码方法及解码装置进行了说明，但本发明并不限定于这些实施方式。只要不脱离本发明的主旨，在该实施方式中实施了本领域的技术人员想到的各种变形的形态、以及将不同实施方式中的构成要素及步骤等组合而构建的其他形态也包含在本发明的范围内。
工业实用性
本发明起到能够削减将参照索引编码所需要的代码量、提高编码效率的效果，能够在通过将音频、静止图像及运动图像编码的编码装置、以及将由该编码装置编码的数据解码的解码装置中采用。例如，本发明可以在音频设备、便携电话、数字照相机、BD记录机、数字电视机等的各种AV设备中采用。
符号说明
10 访问单元
20 视点组件
100 编码装置
110 第一视点组件编码部
120、440、740 存储部
130 第二视点组件编码部
201 基础视点的图像
202 压缩基础视点组件
203 重构图像
211 非基础视点的图像
212 压缩非基础视点组件
213、503 参照图像
301 编码部
302 头写入部
303 列表修正部
400、900 解码装置
410 错误检测部
420、721 切换部
430 MVC解码器部
450 错误隐藏部
501 MVC位流
502 错误检测标志
504、506 重构图像
505 重构的基础视点组件
601 参数判断部
602 错误标志设定部
710 解析部
711 ref_pic_list_modification_flag_l0参数解析部
720 预测部
722 参照列表修正句法解析部
723 参照列表修正部
724 第一运动预测部
725 基础视点搜索部
726 第二运动预测部
730、920 解码部
731 图片重构部
801 非基础视点组件
802 ref_pic_list_modification_flag_l0参数
803 参照列表修正句法
804 参照图片列表
805、807 预测图像
806 基础视点组件
910 判断部
ex100 内容供给系统
ex101 因特网
ex102 因特网服务提供商
ex103 流媒体服务器
ex104 电话网
ex106、ex107、ex108、ex109、ex110 基站
ex111 计算机
ex112 PDA
ex113、ex116 照相机
ex114 带有照相机的数字便携电话(便携电话)
ex115 游戏机
ex117 麦克风
ex200 数字广播用系统
ex201 广播局
ex202 广播卫星(卫星)
ex203 线缆
ex204、ex205、ex601 天线
ex210 车
ex211 汽车导航仪(导航仪)
ex212 再现装置
ex213、ex219 监视器
ex214、ex215、ex216、ex607 记录媒体
ex217 机顶盒(STB)
ex218 读取/记录机
ex220 遥控器
ex230 信息轨道
ex231 记录块
ex232 内周区域
ex233 数据记录区域
ex234 外周区域
ex300 电视机
ex301 调谐器
ex302 调制/解调部
ex303 多路复用/分离部
ex304 声音信号处理部
ex305 影像信号处理部
ex306、ex507 信号处理部
ex307 扬声器
ex308、ex602 显示部
ex309 输出部
ex310、ex501 控制部
ex311、ex505、ex710 电源电路部
ex312 操作输入部
ex313 桥接器
ex314、ex606 插槽部
ex315 驱动器
ex316 调制解调器
ex317 接口部
ex318、ex319、ex320、ex321、ex404、ex508 缓存
ex400 信息再现/记录部
ex401 光头
ex402 调制记录部
ex403 再现解调部
ex405 盘马达
ex406 伺服控制部
ex407 系统控制部
ex500 LSI
ex502 CPU
ex503 存储器控制器
ex504 流控制器
ex506 流I/O
ex509 AV I/O
ex510 总线
ex511 存储器
ex603 照相机部
ex604 操作键
ex605 声音输入部
ex608 声音输出部
ex701 收发电路部
ex702 LCD控制部
ex703 照相机接口部(照相机I/F部)
ex704 操作输入控制部
ex705 声音处理部
ex706 调制解调电路部
ex707 记录再现部
ex708 多路复用分离部
ex709 图像解码部
ex711 主控制部
ex712 图像编码部
ex713 同步总线

Claims (4)

1.一种错误检测方法，检测利用视点间参照来编码的能够随机访问的图片的错误，其特征在于，
包括：
初始化步骤，将表示在上述能够随机访问的图片中没有发生错误的值设定到detected_error_flag中；
判断步骤，将在用来修正参照图片列表以将视点间参照图片配置到开头的修正句法中包含的至少1个参数，从上述能够随机访问的图片的片段头中读出，判断在所读出的参数中是否发生了错误；以及
设定步骤，在判断为发生了上述错误的情况下，将表示在上述能够随机访问的图片中发生了错误的值设定到上述detected_error_flag中；
在上述判断步骤中，进行以下的至少1个判断处理：
（i）第一判断处理，从上述片段头中，读出ref_pic_list_modification_flag_l0作为上述参数，判断所读出的ref_pic_list_modification_flag_l0是否是表示将上述参照图片列表进行修正的值，将上述ref_pic_list_modification_flag_l0不是表示将上述参照图片列表修正的值的情况判断为发生了错误；
（ii）第二判断处理，从上述片段头中，读出modification_of_pic_nums_idc作为上述参数，判断所读出的modification_of_pic_nums_idc是否是表示abs_diff_view_idx_minus1对应于对视点间参照索引的预测值加上的值的值，将上述modification_of_pic_nums_idc不是表示上述abs_diff_view_idx_minus1是对应于对上述预测值加上的值的情况判断为发生了错误；以及
（iii）第三判断处理，从上述片段头中，读出abs_diff_view_idx_minus1作为上述参数，判断所读出的abs_diff_view_idx_minus1的值是否是0，将上述abs_diff_view_idx_minus1不是0的情况判断为发生了错误。
2.如权利要求1所述的错误检测方法，其特征在于，
在上述片段头中，依次连续写入上述ref_pic_list_modification_flag_l0、上述modification_of_pic_nums_idc、和上述abs_diff_view_idx_minus1；
在上述判断步骤中，依次进行上述第一判断处理、上述第二判断处理和上述第三判断处理，直到由上述第一判断处理、上述第二判断处理和上述第三判断处理中的某个判断处理判断为发生了错误。
3.如权利要求1所述的错误检测方法，其特征在于，
上述能够随机访问的图片是锚图片。
4.一种错误检测装置，检测利用视点间参照来编码的能够随机访问的图片的错误，其特征在于，
具备：
设定部，将表示在上述能够随机访问的图片中没有发生错误的值设定到detected_error_flag中；以及
判断部，将在用来修正参照图片列表以将视点间参照图片配置到开头的修正句法中包含的至少1个参数，从上述能够随机访问的图片的片段头中读出，判断在所读出的参数中是否发生了错误；
在判断为发生了上述错误的情况下，上述设定部将表示在上述能够随机访问的图片中发生了错误的值设定到上述detected_error_flag中；
上述判断部进行以下的至少1个判断处理：
（i）第一判断处理，从上述片段头中，读出ref_pic_list_modification_flag_l0作为上述参数，判断所读出的ref_pic_list_modification_flag_l0是否是表示将上述参照图片列表修正的值，将上述ref_pic_list_modification_flag_l0不是表示将上述参照图片列表修正的值的情况判断为发生了错误；
（ii）第二判断处理，从上述片段头中，读出modification_of_pic_nums_idc作为上述参数，判断所读出的modification_of_pic_nums_idc是否是表示abs_diff_view_idx_minus1对应于对视点间参照索引的预测值加上的值的值，将上述modification_of_pic_nums_idc不是表示上述abs_diff_view_idx_minus1是对应于对上述预测值加上的值的情况判断为发生了错误；
（iii）第三判断处理，从上述片段头中，读出abs_diff_view_idx_minus1作为上述参数，判断所读出的abs_diff_view_idx_minus1的值是否是0，将上述abs_diff_view_idx_minus1不是0的情况判断为发生了错误。
CN201310573476.XA 2009-03-26 2010-03-26 编码装置及方法、错误检测装置及方法、解码装置及方法 Active CN103561273B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2009-077417 2009-03-26
JP2009077417 2009-03-26
CN201080001719.7A CN102047670B (zh) 2009-03-26 2010-03-26 编码装置及方法、错误检测装置及方法、解码装置及方法

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN201080001719.7A Division CN102047670B (zh) 2009-03-26 2010-03-26 编码装置及方法、错误检测装置及方法、解码装置及方法

Publications (2)

Publication Number Publication Date
CN103561273A CN103561273A (zh) 2014-02-05
CN103561273B true CN103561273B (zh) 2016-10-05

Family

ID=42780601

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201310573476.XA Active CN103561273B (zh) 2009-03-26 2010-03-26 编码装置及方法、错误检测装置及方法、解码装置及方法
CN201080001719.7A Active CN102047670B (zh) 2009-03-26 2010-03-26 编码装置及方法、错误检测装置及方法、解码装置及方法

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN201080001719.7A Active CN102047670B (zh) 2009-03-26 2010-03-26 编码装置及方法、错误检测装置及方法、解码装置及方法

Country Status (5)

Country Link
US (1) US8693539B2 (zh)
EP (1) EP2413606B1 (zh)
JP (1) JP5574345B2 (zh)
CN (2) CN103561273B (zh)
WO (1) WO2010109904A1 (zh)

Families Citing this family (34)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012042884A1 (ja) 2010-09-29 2012-04-05 パナソニック株式会社 画像復号方法、画像符号化方法、画像復号装置、画像符号化装置、プログラムおよび集積回路
TWI569628B (zh) 2010-09-30 2017-02-01 Sun Patent Trust A decoding method, a coding method, a decoding device, an encoding device, a program product and an integrated circuit
US10027957B2 (en) 2011-01-12 2018-07-17 Sun Patent Trust Methods and apparatuses for encoding and decoding video using multiple reference pictures
WO2012108181A1 (en) * 2011-02-08 2012-08-16 Panasonic Corporation Methods and apparatuses for encoding and decoding video using multiple reference pictures
US9338465B2 (en) * 2011-06-30 2016-05-10 Sharp Kabushiki Kaisha Context initialization based on decoder picture buffer
US9060173B2 (en) * 2011-06-30 2015-06-16 Sharp Kabushiki Kaisha Context initialization based on decoder picture buffer
US11647197B2 (en) 2011-06-30 2023-05-09 Velos Media, Llc Context initialization based on slice header flag and slice type
US9338474B2 (en) 2011-09-23 2016-05-10 Qualcomm Incorporated Reference picture list construction for video coding
US20130089152A1 (en) * 2011-10-05 2013-04-11 Qualcomm Incorporated Signaling picture identification for video coding
US9264717B2 (en) 2011-10-31 2016-02-16 Qualcomm Incorporated Random access with advanced decoded picture buffer (DPB) management in video coding
US10003817B2 (en) 2011-11-07 2018-06-19 Microsoft Technology Licensing, Llc Signaling of state information for a decoded picture buffer and reference picture lists
WO2013068647A1 (en) 2011-11-08 2013-05-16 Nokia Corporation Reference picture handling
US9258559B2 (en) * 2011-12-20 2016-02-09 Qualcomm Incorporated Reference picture list construction for multi-view and three-dimensional video coding
WO2013105207A1 (en) * 2012-01-10 2013-07-18 Panasonic Corporation Video encoding method, video encoding apparatus, video decoding method and video decoding apparatus
PT3177018T (pt) * 2012-01-17 2018-05-25 Ericsson Telefon Ab L M Tratamento de listas de imagens de referência
PL2805511T3 (pl) 2012-01-20 2019-09-30 Sun Patent Trust Sposoby i urządzenie do kodowania i dekodowania wideo przy użyciu predykcji wektora ruchu w czasie
PL2811743T3 (pl) 2012-02-03 2021-09-13 Sun Patent Trust Sposób kodowania obrazów, sposób dekodowania obrazów, urządzenie do kodowania obrazów, urządzenie do dekodowania obrazów i urządzenie do kodowania/dekodowania obrazów
US9621889B2 (en) 2012-03-02 2017-04-11 Sun Patent Trust Image encoding method, image decoding method, image encoding apparatus, image decoding apparatus, and image coding apparatus
EP2824920A4 (en) 2012-03-06 2016-02-17 Panasonic Ip Corp America VIDEO CODING METHOD, VIDEO CODING METHOD, VIDEO COORDING DEVICE, VIDEO CODING DEVICE AND VIDEO CODING / DECODING DEVICE
US9503702B2 (en) * 2012-04-13 2016-11-22 Qualcomm Incorporated View synthesis mode for three-dimensional video coding
US10051264B2 (en) 2012-04-20 2018-08-14 Qualcomm Incorporated Marking reference pictures in video sequences having broken link pictures
US9609341B1 (en) * 2012-04-23 2017-03-28 Google Inc. Video data encoding and decoding using reference picture lists
US9319679B2 (en) 2012-06-07 2016-04-19 Qualcomm Incorporated Signaling data for long term reference pictures for video coding
US9479776B2 (en) 2012-07-02 2016-10-25 Qualcomm Incorporated Signaling of long-term reference pictures for video coding
WO2014005280A1 (en) * 2012-07-03 2014-01-09 Mediatek Singapore Pte. Ltd. Method and apparatus to improve and simplify inter-view motion vector prediction and disparity vector prediction
US9398284B2 (en) * 2012-08-16 2016-07-19 Qualcomm Incorporated Constructing reference picture lists for multi-view or 3DV video coding
CN108337525B (zh) * 2012-09-28 2020-08-25 杜比国际公司 图像解码装置
US9313500B2 (en) 2012-09-30 2016-04-12 Microsoft Technology Licensing, Llc Conditional signalling of reference picture list modification information
TWI669950B (zh) * 2012-12-21 2019-08-21 日商新力股份有限公司 影像處理裝置及方法
EP3340628B1 (en) * 2013-04-08 2021-03-31 GE Video Compression, LLC Inter-component prediction
GB2531271A (en) 2014-10-14 2016-04-20 Nokia Technologies Oy An apparatus, a method and a computer program for image sequence coding and decoding
US10841621B2 (en) * 2017-03-01 2020-11-17 Wyse Technology L.L.C. Fault recovery of video bitstream in remote sessions
BR112021002483A2 (pt) 2018-08-17 2021-07-27 Huawei Technologies Co., Ltd. gerenciamento de imagens de referência em codificação de vídeo
US11032574B2 (en) 2018-12-31 2021-06-08 Tencent America LLC Method and apparatus for video coding

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08191461A (ja) * 1995-01-10 1996-07-23 Canon Inc 画像符号化装置および画像復号装置
WO2008008133A3 (en) * 2006-07-11 2008-04-03 Thomson Licensing Methods and apparatus for use in multi-view video coding
JP2008153907A (ja) * 2006-12-18 2008-07-03 Renesas Technology Corp 画像符号化装置及びそれらを含む情報端末ならびに画像符号化方法
WO2008085909A2 (en) * 2007-01-04 2008-07-17 Thomson Licensing Methods and apparatus for video error correction in multi-view coded video
WO2008088497A2 (en) * 2006-12-21 2008-07-24 Thomson Licensing Methods and apparatus for improved signaling using high level syntax for multi-view video coding and decoding
CN101291434A (zh) * 2007-04-17 2008-10-22 华为技术有限公司 多视编解码方法及装置

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7489342B2 (en) * 2004-12-17 2009-02-10 Mitsubishi Electric Research Laboratories, Inc. Method and system for managing reference pictures in multiview videos
US7142209B2 (en) * 2004-08-03 2006-11-28 Microsoft Corporation Real-time rendering system and process for interactive viewpoint video that was generated using overlapping images of a scene captured from viewpoints forming a grid
US7728877B2 (en) * 2004-12-17 2010-06-01 Mitsubishi Electric Research Laboratories, Inc. Method and system for synthesizing multiview videos
US7671894B2 (en) * 2004-12-17 2010-03-02 Mitsubishi Electric Research Laboratories, Inc. Method and system for processing multiview videos for view synthesis using skip and direct modes
US7728878B2 (en) * 2004-12-17 2010-06-01 Mitsubishi Electric Research Labortories, Inc. Method and system for processing multiview videos for view synthesis using side information
US7468745B2 (en) * 2004-12-17 2008-12-23 Mitsubishi Electric Research Laboratories, Inc. Multiview video decomposition and encoding
US7710462B2 (en) * 2004-12-17 2010-05-04 Mitsubishi Electric Research Laboratories, Inc. Method for randomly accessing multiview videos
US7903737B2 (en) * 2005-11-30 2011-03-08 Mitsubishi Electric Research Laboratories, Inc. Method and system for randomly accessing multiview videos with known prediction dependency
TWI375469B (en) * 2006-08-25 2012-10-21 Lg Electronics Inc A method and apparatus for decoding/encoding a video signal
US8165216B2 (en) * 2006-10-16 2012-04-24 Nokia Corporation System and method for implementing efficient decoded buffer management in multi-view video coding
MX2009004352A (es) * 2006-10-24 2009-05-05 Thomson Licensing Manejo de imagen para codigo de video de multiples vistas.
KR100801968B1 (ko) * 2007-02-06 2008-02-12 광주과학기술원 변위를 측정하는 방법, 중간화면 합성방법과 이를 이용한다시점 비디오 인코딩 방법, 디코딩 방법, 및 인코더와디코더
JP5029062B2 (ja) * 2007-02-26 2012-09-19 富士通株式会社 多視点動画像伝送システム
WO2009130561A1 (en) * 2008-04-21 2009-10-29 Nokia Corporation Method and device for video coding and decoding

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08191461A (ja) * 1995-01-10 1996-07-23 Canon Inc 画像符号化装置および画像復号装置
WO2008008133A3 (en) * 2006-07-11 2008-04-03 Thomson Licensing Methods and apparatus for use in multi-view video coding
JP2008153907A (ja) * 2006-12-18 2008-07-03 Renesas Technology Corp 画像符号化装置及びそれらを含む情報端末ならびに画像符号化方法
WO2008088497A2 (en) * 2006-12-21 2008-07-24 Thomson Licensing Methods and apparatus for improved signaling using high level syntax for multi-view video coding and decoding
WO2008085909A2 (en) * 2007-01-04 2008-07-17 Thomson Licensing Methods and apparatus for video error correction in multi-view coded video
CN101291434A (zh) * 2007-04-17 2008-10-22 华为技术有限公司 多视编解码方法及装置

Also Published As

Publication number Publication date
JPWO2010109904A1 (ja) 2012-09-27
CN102047670B (zh) 2014-03-12
US20110096835A1 (en) 2011-04-28
EP2413606A1 (en) 2012-02-01
WO2010109904A1 (ja) 2010-09-30
CN103561273A (zh) 2014-02-05
JP5574345B2 (ja) 2014-08-20
US8693539B2 (en) 2014-04-08
EP2413606A4 (en) 2013-08-14
EP2413606B1 (en) 2018-05-02
CN102047670A (zh) 2011-05-04

Similar Documents

Publication Publication Date Title
CN103561273B (zh) 编码装置及方法、错误检测装置及方法、解码装置及方法
TWI489834B (zh) Image decoding method and image decoding apparatus
WO2010150486A1 (ja) 画像符号化方法及び画像符号化装置
RU2535176C2 (ru) Способ кодирования, способ декодирования, устройство кодирования, устройство декодирования, программа и интегральная схема
JP5546044B2 (ja) 画像復号装置、画像符号化装置、画像復号回路及び画像復号方法
CN102090066A (zh) 图像解码装置、集成电路、图像解码方法及图像解码系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
ASS Succession or assignment of patent right

Owner name: MATSUSHITA ELECTRIC (AMERICA) INTELLECTUAL PROPERT

Free format text: FORMER OWNER: MATSUSHITA ELECTRIC INDUSTRIAL CO, LTD.

Effective date: 20140930

C41 Transfer of patent application or patent right or utility model
TA01 Transfer of patent application right

Effective date of registration: 20140930

Address after: Seaman Avenue Torrance in the United States of California No. 2000 room 200

Applicant after: PANASONIC INTELLECTUAL PROPERTY CORPORATION OF AMERICA

Address before: Osaka Japan

Applicant before: Matsushita Electric Industrial Co.,Ltd.

CB02 Change of applicant information

Address after: Seaman Avenue Torrance in the United States of California No. 20000 room 200

Applicant after: PANASONIC INTELLECTUAL PROPERTY CORPORATION OF AMERICA

Address before: Seaman Avenue Torrance in the United States of California No. 2000 room 200

Applicant before: PANASONIC INTELLECTUAL PROPERTY CORPORATION OF AMERICA

COR Change of bibliographic data
C14 Grant of patent or utility model
GR01 Patent grant
C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20161019

Address after: American New York

Patentee after: Sun patent hosting Co.

Address before: Seaman Avenue Torrance in the United States of California No. 20000 room 200

Patentee before: PANASONIC INTELLECTUAL PROPERTY CORPORATION OF AMERICA