如视频数据和音频数据的发送和接收。
[0196]控制单元910与用户接口单元911相连接。用户接口单元911被配置成操纵开关或远程控制信号接收单元，并且根据用户操作来将操作信号提供给控制单元910。
[0197]控制单元910使用中央处理单元(CPU)、存储器等来进行配置。存储器存储由CPU执行的程序，CPU进行处理所需的各种数据、EPG数据、通过网络获取的数据等。在预定时刻例如当电视设备900被接通时，存储在存储器中的程序由CPU读出并执行。通过执行程序，CPU控制各个单元，使得电视设备900根据用户操作来进行操作。
[0198]注意，在电视设备900中，提供了总线912，用以将调谐器902、解复用器903、视频信号处理单元905、音频信号处理单元907、外部接口单元909等与控制单元910连接。
[0199]如上述那样配置的电视设备的解码器904设置有本申请的解码设备(解码方法)的功能。出于该原因，在对编码流的解码处理中，分辨率信息和增强层的默认映射可以得到改善。
[0200]<第五实施方式>
[0201 ](移动电话的配置的示例)
[0202]图23示出应用了本公开内容的移动电话的示意性配置。移动电话920具有通信单元922、音频编解码器923、相机单元926、图像处理单元927、解复用单元928、记录和再现单元929、显示单元930以及控制单元931。所述构成要素通过总线933彼此连接。
[0203]此外，天线921连接至通信单元922，而扬声器924和麦克风925连接至音频编解码器923。此外，操作单元932连接至控制单元931。
[0204]移动电话920在各种模式例如语音呼叫模式、数据通信模式等下执行各种操作，例如发送和接收音频信号、发送和接收电子邮件和图像数据、捕获图像、记录数据等。
[0205]在语音呼叫模式下，通过音频编解码器923将从麦克风925产生的音频信号转换成音频数据或压缩成数据，并且将数据提供给通信单元922。通信单元922对音频数据执行调制处理、频率转换处理等以产生传输信号。此外，通信单元922将传输信号提供给天线921以将信号传输至未示出的基站。此外，通信单元922对用天线921接收到的接收信号进行放大或频率转换处理和解调处理，并且将所获得的音频数据提供给音频编解码器923。音频编解码器923对音频数据进行解压缩或者将音频数据转换成模拟音频信号，并且将数据输出至扬声器924。
[0206]此外，当在数据通信模式下进行邮件传输时，控制单元931通过操作单元932的操作来接收字符数据输入，并且将输入字符显示在显示单元930上。此外，控制单元931基于来自操作单元932的用户指令等来产生邮件数据，并且将数据提供给通信单元922。通信单元922对邮件数据进行调制处理或频率转换处理，并且从天线传输921传输所获得的传输信号。此外，通信单元922对用天线921接收到的接收信号进行放大或频率转换处理和解调处理，以恢复邮件数据。该邮件数据被提供给显示单元930并且电子邮件的内容被显示。
[0207]注意，移动电话920还可以使用记录和再现单元929使所接收到的邮件数据被存储在存储介质中。存储介质是任意的可重写存储介质。例如，存储介质是半导体存储器如RAM或内置闪存存储器、或可移除介质如硬盘、磁盘、磁光盘、光盘、通用串行总线(USB)存储器、或存储卡。
[0208]当在数据通信模式下传输图像数据时，由相机单元926产生的图像数据被提供给图像处理单元927。图像处理单元927对图像数据进行编码处理以产生编码数据。
[0209]解复用单元928以预定方案对由图像处理单元927产生的编码数据和从音频编解码器923提供的音频数据进行复用，并且将该数据提供给通信单元922。通信单元922对复用数据进行调制处理、频率转换处理等，并且从天线921传输所获得的传输信号。此外，通信单元922对用天线921接收到的接收信号进行放大或频率转换处理和解调处理以恢复复用数据。该复用数据被提供给解复用单元928。解复用单元928对复用数据进行解复用，并且将编码数据提供给图像处理单元927以及将音频数据提供给音频编解码器923。图像处理单元927对编码数据进行解码处理以产生图像数据。将该图像数据提供给显示单元930，并且对接收到的图像进行显示。音频编解码器923将音频数据转换成模拟音频信号，并且将该信号提供给扬声器924以输出所接收到的声音。
[0210]如上述那样配置的移动电话设备的图像处理单元927用作本申请的编码设备和解码设备(使用编码方法和解码方法)。出于该原因，分辨率信息和增强层的默认映射可以得到改善。
[0211]〈第六实施方式〉
[0212](记录和再现设备的配置的示例)
[0213]图24示出应用了本公开内容的记录和再现设备的示意性配置。记录和再现设备940将例如所接收到的广播节目的音频数据和视频数据记录在记录介质上，并且在由用户指示的时刻将所记录的数据提供给用户。此外，记录和再现设备940还可以从例如另一设备获取音频数据和视频数据，并且将数据记录在记录介质上。此外，通过对记录介质上所记录的音频数据和视频数据进行解码和输出，记录和再现设备940可以显示图像，并且从监视器设备等输出声音。
[0214]记录和再现设备940具有调谐器941、外部接口单元942、编码器943、硬盘驱动器(HDD)单元944、磁盘驱动器945、选择器946、解码器947、屏上显示(OSD)单元948、控制单元949以及用户接口单元950。
[0215]调谐器941将用未图示的天线接收到的广播信号调谐至期望的信道。调谐器941将通过对期望信道的接收信号进行解调所获得的编码比特流输出至选择器946。
[0216]外部接口单元942被配置成IEEE 1394接口、网络接口单元、USB接口、闪速存储器接口等中的至少一个。外部接口单元942是用于连接外部设备、网络、存储卡等以接收要记录的数据例如视频数据或音频数据的接口。
[0217]编码器943在数据未被编码时以预定方案对从外部接口单元942提供的视频数据或音频数据进行编码，并且将编码比特流输出给选择器946。
[0218]HDD单元944将视频和声音的内容数据、各种程序、其他类型的数据等记录在内置硬盘中，并且在再现时从硬盘中读出这些数据。
[0219]盘驱动器945对用于加载光盘的信号进行记录和再现。光盘包括例如DVD盘(DVD-视频、DVD-RAM、DVD-R、DVD-Rff, DVD+R、DVD+RW 等)、蓝光(注册商标)盘等。
[0220]在记录视频或声音时，选择器946从调谐器941或编码器943中选择任何编码比特流，并且将该编码比特流提供给HDD单元944和盘驱动器945中的任一个。此外，在再现视频或声音时，选择器946将从HDD单元944或盘驱动器945输出的编码比特流提供给解码器947。
[0221]解码器947对编码比特流进行解码处理。解码器947将通过执行解码处理而产生的视频数据提供给OSD单元948。此外，解码器947输出通过执行解码处理而产生的音频数据。
[0222]OSD单元948产生用于显示菜单画面以选择项目等的视频数据，并且将该视频数据叠加到从解码器947输出的视频数据，以供输出。
[0223]控制单元949连接至用户接口单元950。用户接口单元950被配置成操纵开关、远程控制信号接收单元等，并且根据用户操作将操作信号输出至控制单元949。
[0224]控制单元949使用CPU、存储器等来进行配置。存储器存储由CPU执行的程序或CPU执行处理所需的各种数据。在预定时刻例如在记录和再现设备940被接通时等，存储在存储器中的程序由CPU读出并执行。通过执行程序，CPU控制各个单元，使得记录和再现设备940根据用户操作进行操作。
[0225]如上述那样配置的记录和再现设备的编码器943用作本申请的编码设备(使用编码方法)。出于该原因，在编码流的编码过程中，分辨率信息和增强层的默认映射可以得到改善。此外，解码器947用作本申请的解码设备(使用解码方法)。出于该原因，在编码流的解码过程中，分辨率信息和增强层的默认映射可以得到改善。
[0226]<第七实施方式>
[0227](成像设备的配置的示例)
[0228]图25示出应用了本公开内容的成像设备的示意性配置。成像设备960捕获对象的图像、使得对象的图像显示在显示单元上、或者以图像数据的形式将图像记录在记录介质上。
[0229]成像设备960具有光学块961、成像单元962、相机信号处理单元963、图像数据处理单元964、显示单元965、外部接口单元966、存储器单元967、介质驱动器968、OSD单元969以及控制单元970。此外，用户接口单元971连接至控制单元970。此外，图像数据处理单元964、外部接口单元966、存储器单元967、介质驱动器968、OSD单元969、控制单元970等经由总线972彼此连接。
[0230]光学块961使用聚焦透镜、光圈机构等来进行配置。光学块961使对象的光学图像被形成在成像单元962的成像平面上。成像单元962使用CCD或CMOS图像传感器来进行配置，并且成像单元962根据通过光电转换的光学图像来产生电信号，并且将信号提供给相机信号处理单元963。
[0231]相机信号处理单元963对从成像单元962提供的电信号进行各种相机信号处理，例如拐点校正、伽马校正或色彩校正。相机信号处理单元963将已经经过相机信号处理的图像数据提供给图像数据处理单元964。
[0232]图像数据处理单元964对从相机信号处理单元963提供的图像数据进行编码处理。图像数据处理单元964将通过执行编码处理所产生的编码数据提供给外部接口单元966或者介质驱动器968。此外，图像数据处理单元964对从外部接口单元966或者介质驱动器968提供的编码数据进行解码处理。图像数据处理单元964将通过执行解码处理所产生的图像数据提供给显示单元965。此外，图像数据处理单元964执行将从相机信号处理单元963提供的图像数据提供给显示单元965的处理，或者图像数据处理单元964将从OSD单元969获取的用于显示的数据叠加到图像数据上并且将数据提供给显示单元965。
[0233]OSD单元969产生用于显示例如由符号、字符或数字构成的菜单画面或图标的数据，并且将该数据输出至图像数据处理单元964。
[0234]外部接口单元966被配置成例如USB输入和输出终端等，并且当要打印图像时，将外部接口单元966连接至打印机。此外，当需要适当地加载可移除介质例如磁盘或光盘时将外部接口单元966连接至驱动器，或者当需要时安装从可移除介质中读出的计算机程序。此外，外部接口单元966具有与预定网络(例如LAN或因特网)连接的网络接口。控制单元970可以根据来自用户接口单元971的指令从介质驱动器968中读出编码数据，并且将该数据提供给经由网络与外部接口单元966连接的其他设备。此外，控制单元970可以获取经由网络通过外部接口单元966从另一设备提供的编码数据或图像数据，或者可以将该数据提供给图像数据处理单元964。
[0235]作为在介质驱动器968中驱动的记录介质，例如可以使用任何可读写的可移除介质，如磁盘、磁光盘、光盘或半导体存储器。此外，用作可移除介质的记录介质的类型是任意的，并且记录介质可以是磁带设备、光盘或存储卡。记录介质当然可以是非接触型集成电路(IC)卡等。
[0236]此外，可以对介质驱动器968和记录介质进行集成以配置非便携式记录介质等，例如内置硬盘驱动器、固态驱动器(SSD)等。
[0237]控制单元970使用CPU来进行配置。存储器单元967存储由控制单元970执行的程序或控制单元970执行处理所需的各种数据等。在预定时刻例如在成像设备960被接通时，存储在存储器单元967中的程序由控制单元970读出并执行。通过执行程序，控制单元970控制各个单元，使得成像设备960根据用户操作进行操作。
[0238]如上述那样配置的成像设备的图像数据处理单元964作为本申请的编码设备和解码设备(使用编码方法和解码方法)。出于该原因，在编码流的编码或解码过程中，分辨率信息和增强层的默认映射可以得到改善。
[0239]<可扩展编码的应用示例>
[0240](第一系统)
[0241]接下来，将描述经历可扩展编码(分层编码)的可扩展编码数据的具体用途的示例。在例如图26中所示的示例中，将可扩展编码用于选择要传输的数据。
[0242]在图26中所示的数据传输系统1000中，分发服务器1002读出在可扩展编码数据存储单元1001中存储的可扩展编码数据，并且经由网络1003将该数据分发给终端设备，例如个人计算机1004、AV设备1005、平板设备1006、移动电话1007等。
[0243]在该情况下，分发服务器1002选择并传输针对终端设备的能力、通信环境具有合适品质的编码数据。即使分发服务器1002传输具有不必要的高品质的数据，终端设备仍然可能无法获得高品质的图像，并且因此存在以下问题:该传输引起延迟或溢出。此外，占据不必要的通信频带或在终端设备上的负载的不必要的增加也是问题。相反，如果分发服务器1002传输具有不必要的低品质的数据，则存在以下问题:终端设备无法获得具有合适品质的图像。出于该原因，当编码数据针对在终端设备的能力、通信环境等方面具有合适品质时，分发服务器1002适当地读出并传输在可扩展编码数据存储单元1001中所存储的可扩展编码数据。
[0244]例如，可扩展编码数据存储单元1001存储已经经过可扩展编码的可扩展编码数据(BL+EL) 1011。可扩展编码数据(BL+EL) 1011是:包括基本层和增强层二者的编码数据；以及如下数据，可以通过解码从该数据获得基本层图像和增强层图像二者。
[0245]分发服务器1002针对数据所传输至的终端设备的性能、通信环境等来选择合适的层，并且读出该层的数据。例如，分发服务器1002从可扩展编码数据存储单元1001读出高品质的可扩展编码数据(BL+EL) 1011，并且在不作改变的情形下数据传输至具有高处理性能的个人计算机1004或平板设备1006。另一方面，分发服务器1002从可扩展编码数据(BL+ED1011提取例如基本层的数据，并且将该数据作为与可扩展编码数据(BL+EL)1011以及可扩展编码数据(BL) 1012具有内容相同的数据传输至具有低处理性能的AV设备1005或移动电话1007，其中，可扩展编码数据(BL) 1012的品质低于可扩展编码数据(BL+EL)1011 的品质。
[0246]由于可以通过使用如上所述的可扩展编码数据来容易地调节数据量，所以能够抑制延迟或溢出的发生，并且能够抑制在终端设备或通信介质上的负载的不必要的增加。此夕卜，由于在可扩展编码数据(BL+EL)1011中层之间的冗余度减少，所以与当将每一层的编码数据设置成单独的数据时相比，数据量可以降低较多。因此，可以更有效地利用可扩展编码数据存储单元1001的存储区域。
[0247]注意，由于可以应用各种设备作为终端设备如个人计算机1004、AV设备1005、平板设备1006以及移动电话1007，所以每个设备具有不同的硬件性能。此外，由于由终端设备执行的应用也各不相同，所以软件性能也不同。此外，对于用作通信介质的网络1003，可以应用有线或无线通信介质如因特网或局域网(LAN)或者包括有线或无线这两种通信类型在内的所有通信电路线，并且其数据传输性能不同。此外，存在以下问题:性能根据其他通信类型而发生改变。
[0248]因此，分发服务器1002可以被设置成在开始数据传输之前与用作数据传输目的地的终端设备进行通信，以获得与终端设备的能力(例如在终端设备的硬件性能或由终端设备要执行应用(软件)性能)相关的信息和与通信环境(例如网络1003的可用带宽等)相关的信息。因此，可以将分发服