再现装置及数据再现方法
【技术领域】
[0001]本发明涉及再现包含了编码的图像数据及声音数据的多媒体数据的再现装置。
【背景技术】
[0002]以往，作为再现多媒体数据的技术，已知进行无声电平(level)的音频编码数据的检测，同时将无声电平的音频编码数据保存在无声电平数据保存单元中，并停止音频信号的延迟时的、对音频解码器供给无声电平的音频编码数据，另一方面，先于音频信号之前时，插入无声电平数据保存单元的无声电平的音频编码数据，进行音频和视频的同步处理的技术(例如参照专利文献I)。
[0003]在上述以往的技术中，有在将图像(或视频)的数据和音频(声音)的数据输出到显示装置等时有产生延迟，给用户造成不协调感的情况。
[0004]现有技术文献
[0005]专利文献
[0006]专利文献1:日本特开平10-164556号公报
【发明内容】
[0007]再现装置以使图像数据和声音数据同步的同步模式来输出图像数据和声音数据，以使图像数据和声音数据非同步的非同步模式来至少输出图像数据。
[0008]该再现装置使输出图像数据和声音数据时的延迟对用户造成的不协调感降低。
【附图说明】
[0009]图1是包括实施方式I中的再现装置的再现系统的框图。
[0010]图2是实施方式I中的再现装置的动作的流程图。
[0011]图3是包括实施方式2中的再现装置的再现系统的框图。
[0012]图4是实施方式2中的再现装置的动作的流程图。
[0013]图5是包括实施方式3中的再现装置的再现系统的框图。
[0014]图6是实施方式3中的再现装置的动作的流程图。
【具体实施方式】
[0015](实施方式I)
[0016]图1是实施方式I中的再现系统1001的框图。再现系统1001由车载装置10和移动装置201构成。
[0017]作为一例，本实施方式的再现系统1001适用近年来不断扩大其利用的Miracast (注册商标)的技术。Miracast (注册商标)是由W1-Fi联盟制定的、一个电子设备对任意的另一个电子设备进行的无线通信的显示传输技术。例如，通过Miracast (注册商标)，能够进行将显示从任意的移动电话镜像在任意的电视接收机上，并且以实时方式共享会议室的投影仪和个人计算机的画面等。
[0018]在以下的说明中，作为实施方式的车载装置10，示出在汽车等的车辆的车厢内部中所利用的电子设备中适用了 Miracast (注册商标)技术的例子。通过移动装置201和车载装置10利用Miracast (注册商标)技术，从移动装置201发送的图像(视频)被显示在车载装置10的显示单元203上。
[0019]移动装置201是发送图像(视频)的、具有信号源的装置即源装置。此外，车载装置10是将图像再现显示的再现装置，有时称为信宿装置(sink device)。
[0020]车载装置10和移动装置201为彼此利用无线通信或有线通信进行数据的收发的、可连接的结构。
[0021]此外，在车载装置10中，向用户输出声音的扬声器202和输出图像(视频)的显示单元203被连接。
[0022]先说明移动装置201。实施方式I中的移动装置201是所谓的智能手机，但只要是将符合MPEG2-TS (Mot1n Picture Experts Group Transport Stream ;运动图像专家组传输流)的标准的标准化的图像数据和声音数据发送到车载装置10的手机，也可以是智能手机以外的源装置。
[0023]在从移动装置201发送来的数据中，包含再现时刻的信息，所以使用该信息，车载装置10能够使图像(视频)和声音同步再现。
[0024]车载装置10包括接收从移动装置201发送来的数据的接收单元110。接收单元110由普通的WiFi接收器等构成，进行加密过的分组的解读和物理层的分组报头的除去等的处理。
[0025]接收单元110中接收并处理过的数据被输入到分组親合单元(packetcoupler) 111。接收的数据分割为适当的大小而被分组，所以在分组親合单元111中，将这些分割的分组耦合。
[0026]由分组耦合单元111耦合的数据被传送到下级的复用解码单元112。复用解码单元112基于从分组耦合单元111传送来的数据，生成编码的图像数据即图像基本流(ES)和编码的声音数据即声音基本流(ES)。
[0027]由复用解码单元112生成的图像ES被输出到下级的图像解码单元113，声音ES被输出到声音解码单元114。
[0028]图像解码单元113累积在复用解码单元112中生成的图像ES即图像数据，并解码累积的图像数据。同样地，在声音解码单元114中，累积生成的声音ES即声音数据，并解码累积的声音数据。
[0029]由图像解码单元113解码的图像数据被输入到图像输出控制单元115。在图像输出控制单元115中，主要基于对输入的图像数据赋予的时戳(时刻信息)和/或来自后述的音量检测单元116的信息，控制在显示单元203上显示图像的定时、即向显示单元203输出图像数据的定时。
[0030]例如，图像输出控制单元115可以构成为对于从图像解码单元113接收的数据进行某些图像处理，或者也可以构成为进行适合于输出目的地的显示单元203的功能或性能、显示形式的处理。
[0031]由声音解码单元114解码的声音数据被输入到声音输出控制单元117。在声音输出控制单元117中，主要基于对输入的声音数据赋予的时戳(时刻信息)，控制在扬声器202中输出声音的定时。
[0032]此外，音量检测单元116依次检测由声音解码单元114解码的声音数据表示的状态。声音数据表示的状态是例如声音的数据的音量电平。
[0033]该情况下，音量检测单元116检测解码的声音数据的音量电平。例如音量检测单元116检测被检测到的音量电平是否比规定的阈值低、或是否在阈值以下。在音量电平比其阈值低、或在阈值以下的情况下，将表示音量电平较低的含义的无声检测信号输出到图像输出控制单元115。在那时，为了不发生该信号的抖动，音量检测单元116在持续规定的时间以上而音量电平比其阈值低的情况下，优选向图像输出控制单元115输出无声检测信号。
[0034]图像输出控制单元115及声音输出控制单元117为可从主控制单元118具备的计时单元119接收时刻信息的结构。
[0035]这里，时刻信息可以是表示当前时刻的信息，也可以是表示从特定时刻起经过的经过时间的信息。
[0036]特定时刻也可以是，在与图像输出控制单元115或声音输出控制单元117可双向进行信息通信的情况下，计时单元119(主控制单元118)从各控制单元接受了信号的时刻。在本实施方式中，各控制单元也可成为向计时单元119(主控制单元118)请求经过时间的结构。
[0037]实施方式I中的车载装置10包括触摸板203A作为接受用户的操作的构件。触摸板203A设置在显示单元203上，并且设置在面向用户的面上。图1所示的操作检测单元120检测用户在触摸板203A上触摸操作过的位置。
[0038]由操作检测单元120检测出的、表示位置的信息(操作信息)通过发送单元121发送到移动装置201。在发送单元121中，使用普通的WiFi收发器等，进行分组的加密或物理层报头的附加等的处理。接收到操作信息的移动装置201将该信息视为移动装置201被直接操作时的信息。
[0039]例如，在操作检测单元120检测到用户触摸了显示单元203显示着按钮的图像的位置的情况下，接收到该信息的移动装置201作为对应的按钮被触摸来进行处理，更新画面，并将新的画面变换为MPEG2-TS运动图像形式，通过无线通信发送到车载装置10。
[0040]如前述那样，在车载装置10中，连接向用户输出(放音)声音的扬声器202，向用户输出图像(视频)的显示单元203。
[0041]在以上的结构中，分组耦合单元111、复用解码单元112、图像解码单元113、声音解码单元114、音量检测单元116、图像输出控制单元115、声音输出控制单元117、主控制单元118、计时单元119、操作检测单元120分别使用普通的微计算机和软件来实现。
[0042]该情况下，例如在包含CPU、ROM及RAM的基本结构中，CPU通过将RAM用作工作区域并且执行ROM中存储的软件程序，来实现上述各单元。
[0043]此外，上述各单元可以分别由一个微计算机来实现，但也可以通过单一的微计算机来实现多个功能(上述各单元的功能)。或者，也可适当改变CPU和ROM、RAM的耦合来实现上述各单元的功能。
[0044]因此，在使用图1的说明中，为了方便，将主控制单元118作为统一性的控制装置来记载，但计时单元119是否被包含在主控制单元118中的形式，也可以选择适合产品的形式，不是被限定的形式。
[0045]此外，在以上的结构中，分组耦合单元111、复用解码单元112、声音解码单元114、图像解码单元113构成解码单元10A，声音输出控制单元117、图像输出控制单元115、计时单元119构成输出单元10B。此外，接收单元110构成接收单元10C。
[0046]对于再现系统1001，以下说明其动作。
[0047]包括实施方式I的车载装置10 (再现装置)的再现系统1001是利用Miracast (注册商标)技术的系统。Miracast (注册商标)将移动装置201 (源装置)的画面经由无线(WiFi)反映在车载装置10上连接的显示单元203上。而且，来自移动装置201 (源装置)的声音也被无线传输，从车载装置10上连接的扬声器202输出。