处理数字服务信号的方法及装置制造方法

处理数字服务信号的方法及装置制造方法
【专利摘要】公开了处理数字服务信号的装置及其方法。本发明包括：接收模块，其被构造成接收具有内容的数字服务信号并接收针对与内容相关的附加数据的URL信息；提取模块，其被构造成从内容的各个视频帧提取用于指示内容提供方的标识数据，其中，该标识数据位于各个视频帧中的特定区域中；比较模块，其被构造成将所提取的标识数据与所存储的标识数据比较以获取内容的频道信息；获取模块，其被构造成从与标识数据相关的元数据获取内容的频道信息并且获取与内容相关的附加数据；以及生成模块，其被构造成利用所获取的频道信息生成用于获取URL信息的请求，其中，接收模块利用所生成的请求接收URL信息，其中，获取模块根据URL信息通过IP(网际协议网络)来获取附加数据。
【专利说明】处理数字服务信号的方法及装置

【技术领域】
[0001]本发明涉及处理与广播节目相关的自动内容识别(ACR:automatic contentrecognit1n)服务的方法及装置，更具体地，涉及在ACR环境中提供与广播内容相关的附加服务的方法及装置。

【背景技术】
[0002]已经引入了数字卫星广播，数字数据广播作为新的补充服务已经出现。交互式数据广播是一种典型的交互式服务，其不但可以向用户发送数据信号而且可以向用户发送现有广播信号，以提供各种补充服务。
[0003]数字数据广播主要被分成使用虚拟频道的独立服务和经由增强型TV(ETV)的广播相关服务。独立服务仅包括不具有广播图像信号的文本和图形，并且被设置成与现有互联网网页相似的格式。独立服务的典型示例包括天气和股票信息提供服务、TV堤岸服务、商业交易服务等。广播相关服务不但发送广播图像信号而且发送附加的文本和文本信息。观看者可以经由广播相关服务获取关于看到的广播节目的信息。例如，存在使观看者在观看戏剧时能够观看前一个故事或拍摄地点的服务。
[0004]在数字数据广播的广播相关服务中，可以根据ACR技术来提供ETV服务。ACR是指当设备播放音频/视频(A/V内容)时经由隐藏在内容中的信息自动识别内容的技术。
[0005]在ACR技术的实现中，可以使用水印嵌入(watermaking)或指纹嵌入方案来获取关于内容的信息。水印嵌入是指将指示数字内容提供方的信息插入到数字内容中的技术。指纹嵌入在将特定信息插入到数字内容中方面与水印嵌入等同，并且其与水印嵌入的不同之处在于所插入的是关于内容购买方的信息而不是关于内容提供方的信息。
[0006]然而，用于经由ACR功能来提供交互式服务的传统系统具有诸多限制。
[0007]如果内容提供方(或广播公司)发送针对实时服务的内容和针对ETV服务的增强数据(或附加数据)并且TV接收器通过外部输入接收针对该实时服务的内容和该增强数据，则可以接收到该针对实时服务的内容而不可以接收到该增强数据。
[0008]另外，如果现有ETV服务在ACR系统上提供，则必然需要单独的ACR服务器(或者ACR方案提供方)的干预。因此，在没有单独ACR服务器的情况对于接收器来说存在下独自执行ACR功能的需求。
[0009]另外，在用于提供ETV服务的水印嵌入技术中，如果包括在水印中的信息量较大，则嵌入了水印的内容的质量会降低。因此，在水印的高效利用上存在局限。
[0010]另外，在用于提供ETV服务的指纹嵌入技术中，额外需要用于识别内容的外部ACR服务器，并且内容识别结果依赖于参考集的大小。


【发明内容】

[0011]技术问题
[0012]旨在解决该问题的本发明的目标在于利用广播系统识别关于广播节目的信息以及实时提供识别出的广播节目的附加信息。
[0013]解决问题的技术方案
[0014]本发明的目标可以通过提供根据本发明的处理数字服务信号的方法来实现，该方法包括:接收具有内容的数字服务信号；从内容的各个视频帧提取用于指示内容提供方的标识数据，其中，所述标识数据位于各个视频帧中的特定区域中；将所提取的标识数据与所存储的标识数据比较以获取内容的频道信息；从与标识数据相关的元数据获取内容的频道信息；利用所获取的频道信息生成用于获取针对与内容相关的附加数据的URL信息的请求；利用所生成的请求接收URL信息；以及根据URL信息通过IP (网际协议)网络来获取附加数据。
[0015]优选地，该方法进一步包括:从内容的视频帧提取水印，其中，该水印携带有与内容相关的节目信息，其中，该节目信息包括识别各个内容并获取水印中的节目信息的内容ID信息。
[0016]优选地，生成步骤进一步包括利用所获取的节目信息来生成请求。
[0017]优选地，当视频帧包括用于指示与内容相关的节目的符号数据时，该方法进一步包括:从内容的各个视频帧提取符号数据，其中，该符号数据位于各个视频帧的特定区域中；处理所提取的符号数据以获取与内容相关的节目信息，其中，该节目信息包括识别各个内容并获取节目信息的内容ID信息。
[0018]优选地，生成步骤进一步包括利用所获取的节目信息来生成请求。
[0019]优选地，该方法进一步包括定期地更新与标识数据相关的元数据。
[0020]优选地，该方法进一步包括:从视频帧的特定区域提取水印，其中，该水印携带有与内容相关的频道信息和节目信息，其中，该节目信息包括识别各个内容的内容ID信息。
[0021]在本发明的另一方面，这里提供一种处理数字服务信号的方法，该方法包括以下步骤:生成具有内容的数字服务信号；将用于指示内容提供方的标识数据插入到内容的各个视频帧中，其中，该标识数据位于各个视频帧中的特定区域中；以及发送数字服务信号，其中，该标识数据用于获取内容的频道信息，并且该频道信息用于接收针对与内容相关的附加数据的URL信息。
[0022]优选地，该内容包括音频帧，该方法进一步包括以下步骤:生成水印并且将所生成的水印插入到内容的音频帧中，其中，该水印携带有与该内容相关的节目信息，其中，该节目信息包括识别各个内容的内容ID信息。
[0023]优选地，该方法进一步包括以下步骤:生成水印并且将所生成的水印插入到内容的视频帧中，其中，该水印携带有与内容相关的频道信息和节目信息，其中，该节目信息包括识别各个内容的内容ID信息。优选地，该方法进一步包括:将音频帧或视频帧划分成子帧；从所划分的子帧检测要插入水印的特定子帧；将水印插入到所检测到的特定子帧中；以及将所划分的子帧组合成音频帧或视频帧。
[0024]优选地，该方法进一步包括:生成用于指示与内容相关的节目的符号数据；以及将所生成的符号数据插入到内容的各个视频帧中，其中，所插入的符号数据位于各个视频帧中的特定区域中。
[0025]有益效果
[0026]根据本发明，能够利用ACR技术实时地识别关于广播节目的信息。
[0027]根据本发明，能够利用ACR功能接收与广播节目相关的增强数据，以具有改进的TV观看体验。
[0028]根据本发明，通过利用水印技术识别关于广播节目的信息并接收增强数据，TV接收器能够在没有单独ACR服务器的情况下独自执行ACR功能。
[0029]根据本发明，能够根据包括在水印中的信息概述该水印，并且即使当包括在水印中的信息量较大时也能够高效利用水印。
[0030]根据本发明，通过将水印嵌入和指纹嵌入相结合，能够高效提供ACR服务。

【专利附图】

【附图说明】
[0031]附图被包括在本说明书中以提供对本发明的进一步理解，阐释本发明的实施方式，且与说明书一起用于解释本发明的原理。
[0032]在附图中:
[0033]图1是示出基于ACR的ETV服务系统的图；
[0034]图2是示出根据本发明的实施方式的ACR服务处理系统的图；
[0035]图3是示出根据本发明的另一实施方式的ACR服务处理系统的图；
[0036]图4是示出根据本发明的实施方式的接收器的结构的图；
[0037]图5是示出根据本发明的实施方式的ACR服务处理系统的结构的图；
[0038]图6是示出根据本发明的实施方式的ETV服务接收装置的结构的图；
[0039]图7是示出根据本发明的另一实施方式的ETV服务接收装置的结构的图；
[0040]图8是示出根据本发明的另一实施方式的ETV服务接收装置的结构的图；
[0041]图9是示出根据本发明的实施方式的数字水印嵌入技术的流程的图；
[0042]图10是示出根据本发明的实施方式的ACR查询结果格式的图；
[0043]图11是示出根据本发明的实施方式的内容识别符(ID)的结构的图；
[0044]图12是示出根据本发明的实施方式的利用水印嵌入的接收器的操作的图；
[0045]图13是示出根据本发明的实施方式的水印提取处理的图；
[0046]图14是示出根据本发明的实施方式的水印信息的概述(profiling)的图；
[0047]图15是示出根据本发明的实施方式在视频帧中插入水印的方法的图；
[0048]图16是示出根据本发明的另一实施方式的在视频帧中嵌入水印的方法的图；
[0049]图17是示出根据本发明的另一实施方式的在视频帧中嵌入水印的方法的图；
[0050]图18是示出根据本发明的实施方式的在音频帧中嵌入水印的方法的图；
[0051]图19是示出根据本发明的实施方式的嵌入概述的水印的方法的图；
[0052]图20是示出根据本发明的实施方式的在连续帧中嵌入水印的方法的图；
[0053]图21是示出根据本发明的实施方式的提取插入到连续帧中的水印的方法的图；
[0054]图22是示出根据本发明的实施方式的在3D视频帧中嵌入水印的方法的图；
[0055]图23是示出根据本发明的实施方式的ACR服务提供系统的结构的图；
[0056]图24是示出根据本发明的实施方式的利用广播公司标识来提供ACR服务的方法的图；
[0057]图25是示出根据本发明的实施方式的广播公司标识的图；
[0058]图26是示出根据本发明的实施方式的利用广播公司标识的ACR服务的图；
[0059]图27是示出根据本发明的实施方式的利用标识和水印的ACR服务提供方法的图；
[0060]图28是示出根据本发明的另一实施方式的ACR服务处理系统的图；
[0061]图29示出了根据本发明的实施方式的利用标识和/或水印的ACR服务提供装置的操作的概念；
[0062]图30是示出根据本发明的另一实施方式的ACR服务处理系统的图；
[0063]图31是示出根据本发明的另一实施方式的ACR服务处理系统的图；
[0064]图32是示出根据本发明的实施方式的ACR服务接收装置的图；
[0065]图33是示出根据本发明的实施方式的ACR服务发送装置的图；
[0066]图34是示出根据本发明的实施方式的ACR服务接收处理的图；以及
[0067]图35是示出根据本发明的实施方式的ACR服务发送处理的图。

【具体实施方式】
[0068]下面将详细参照本发明的优选实施方式，在附图中例示了实施方式的示例。
[0069]下面将详细参照本发明的优选实施方式，在附图中例示了实施方式的示例。以下，将参考附图描述本发明的实施方式的配置和操作。在不限制本发明的精神和范围的前提下，将在至少一个实施方式中描述附图中所示且在下文描述的本发明的配置和操作。
[0070]虽然本发明中所用的术语选自通常已知且使用的术语，但是本文中所用的术语可以根据操作者的意图或现有技术中的习惯、新技术的出现等改变。另外， 申请人:凭借其判断力已经选择了本发明的说明书中所提及的某些术语，这些术语的详细含义在本说明书的相关部分中进行了说明。而且，要求不仅仅通过实际所用的术语来理解本发明，而是通过每个术语在本文中的含义来理解本发明。
[0071]图1是示出基于ACR的ETV服务系统的图。
[0072]图1中所示的基于ACR的ETV服务系统可以包括广播公司或内容提供方100、多频道视频节目分配者(MVPD) 101、机顶盒(STB) 102、诸如数字TV接收器的接收器103、以及ACR服务器(或ACR方案提供方)104。接收器103可以根据先进电视系统委员会(ATSC)运行并且可以支持ACR功能。实时广播服务110可以包括A/V内容。
[0073]数字广播服务可以主要被划分成由广播公司100提供的地面广播服务以及由MVPD 101提供的多频道广播服务，例如有线广播或卫星广播。广播公司100可以一起发送实时广播服务110和增强数据(或附加数据)120。在这种情况下，如图1中所示，接收器103通过MVPD 101和STB 102可以只接收实时广播服务110并且不接收增强数据120。
[0074]因此，为了接收增强数据120，接收器103分析并处理作为实时广播服务110的A/V内容输出，并识别广播节目信息和/或与广播节目相关的元数据。利用所识别的广播节目信息和/或广播节目相关的元数据，接收器103可以从广播公司100或ACR服务器104接收增强数据(140)。在这种情况下，增强数据可以经由网际协议(IP)网络150来发送。
[0075]如果从单独的ACR服务器104接收到增强数据(140)，则在ACR服务器104和接收器103之间的机制中，ATSC 2.0标准中所限定的触发声明对象(TDO)模型当中的请求/响应模型可以被应用到ACR服务器104。下面将描述TDO和请求/响应模型。
[0076]TDO指示包括在广播内容中的附加信息。TDO用来及时地触发广播内容内的附加信息。例如，如果试听节目被广播，观看者优选的试听参与者的当前排名可以连同广播内容一起进行显示。此时，试听参与者的当前排名的附加信息可以是TDO。该TDO可以通过与观看者互动改变或者根据观看者的意图来提供。
[0077]在标准ATSC 2.0的请求/响应ACR模型中，期望数字广播接收器(103)定期地(例如，每5秒)生成内容的签名并且将包含签名的请求发送到ACR服务器(104)。当ACR服务器(104)获得来自数字广播接收器(103)的请求时，ACR服务器(104)返回响应。在请求/响应时刻之间，通信会话不保持开放。在该模型中，对于ACR服务器(104)来说，向客户端发送消息是不可行的。
[0078]然而，在上述ETV服务系统中，在没有单独的ACR服务器的情况下可能无法提供ACR功能。因此，需要在没有单独的ACR服务器的情况下独立执行ACR功能的方法。
[0079]图2是示出根据本发明的实施方式的ACR服务处理系统的图。
[0080]根据图2中所示的ACR服务处理系统，可以在没有ACR服务器的干预的情况下，使用水印嵌入可以接收与实时广播相关的增强数据，以提供交互式服务。
[0081]图2中所示的ACR服务处理系统可以包括用于生成并发送数字服务信号的发送器200和/或用于接收并处理数字服务信号的接收器210。发送器200可以是内容提供方或广播公司，接收器210可以是诸如数字TV接收器的接收器。发送器200可以包括生成模块201、插入模块202和/或发送模块203。接收器210可以包括接收模块211和/或提取模块 212。
[0082]下面将描述图2中所示的ACR服务处理系统的各个模块的操作。
[0083]首先，发送器200的生成模块201可以生成水印并将该水印插入到待发送的A/V内容的帧中。水印可以包括其中关于插入水印的内容的频道的信息，和/或诸如内容的增强数据的URL信息这样的内容信息(或元数据)。发送模块203可以向接收器210发送其中插入有水印的内容。
[0084]接收器210的接收模块211可以接收其中插入有水印的内容，并且将该内容传送到提取模块212。提取模块212可以从所传送内容的A/V帧提取插入的水印。
[0085]图3是示出根据本发明的另一实施方式的ACR服务处理系统的图。
[0086]更具体地，图3示出了支持基于ACR的ETV服务的广播服务的架构。
[0087]如图3中所示，ACR服务处理系统可以包括内容提供方或广播公司300、MVPD302、机顶盒303、接收器304、应用URL查找服务器(ALS) 306以及应用服务器(AS) 307。内容提供方300可以包括水印插入器301，接收器304可以包括水印提取器305。ALS 306和AS307物理上从属于一个服务器。
[0088]图3中所示的接收器304具有ACR功能。
[0089]内容提供方300可以将与增强数据相关的元数据插入到以水印的形式实时发送的A/V内容中。即使当经由MVPD 302接收到A/V内容时，也可以接收到其中以水印的形式插入了与增强数据相关的元数据的A/V内容。具有ACR功能的接收器304可以从通过MVPD302接收的A/V内容提取水印，并且识别关于实时广播的节目和元数据的信息。接收器304可以经由IP网络接收增强数据。
[0090]下面将描述图3中所示的各个部件的操作。
[0091]广播公司304可以以水印的形式将诸如用于识别内容的内容ID的与增强数据相关的元数据插入到A/V内容中。更具体地，水印插入器301搜索A/V内容的将要合适地插入水印的区域，并且将水印插入到搜索到的区域中。
[0092]具有ACR功能的接收器304可以通过MVPD 302和机顶盒303接收其中插入有水印的A/V内容，从该A/V内容提取水印并且获得与增强数据相关的元数据。更具体地，接收器304的水印提取器305可以搜索接收到的A/V内容的其中插入有水印的区域，并且提取插入到搜索到的区域中的水印。
[0093]接收器304可以经由从所提取的水印获取的元数据下载与实时广播的节目相关的增强数据。更具体地，接收器304可以经由IP网络访问ALS 306，以根据查询接收关联应用的URL。根据应用的URL，接收器304可以访问用于管理应用的AS 306，并且从AS 306下载从属于该应用的增强数据。
[0094]图4是示出根据本发明的实施方式的接收器的结构的图。
[0095]更具体地，图4示出了利用水印嵌入来支持基于ACR的ETV服务的接收器的构造的实施方式。
[0096]如图4中所示，根据本发明的实施方式的支持基于ACR的ETV服务的接收器可以包括输入数据处理器、ATSC主服务处理器、ATSC移动/手持式(MH)服务处理器和/或ACR服务处理器。输入数据处理器可以包括调谐器/解调器400和/或残留边带(VSB)解码器401。ATSC主服务处理器可以包括传输协议(TP)解复用器402、非实时(NRT)引导信息处理器403、数字存储介质命令和控制(DSM-CC)可寻址部分解析器404、信息提供方(IP)/用户数据报协议(M)P)解析器405、FLUTE解析器406、元数据模块407、文件模块408、电子服务指南(ESG)/数据载波检测(DCD)处理机409、存储控制模块410、文件/TP开关411、播放控制模块412、第一存储装置413、IP分组存储控制模块414、互联网访问控制模块415、IP接口 416、现场/记录开关417、文件(对象)解码器418、TP/打包基本流(PES)解码器420、节目特定信息(PSI) /节目和系统信息协议(PSIP)解码器421和/或电子节目指南(EPG)处理器422。ATSC MH服务处理器可以包括主/MH/NRT开关419、MH基带处理器423、MH物理适应处理器424、IP协议栈425、文件处理机426、ESG处理机427、第二存储装置428和/或流处理机429。ACR服务处理器可以包括主/MH/NRT开关419、A/V解码器430、A/V处理模块431、外部输入处理机432、水印提取器433和/或应用434。
[0097]下面将描述各个处理器的各个模块的操作。
[0098]在输入数据处理器中，调谐器/解调器400可以调谐和解调从天线接收的广播信号。通过该处理，可以提取VSB符号。VSB解码器401可以对通过调谐器/解调器400提取的VSB符号解码。
[0099]VSB解码器401可以根据解码输出ATSC主服务数据和MH服务数据。ATSC主服务数据可以被传输到ATSC主服务处理器并且由该ATSC主服务处理器处理，MH服务数据可以被传输到ATSC MH服务处理器并且由该ATSC MH服务处理器处理。
[0100]ATSC主服务处理器可以处理主服务信号，以向ACR服务处理器传输不包括MH信号的主服务数据。TP解复用器402可以将经由VSB信号发送的ATSC主服务数据的传输分组解复用，并将解复用后的传输分组传送到其它处理模块。即，TP解复用器402可以将包括在传输分组中的各种信息解复用并且传输信息，使得广播信号的元素由广播接收器的模块分别处理。解复用后的数据可以包括实时流、DSM-CC可寻址部分和/或NRT服务表/A/90&92信令表。更具体地，如图4中所示，IP解复用器402可以向现场/记录开关417输出实时流，向DSM-CC可寻址部分解析器404输出DSM-CC可寻址部分并且向NRT引导信息处理器403输出NRT服务表/A/90&92信令表。
[0101]NRT引导信息处理器403可以从TP解复用器402接收NRT服务表/A/90&92信令表，并且提取FLUT会话信息并将该FLUT会话信息传输到DSM-CC可寻址部分解析器404。DSM-CC可寻址部分解析器404可以从TP解复用器402接收DSM-CC可寻址部分，从NRT引导信息处理器403接收FLUT会话信息并处理该DSM-CC可寻址部分。IP/UDP解析器405可以接收从DSM-CC可寻址部分解析器404输出的数据，并且根据IP/UDP解析发送的IP数据报。FLUTE解析器406可以接收从IP/UDP解析器405输出的数据并处理FLUTE数据，以按照异步分层编码(ALC)对象的形式发送数据服务。元数据模块407和文件模块408可以接收从FLUTE解析器406输出的数据，并处理元数据和所恢复的文件。ESG/D⑶处理机409可以接收从元数据模块407输出的数据并处理电子服务指南和/或下载与广播节目相关的频道描述符。所恢复的文件可以以诸如ATSC 2.0内容和参考指纹的文件对象的形式，传输到存储控制模块410。文件对象可以由存储控制模块410处理，并且被分成正常文件和TP文件，以存储在第一存储装置413中。播放控制模块412可以更新所存储的文件对象并将该文件对象传输到文件/TP开关411，以解码正常文件和TP文件。文件/TP开关411可以将正常文件传输到文件解码器418并且将TP文件传输到现场/记录开关417，以通过不同的路径来解码正常文件和TP文件。
[0102]文件解码器418可以解码正常文件并且将所解码的文件传输到ACR服务处理器。所解码的正常文件可以被传输到ACR服务处理器的主/MH/NRT开关419。在现场/记录开关417的控制下，可以将TP文件传输到TP/PES解码器420。TP/PES解码器420解码TP文件，PS I/PS IP解码器421再次解码解码后的TP文件。EPG处理机422可以处理解码后的TP文件，并且根据ATSC处理EPG服务。
[0103]ATSC MH服务处理器可以处理MH信号，以向ACR服务处理器发送ATSC MH服务数据。更具体地，MH基带处理器423可以将ATSC MH服务数据信号转换成适用于发送的脉冲波形。MH物理适应处理器424可以以适合MH物理层的形式处理ATSC MH服务数据。
[0104]IP协议栈模块425可以接收从MH物理适应处理器424输出的数据并根据通信协议处理数据以通过互联网发送/接收。文件处理机426可以接收从IP协议栈模块425输出的数据并且处理应用层的文件。ESG处理机427可以接收从文件处理机426输出的数据并处理移动ESG。另外，第二存储装置428可以接收从文件处理机426输出的数据并存储文件对象。另外，从IP协议栈模块425输出的某些数据可以根据ATSC成为用于接收器的ACR服务、而不是移动ESG服务的数据。在这种情况下，流处理机429可以处理经由实时传输协议(RTP)接收到的实时流，并且将该实时流传输到ACR服务处理器。
[0105]ACR服务处理器的主/MH/NRT开关419可以接收从ATSC主服务处理器和/或ATSCMH服务处理器中输出的信号。A/V解码器430可以解码从主/MH/NRT开关419接收到的压缩A/V数据。可以将解码后的A/V数据传输到A/V处理模块431。
[0106]外部输入处理机432可以处理通过外部输入接收的A/V内容并且将该A/V内容发送到A/V处理模块431。
[0107]A/V处理模块431可以处理从A/V解码器430和/或外部输入处理机432接收的A/V数据，以在屏幕上进行显示。在这种情况下，水印提取器433可以从A/V数据提取以水印的形式插入的数据。可以将所提取的水印数据传输到应用434。应用434可以根据ACR功能提供增强服务，识别广播内容并提供与其关联的增强数据。如果应用434将增强数据传输到A/V处理模块431，则该A/V处理模块431可以处理所接收的A/V数据，以在屏幕上进行显示。
[0108]图5是示出根据本发明的实施方式的ACR服务处理系统的结构的图。
[0109]更具体地，图5示出了如果接收器500通过诸如机顶盒这样的外部装置的外部输入接收地面频道时则利用水印获取节目信息的操作。
[0110]图5中所示的ACR服务处理系统可以包括接收器500、CE服务器501、广播公司或内容提供方502以及应用服务器503。接收器500可以包括A/V处理器510、水印提取器520以及应用模块530。CE服务器501可以包括水印管理器511。另外，接收器500可以具有ACR功能。
[0111]A/V处理器510将通过外部输入接收到的A/V内容传输到水印提取器520，该水印提取器520可以从A/V内容提取以水印的形式插入的数据并访问应用服务器503。此时，CE服务器501可以管理水印嵌入相关模块和微码。
[0112]根据本发明的一个实施方式的微码是指用于提取插入到A/V内容中的水印的代码，并且可以由A/V解码芯片和/或原始数据处理芯片动态地进行下载。需要的话，接收器可以压缩并存储一个或多个微码，或者通过下载接口下载一个或多个微码。下载接口可以根据芯片类型不同地实现。
[0113]下面将描述图5中所示的各个部件的操作。
[0114]接收器500的水印提取器520可以从音频内容或视频内容提取水印，或者利用音频内容和视频内容提取水印。所提取的水印可以包括频道信息和/或内容信息。内容信息可以包括关于用在ATSC 2.0服务中的内容的信息。
[0115]应用模块530可以调谐到用于发送与频道和/或基于从水印提取的频道信息和内容信息的元数据相关联的内容的频道，并且接收内容信息。另外，应用模块530可以经由IP网络接收与频道相关联的内容和/或元数据。根据本发明的一个实施方式，频道可以包括ATSC消息处理机(MH)频道。
[0116]CE服务器501可以管理并更新与水印嵌入有关的微码和/或软件。即，CE服务器501可以根据广播公司500的协议连续地增加、删除或更新相关微码和/或软件。如果从接收器500接收到请求或者CE服务器501被更新，则CE服务器501可以通知接收器500接收到该请求或者更新了该CE服务器501，并下载新代码。
[0117]水印提取器520可以被实现为在接收器500的芯片上运行的微码或软件模块。可以连续地从CE服务器501下载新微码或软件模块。
[0118]图6至图8是示出根据本发明的实施方式的ETV服务接收装置的结构的图。
[0119]图6中所示的根据本发明的实施方式的ETV服务接收装置可以包括远程控制器600、远程控制器接收器601、UI模块602、网络接口 603、微码下载器604、网络浏览器605、触发器处理器606、微处理器607、微码接口(mif)608、音频解码器609、视频解码器610、图形处理器611、应用612、扬声器613、显示模块614、天线615、调谐器616、解调器616和/或系统解码器618。系统解码器618可以是MPEG-2 TS解码器。解调器617可以是VSB解调器或数字视频广播(DVB)解调器。各个音频解码器609和视频解码器610可以包括微码接口 608。
[0120]如图6中所示，ETV服务接收装置可以利用在视频解码器或音频解码器的芯片上运行的微码实时地从通过地面波发送的A/V内容提取水印，向应用发送所提取的水印并且接收增强数据。可以通过微码下载器604从外部设备下载微码。微码可以经由微码接口608动态地下载在视频解码器609或音频解码器610的芯片上。
[0121]下面将描述图6中所示的ETV服务接收装置的部件之间的操作。
[0122]远程控制器接收器601可以通过红外(IR)光从远程控制器600接收观看者的请求信号，并且利用键码向UI模块602发送该信号。UI模块602和/或远程控制器接收器601可以利用浏览器键码向网络浏览器605传送信号。可以将通过Π模块602的信号传输到图形处理器601。
[0123]调谐器616调谐从天线615接收到的信号，并且解调器617可以恢复调谐后的信号的波形。解码器618可以解码所恢复的信号并且将所解码的信号传送到触发器处理器606。触发器处理器606可以将所解码的信号处理成触发数据，并向网络浏览器605发送该触发数据。
[0124]如果传送到网络浏览器605的信号被传送到微码下载器604，则该微码可以被下载并传送到微码接口 608。通过微码接口 608的微码和所解码的信号可以被分成音频信号和视频信号，该音频信号和视频信号分别被传送到音频解码器609和视频解码器610。音频解码器609和视频解码器610的微码接口 619可以利用微码提取插入到A/V内容中的水印。
[0125]所提取的水印可以被传送到应用612，音频信号可以被传送到扬声器613并且视频信号可以与从图形处理器611接收到的图形信号一起被输出到显示模块614。
[0126]图7是示出根据本发明的另一实施方式的ETV服务接收装置的结构的图。
[0127]图7中所示的根据本发明的实施方式的ETV服务接收装置可以包括远程控制器700、远程控制器接收器701、UI模块702、网络接口 703、微码下载器704、网络浏览器705、触发器处理器706、微处理器707、微码接口(mif)708、音频解码器709、视频解码器710、图形处理器711、应用712、扬声器713、显示模块714、天线715、调谐器716、解调器717、系统解码器718、音频后期处理器和放大器719和/或视频显示处理器720。根据本发明的实施方式，系统解码器718可以包括MPEG-2TS解码器。根据本发明的实施方式，解调器717可以包括VSB解调器和/或DVB解调器。音频后期处理器和放大器以及视频显示处理器720中的每一个可以包括微码接口 708。
[0128]如图7中所示，ETV服务接收装置可以在后期处理芯片而不是音频解码器或视频解码器的芯片上通过微码实时地提取被插入到A/V内容中的水印。根据本发明的实施方式，后期处理芯片可以包括音频后期处理器和放大器719以及视频显示处理器720。ETV服务接收装置可以利用所提取的水印自动识别A/V内容。ETV服务接收装置可以通过微码下载器704从外部设备中下载微码。另外，ETV服务接收装置的音频或视频后期处理芯片可以通过微码接口 708下载微码。
[0129]下面将描述图7中所示的ETV服务接收装置的部件之间的操作。
[0130]远程控制器接收器701可以通过红外(IR)光从远程控制器700接收观看者的请求信号，并且利用键码向Π模块702发送该接收到的信号。Π模块702和/或远程控制器接收器701可以利用浏览器键码向网络浏览器705传输信号。可以将通过Π模块702的信号传输到图形处理器701。
[0131]调谐器716调谐从天线715接收到的信号，并且解调器717可以恢复调谐后的信号的波形。解码器718可以解码所恢复的信号并且将所解码的信号传送到触发器处理器706。触发器处理器706可以将所解码的信号处理成触发数据，并向网络浏览器705发送该触发数据。
[0132]如果被传送到网络浏览器705的信号被传送到微码下载器704，则可以通过微码接口 708下载微码并且将该微码传输到音频后期处理器和放大器718和/或显示处理器的微码接口。
[0133]解码后的信号可以被分成音频信号和视频信号，该音频信号和视频信号分别被传输到音频解码器709和视频解码器710。由音频解码器709解码的音频信号可以被传送到音频后期处理器和放大器719。由视频解码器710解码的视频信号可以被传送到视频显示处理器720。
[0134]如果音频后期处理器和放大器718和/或显示处理器720的微码接口 708通过微码接口 708接收音频信号和/或视频信号，则可以通过微码提取插入到音频和/或视频内容中的水印。
[0135]所提取的水印可以被传送到应用712，音频信号可以被输出到扬声器713并且视频信号可以被输出到显示模块714。
[0136]图8是示出根据本发明的另一实施方式的ETV服务接收装置的结构的图。
[0137]图8中所示的根据本发明的实施方式的ETV服务接收装置可以包括远程控制器800、远程控制器接收器801、UI模块802、网络接口 803、微码下载器804、网络浏览器805、触发器处理器806、微处理器807、微码接口(mif)808、音频解码器809、视频解码器810、图形处理器811、应用812、扬声器813、显示模块814、音频后期处理器和放大器815、机顶盒817和外部输入处理程序818。外部输入处理程序818可以通过高清晰度多媒体接口(HDMI)接收外部输入。
[0138]如图8中所示，ETV服务接收装置可以利用微码自动识别A/V内容，并且即使当该A/V内容不通过地面波发送而是经由诸如机顶盒817的外部设备接收时，接收ETV服务。即，如果从外部设备接收到A/V内容，则ETV服务接收装置可以利用微码实时地从该A/V内容提取水印。此时，视频或音频后期处理芯片可以通过微码接口 808下载微码。所提取的水印可以被传送到应用812，并且接收器可以利用包括在水印中的数据获取增强数据。根据本发明的实施方式，后期处理芯片可以包括音频后期处理器和放大器815和/或视频显示处理器816。
[0139]下面将描述图8中所示的ETV服务接收装置的部件之间的操作。
[0140]远程控制器接收器801可以通过红外(IR)光从远程控制器800接收观看者的请求信号，并且利用键码向UI模块802发送接收到的信号。UI模块802和/或远程控制器接收器801可以利用浏览器键码向网络浏览器805传送该信号。如果传送到网络浏览器805的信号被传送到微码下载器804，则ETV服务接收装置可以下载微码并将该微码传输到微码接口 808。可以将通过Π模块802的信号传送到图形处理器8701。
[0141]通过机顶盒从外部设备接收的信号可以在不通过外部输入处理程序818解码的情况下通过触发器处理器806被处理成触发数据，并且可以被传送到网络浏览器805。另选地，通过外部输入处理程序818的外部输入信号可以被分成音频信号和视频信号，该音频信号和视频信号分别被传送到音频解码器809和视频解码器810。此时，音频解码器809可以解码该音频信号。
[0142]经解码的音频信号可以被传送到音频后期处理器和放大器819，并且经解码的视频信号可以被传送到视频显示处理器816。音频后期处理器和放大器819以及显示处理器816的微码接口 808可以利用微码提取插入到音频和/或视频内容中的水印。
[0143]所提取的水印可以被传送到应用812，音频信号可以被输出到扬声器813并且视频信号可以被输出到显示模块814。
[0144]图9是示出根据本发明的实施方式的数字水印嵌入技术的流程的图。
[0145]数字水印嵌入是以难以去除的方式向数字信号中嵌入信息的处理。该信号例如可以是音频、图片或视频。如果该信号被复制，则在副本中也携带有该信息。信号可以同时携带有几种不同的水印。
[0146]在可视水印嵌入中，该信息是在图片或视频中可视的。通常地，该信息是识别媒体的所有者的文本或标识。当电视广播公司将其标识添加到所发送视频的角落时，该标识也可以是可视的水印。
[0147]在可视水印嵌入中，信息作为数字数据被添加到音频、图片或视频中，但是其无法以这样的方式进行感知，尽管其可以检测到隐藏了一些数量的信息。水印可以用于广泛用途，因此使其易于检索，或者其可以是速记式加密(Steganography)的形式，其中一方传递嵌入在数字信号中的秘密消息。不论在哪种情况下，如在可视水印嵌入中，目的是以难以去除的方式将所有权或其它描述性信息附着到信号。还可以利用隐藏的嵌入信息作为在个体之间隐秘信息的手段。
[0148]水印嵌入的一个应用是在版权保护系统中，用于防止或制止数字媒体的未经授权的复制。在该用途中，复制设备在进行复制之前从信号中检索水印；该设备根据水印的内容做出是否复制的决定。另一个应用是在溯源中。水印在每个分配点被嵌入到数字信号中。如果稍后发现作品的副本，则可以从副本中检索水印，并且知道分配的来源已知。该技术已经被报道用来检测非法复制影片的来源。
[0149]具有描述性信息的数码照片的注释是可视水印嵌入的另一个应用。
[0150]尽管数字媒体的某些文件格式可以包含被称为元数据的附加信息，但是数字水印嵌入的不同之处在于该数据是在信号本身中携带有。
[0151]待嵌入的信息被称为数字水印，尽管在某些语境中，术语数字水印是指嵌入了水印的信号和封面信号之间的不同。待嵌入水印的信号被称为宿主信号。
[0152]水印嵌入系统通常被分成三个不同的步骤，嵌入(901)、攻击(902)以及检测(或提取;903) ο
[0153]在嵌入(901)中，算法接受宿主和待嵌入的数据，并产生嵌入了水印的信号。
[0154]然后嵌入了水印的信号被发送或存储，通常是被发送到另一个人。如果这个人进行修改，这被称为攻击(902)。尽管修改可以不是恶意的，但术语攻击起因于版权保护应用，盗印者试图通过修改去除水印。存在很多可能的修改，例如，数据的有损压缩、复制图像或视频、或者故意增加噪音。
[0155]检测(903)是应用于受攻击的信号以尝试从其提取水印的算法。如果信号在传输期间不被修改，则水印仍然存在并且可以进行提取。在鲁棒水印嵌入应用中，即使修改是强的，提取算法也应当能够正确地生成水印。在易损水印嵌入中，如果对信号进行了任何改动，则提取算法失败。
[0156]如果即使通过任何数目的转换使嵌入的信息退化也可以从标记后的信号中可靠地检测到所嵌入的信息，则数字水印相对于该转换被称为鲁棒。通常的图像退化是JPEG压缩、旋转、裁剪、加性噪声和量化。对于视频内容来说，通常将时间修改和MPEG压缩添加到该列表中。如果嵌入了水印的内容在感觉上相当于原始的未嵌入水印的内容，则该水印被称为不可感知。通常来说，易于创建鲁棒水印或不可感知的水印，但是已经证实了鲁棒水印和不可感知的水印的创建是相当有挑战性的。已经提出了鲁棒的不可感知水印作为保护数字内容的工具，例如作为在专业视频内容中嵌入的‘不可复制’标志。
[0157]数字水印嵌入技术可以以几种方式进行分类:
[0158]首先，如果在最微小的修改之后无法检测到水印，则该水印被称为易损水印(鲁棒性)。易损水印通常用于篡改检测(完整性证明)。明显显著的对原作的修改通常不被称为水印，而是被概括为条形码。如果水印抵抗良性转换但是在恶性转换之后使检测失败，则该水印被称为半易损水印。半易损水印通常用来检测恶性转换。如果水印抵抗指定类的转换，则该水印被称为鲁棒水印。鲁棒水印可以用在复制保护应用中，以携带有副本并访问控制信息。
[0159]第二，如果原始覆盖信号和标记后的信号是(接近于)在感知上不能区分(可感知性)，则该水印被称为不可感知的水印。如果水印在标记信号中的出现是显著而非侵入性的，则该水印被称为可感知水印。
[0160]第三，关于容量，嵌入消息的长度确定两个不同的主要类别的水印嵌入方案:
[0161]从概念上讲，消息为零比特长，并且系统被设计旨在检测在标记后的对象中有无水印。这种水印嵌入方案通常被称为斜体零比特或斜体存在水印嵌入方案。有时，这种类型的水印嵌入方案被称为I比特水印，由于I表示水印的存在(并且O表示不存在)。
[0162]消息是η比特长的流(，其中n = m|)或者M = {O, 1}η,并且在水印中调制。这种方案通常被称为多比特水印嵌入或非零比特水印嵌入方案。
[0163]第四，针对嵌入步骤存在几种方法。如果标记后的信号是通过加性修改获得的，则该水印嵌入方法被称为扩频。已知扩频水印是适度鲁棒的，但由于宿主干扰，也具有低的信息容量。如果标记后的信号是通过量化获得的，则该水印嵌入方法据称是量化型的。量化水印遭受较低的鲁棒性，但是由于宿主干扰的拒绝，而具有高的信息容量。如果标记后的信号是通过加性修改嵌入的，则该水印方法被称为振幅调制，该加性修改与扩频方法相似，但是特别地在空间域嵌入中。图10是示出根据本发明的实施方式的ACR查询结果格式的图。
[0164]根据现有的ACR服务处理系统，如果广播公司将针对实时服务的内容和针对ETV服务的增强数据一起发送，并且TV接收器接收该内容和该ETV服务，则该针对实时服务的内容可以被接收而该增强数据不可以被接收。
[0165]在这种情况下，根据本发明的实施方式，利用IP网络通过独立的IP信令频道能够解决现有ACR处理系统的问题。即，TV接收器可以经由MVro接收针对实时服务的内容，并且经由独立的IP信令频道接收增强数据。
[0166]在这种情况下，根据本发明的实施方式，IP信令频道可以被构造成使得PSIP流以二进制流的形式传送和处理。此时，该IP信令频道可以被构造成使用拉方法或推方法。
[0167]拉方法的IP信令频道可以根据HTTP请求/响应方法来构造。根据HTTP请求/响应方法，PSIP 二进制流可以被包括在针对HTTP请求信号的HTTP响应信号中，并且通过SignalingChannelURL (信令频道URL)发送。在这种情况下，可以根据作为ACR查询结果传送的在元数据中的Polling_cycle (轮询_周期)定期请求轮询周期。另外，关于待更新的时间和/或周期的信息可以被包括在信令频道中并且可以被发送。在这种情况下，接收器可以基于从IP信令频道接收的更新时间和/或周期信息从服务器请求信令信息。
[0168]推方法的IP信令频道可以利用XML-HTTPRequest (XML-HTTP请求)应用编程接口(API)来构造。如果使用XMLHTTPRequest API，则能够从服务器异步地接收更新。这是在接收器处通过XMLHTTPRequest对象从服务器异步地请求信令信息，并且如果信令信息已经改变则在服务器处经由该频道作为其响应提供信令信息的方法。如果在会话的等待时间上有限制，则会话超时响应可以被产生并且接收器可以识别该会话超时响应，再次请求信令信息并且维持接收器和服务器之间的信令频道。
[0169]为了通过IP信令频道接收增强数据，接收器可以利用水印嵌入和指纹嵌入来运行。指纹嵌入是指用于将关于内容购买方而非内容提供方的信息插入到内容中的技术。如果使用指纹嵌入，则接收器可以搜索参考数据库以识别内容。识别内容的结果被称为ACR查询结果。ACR查询结果可以包括向TV观看者提供的查询以及该查询的答复信息，以实现ACR功能。接收器可以根据ACR查询结果提供ETV服务。
[0170]关于ACR查询结果的信息可以被插入/嵌入进/到关于基于水印的ACR系统的A/V内容中并且可以被发送。接收器可以通过水印提取器提取或获取ACR查询结果信息，然后提供ETV服务。在这种情况下，可以在没有单独ACR服务器的情况下提供ETV服务，并且可以省略通过IP网络的查询。
[0171]图10是示出根据本发明的实施方式指示ACR查询结果的XML方案的图。如图10中所示，ACR查询结果的XML格式可以包括结果代码元素1010，并且ACR查询结果类型1000可以包括内容ID元素1001、网络时间协议(NTP)时间标记元素1002、信令频道信息元素1003、服务信息元素1004以及另一识别符元素1005。信令频道信息元素1003可以包括信令频道URL元素1013、更新模式元素1023以及轮询周期元素1033，并且服务信息元素1004可以包括服务名称元素1014、服务标识元素1024以及服务描述元素1034。
[0172]下面将详细描述图10中所示的ACR查询结果的XML架构的图，并且将描述XML架构的示例。
[0173]结果代码元素1010可以指示ACR查询的结果值。这可以指示查询成功或失败以及以代码值的形式指示查询失败情况下的失败原因。例如，如果结果代码元素1010的值是200，这可以指示查询成功并且返回与其相对应的内容信息，并且如果结果代码元素101的值为404，这可以指示没有找到内容。
[0174]内容ID元素1001可以指示用于全局地且唯一地识别内容的识别符，并且可以包括全局服务识别符元素，该全局服务识别符元素是用于识别服务的识别符。
[0175]NTP时间标记元素1002可以指示以NTP时间标记的形式提供用于ACR查询的样本帧间隔的特定点的时间。这里，该特定点可以是样本帧的开始点或结束点。NTP是指通过互联网使计算机与基准时钟的时间同步的协议，并且可以用于时间服务器和在计算机网络上分布的客户端之间的时间同步。由于NTP使用协调世界时(UTC)时间并确保1ms的准确性，接收器可以准确地处理帧同步操作。
[0176]信令频道信息元素1003可以指示针对ETV服务的IP网络上的的独立信令频道的访问信息。
[0177]更具体地，信令频道URL元素1013作为信令频道信息元素1003的子元素，可以指示信令频道的URL信息。信令频道URL元素1013可以包括作为子元素的更新模式元素1023和轮询周期元素1033。更新模式元素1023可以指示经由IP信令频道获取信息的方法。例如，在拉模式下，接收器可以根据获取拉方法定期执行轮询以获取信息，并且在推模式下，服务器可以根据推方法向接收器发送信息。如果更新模式元素1023是拉模式，则轮询周期元素1033可以根据拉方法指示接收器的基本轮询周期值。然后，接收器可以规定基本轮询周期值，并且以随机的时间间隔向服务器发送请求信号，从而防止请求在服务器中过载。
[0178]服务信息元素1004可以指示关于广播频道的信息。内容id元素1001可以指示当前正被观看者观看的服务的识别符，并且服务信息元素1004可以指示关于广播频道的详细信息。例如，由服务信息元素1004指示的详细信息可以是频道名称、标识或者文本描述。
[0179]更具体地，作为服务信息元素1004的子元素的服务名称元素1014可以指示频道名称，服务标识元素1024可以指示频道标识，并且服务描述元素1034可以指示频道文本描述。
[0180]下面示出根据本发明的实施方式的图10中所示的ACR查询结果的元素的XML架构。
[0181]<xs:complexType name = 〃ACR-ResultType">
[0182]<xs: sequence〉
[0183]〈xs:element name = ^ContentID^type = "xs:anyURl7>
[0184]<xs:element name = 〃NTPTimestamp〃type = 〃xs:unsignedLong〃/>
[0185]〈xs: element name = 〃SignalingChannelInformat1n,
[0186]<xs: complexType>
[0187]<xs: sequence〉
[0188]〈xs:element name = "SignalingChannelURL〃maxOccurs = "unbounded"〉
[0189]<xs: complexType>
[0190]<xs: simpleContent〉
[0191]<xs:extens1n base = 〃xs:anyURI〃>
[0192]<xs:attribute name = ^UpdateMode^>
[0193]<xs: simpleType>
[0194]<xs:restrict1n base = 〃xs:string〃>
[0195]〈xs:enumerat1n value = 〃Pull〃/>
[0196]〈xs:enumerat1n value = 〃Push〃/>
[0197]</xs !restrict1n)
[0198]</xs: simpleType>
[0199]</xs: attribute〉
[0200]<xs:attribute name = ^PolIingCycle^type = 〃xs:unsignedInt〃/>
[0201 ] 〈/xs: extens1n)
[0202]〈/xs:simpleContent〉
[0203]</xs:complexType>
[0204]</xs: element〉
[0205]</ xs: sequence)
[0206]</xs: complexType>
[0207]</xs: element〉
[0208]〈xs:element name = ^ServiceInformat1n^)
[0209]<xs: complexType>
[0210]<xs: sequence〉
[0211]〈xs:element name = "ServiceName"type = "xs: string"/〉
[0212]〈xs:element name = 〃ServiceLogo〃type = 〃xs:anyURI〃min0ccurs = 〃0〃/>
[0213]〈xs:element name = 〃ServiceDescript1n〃type = 〃xs:string〃min0ccurs =〃0〃max0ccurs = 〃unbounded〃/>
[0214]〈/xs: sequence〉
[0215]</xs:complexType>
[0216]</xs: element)
[0217]〈xs: any namespace = ^SSother^processContents = 〃skip〃min0ccurs =〃0〃max0ccurs = 〃unbounded〃/>
[0218]〈/xs: sequence〉
[0219]〈xs:attribute name = 〃ResultCode〃type = 〃xs:string〃use = 〃required〃/>
[0220]<xs:anyAttribute processContents = 〃skip〃/>
[0221 ] 〈/xs:complexType>
[0222]图11是示出根据本发明的实施方式的内容识别符(ID)的结构的图。
[0223]图11示出根据本发明的实施方式的根据ATSC标准的内容ID的句法结构。ATSC内容ID可以被用作用于识别通过接收器接收的内容的识别符。
[0224]ATSC Content Identifier 是由 TSID (Transmitting SubscriberIdentificat1n，发送用户标识)和具有唯一周期的“门牌号码(house number) ”构成的结构。“门牌号码”是本文所限定的TSID的持有者希望的任何号码。号码对于TSID的每个值来说都是唯一的。ATSC内容识别符结构的句法应当如图11中所限定。
[0225]‘TSID’，16比特无符号整数字段，应当包括transport—stream—id的值。美国对于这些值的分配机构是FC。对于墨西哥、加拿大和美国的范围已经由这些国家之间的正式协定来建立。在其它区域中的值由合适的机构建立。
[0226]‘end—of—day’字段，该5比特无符号整数应当被设置成广播日结束的UTC形式的一天的小时，并且在之后的时刻根据unique—for重新使用content—id值。该字段的值应当在0? 23的范围内。值24? 31被保留。请注意期望针对每个广播公司该字段的值是静态的。
[0227]‘unique_for’字段，该9比特整数应当被设置成由end_of_day指示的小时的测量值的四舍五入的天数，其中content_id值不被再分配给不同的内容。该值应当在I至511的范围内。应当禁止值零。值511应当具有“无限地”的特殊含义。请注意期望针对每个广播公司该字段的值基本上是静态的，仅仅当改变门牌编号的方法时变化。还请注意解码器能够处理所存储的contentjl^t为唯一，直至unique_for过期为止，其可以通过在end_of_day将全部所存储的unique_for字段每天减一来实现，直至这些字段达到零为止。
[0228]‘COntent_id’字段，该可变长度字段应当根据门牌号码系统或针对TSID的值的系统而被设置成标示符的值。在通过end_of_day和unique_for字段中的值设定的唯一的时期内，每个该值不应当被分配给不同的内容。该识别符可以是人类可读和/或二进制值的任意组合，并且不需要完全匹配门牌号码的形式，不超过242字节I。
[0229]图12是示出根据本发明的实施方式的利用水印嵌入的接收器的操作的图。
[0230]在本发明中，作为提供支持ACR功能的ETV服务的方法，提出一种利用水印嵌入的方法。图12是示出用于执行ACR功能的接收器的模块之间的利用水印嵌入的操作的图。
[0231]如图12中所示，利用水印嵌入的接收器可以包括移动/手持(M/Η)接收模块1200、互联网模块1201、存储模块1202、外部输入模块1203、水印提取模块1204、应用模块1205、A/V处理模块1206以及显示模块1207。
[0232]如图12中所示，该接收器可以利用水印识别内容提供方(CP)并且处理由所识别的CP提供的增强服务。
[0233]在根据本发明的实施方式的接收器中，水印提取模块1204可以从通过外部输入而由M/Η接收模块1200接收的A/V信号提取水印，并且获取包括在该A/V信号中的内容信息。下面将描述根据本发明的实施方式可以包括在水印中的内容信息。
[0234]所提取的内容信息可以通过应用模块1205向观看者显示，并且观看者可以利用所显示的内容信息通过M/Η或互联网选择性地接收针对增强服务的增强数据。
[0235]尽管未在图12中示出，接收到的增强数据可以被存储在存储模块1202中以用于ACR服务。在这种情况下，内容信息和元数据被存储在存储模块1202中，并且所存储的内容信息和元数据可以被用来在A/V播放时接收相关的增强数据。另选地，接收器可以在A/V播放时通过M/Η调谐访问内容提供方或者新接收增强数据。
[0236]下面将描述图12中所示的每个模块的操作，然后将描述可以从水印提取的内容信息。
[0237]M/Η接收模块1200可以通过M/Η信号从内容提供方接收增强数据。
[0238]互联网模块1201可以经由互联网从内容提供方接收增强数据。
[0239]存储模块1201可以存储包括从内容提供方接收的A/V信息的数据和/或增强数据。如果水印提取模块1204提取水印，则该水印可以被显示并且作为特殊的元数据存储在存储设备中。
[0240]外部输入模块1203可以通过外部输入接收内容提供方的A/V信号。
[0241]水印提取模块1204可以从通过外部输入模块1203接收的A/V信号提取水印。如果内容被存储在TV的存储器中然后被播放，则水印可以在播放时被提取。
[0242]应用模块1205可以接收由水印提取模块1204从包括从内容提供方接收并存储在存储模块1201中的A/V信息的数据和/或增强数据提取的水印，并且利用关于水印的信息来处理包括A/V信息的数据和/或增强数据。
[0243]A/V处理模块1206可以通过音频解码器和/或视频解码器解码A/V信号，以处理从应用模块1205接收的数据。
[0244]显示模块1207可以以屏幕显示(OSD)的方式在接收器的屏幕上显示由A/V处理模块1206处理后的数据。
[0245]下面将描述根据本发明的一个实施方式的内容信息。
[0246]通过水印提取的内容信息可以包括关于内容提供方的信息。更具体地，该内容信息可以包括内容提供方或广播公司的ID信息、内容的ID信息、关于内容的时间的信息、内容生命周期信息和/或关于增强数据的信息。在根据本发明的一个实施方式的利用指纹的ACR服务中，ACR查询结果可以被用作针对经由ACR功能获取的内容的元数据。
[0247]CP ID信息可以是指用于识别内容提供方或广播公司的识别符。根据本发明的实施方式，CP ID信息可以用作主识别符。CP ID信息可以包括用于识别生产者名称和生产者的序号和/或用于识别国家、地区和服务属性(类型)的序列号的集合。根据本发明的一个实施方式，用于ATSC节目和系统信息协议(PSIP)的TS-1d可以被用作该CP ID信息。
[0248]内容ID信息可以是指用于识别内容而非内容提供方的识别符。更具体地，内容ID信息可以包括用于识别内容名称和内容的序号和/或用于识别国家、地区和服务属性(风格)的序号的集合。根据本发明的一个实施方式，用于ATSC PSIP的event-1d可以被用作内容ID信息。
[0249]CP ID信息可以以比内容ID信息的频率高频率包括在水印中，并且可以被构造成更加容易地提取。在这种情况下，CP ID信息可以包括更加压缩的信息或更加详细的信息。
[0250]时间信息可以指示与内容相关的时间信息。更具体地，时间信息可以包括开始时间、持续时间、结束时间和/或表示总的服务播放时间的前置时间(lead time)。根据本发明的一个实施方式，该时间信息可以基于UTC或GPS，并且可以按照诸如ATSCPSIP的STT的其它格式来构造。另外，当诸如同步小部件的服务被提供时，时间信息可以用于显示处理中的同步。另外，该时间信息可以用于通过线缆或卫星个人视频记录器(PVR)机顶盒重新计划的内容。
[0251]内容生命周期信息可以包括关于在其中服务有效的生命周期的信息。
[0252]关于增强数据的信息可以包括关于增强数据的有/无和水印的用途的信息和/或关于用于接收增强数据的路径的信息。更具体地，关于增强数据的信息可以包括关于存在由内容提供方提供的增强数据的信息以及指示水印是否用于用于防止非法复制和分发的许可证、观众评价调查或针对附加服务的内容提供方识别。关于用于接收增强数据的路径的信息可以包括指示使用了 IP网络还是使用了诸如移动设备这样的其它媒介的信息。更具体地，如果经由IP网络接收增强数据，则其可以包括IP地址和/或URL信息，并且如果经由移动设备接收增强数据，则其可以包括频率信息、标准(ATSC MH、DMB、媒体流、DVB-H、NGH等)信息和/或频道信息。
[0253]图13是示出根据本发明的实施方式的水印提取处理的图。
[0254]诸如一般数字TV接收器的接收器1320通过HDMI或部件连接从安装在接收器1320中的电缆或卫星机顶盒1310接收A/V信号。下面，根据图13中所示的本发明的实施方式，将分阶段地描述机顶盒1310和接收器1320中用于提取水印和识别CP的操作。
[0255]如果接收器1320的输入模式被设置成外部输入模式，则接收器1320可以搜索用于识别内容提供方或广播公司的CP IDo如果机顶盒1310开机并调谐到频道，则接收器1302可以检测CP IDo接收器1302可以检测由检测到的内容提供方提供的内容的内容ID和时间信息。如果从机顶盒1310接收到的服务的频道改变，则接收器1320可以根据改变后的频道新搜索用于识别内容提供方的CP ID0
[0256]图14是示出根据本发明的实施方式的水印信息的概述的图。
[0257]如参照图12和图13所描述的，根据本发明的一个实施方式的接收器可以利用水印来识别CP以发送包括在A/V内容中的CP信息。在这种情况下，如果存储在水印中的信息量增加，则其中嵌入有该水印的A/V内容的质量会恶化。因此，在本发明中，为了解决这种问题，提出一种根据存储在水印中的信息的属性对水印进行分析和分级并且将分级后的水印嵌入到A/V内容中的方法。在这种情况下，由于分级后的水印根据所存储的信息的属性而区分并且被嵌入在A/V内容中，所以可以调整关于所插入的水印的信息的量，以防止内容的质量恶化。
[0258]因此，在本发明中，为了根据概述来分级水印，水印可以根据存储在水印中的信息的属性而被分成基本概述水印和扩展概述水印。基本概述水印可以包括识别实时广播节目以执行ACR功能的基本必要的信息。扩展概述水印可以包括附加信息，而不是用于执行ACR功能而基本必要的信息。可以存在多个扩展概述水印，并且可以根据信息的属性对该多个扩展概述水印再次分级。在这种情况下，基本概述水印和扩展概述水印可以根据不同的周期被嵌入到A/V内容中。
[0259]图14是示出将分级后的水印插入到如上所述的A/V内容中的处理的图。
[0260]如上所述，内容提供方1400可以接收诸如视频/音频的原始信号1410，搜索其中要被插入水印的区域(1401)，并且在水印中嵌入与要提供的内容有关的元数据1420。然后，内容提供方1400可以向接收器发送嵌入水印的信号1430。在嵌入水印的信号1430中，原始信号1410和元数据1420可以以水印的形式存储。在一个实施方式中，图14的水印可以包括基本概述水印W11440以及第一扩展概述水印W21450和第二扩展概述水印W21460。
[0261]基本概述水印1440可以包括内容提供方ID元素和扩展指示符。
[0262]内容提供方ID元素可以指示用于识别广播公司或者用于提供内容的CP的信息。
[0263]扩展指示符元素可以指示下一级别的水印，即第一扩展概述水印1450是否被附加地插入。如果扩展指示符元素的值为1，这指示插入了下一级别的第一扩展概述水印1450。
[0264]第一扩展概述水印1450可以包括内容ID元素、时间标记元素和扩展指示符元素。
[0265]内容ID元素可以指示用于识别内容名称或内容的序号信息。
[0266]时间标记元素指示内容的时间信息。
[0267]扩展指示符元素可以指示下一级别的水印，即第二扩展概述水印1460是否如上所述地被附加地插入。如图14中所示，第二扩展概述水印1460可以包括水印插入用途元素、附加信息的URL元素以及扩展指示符元素。
[0268]水印插入用途元素可以指示关于水印插入用途的信息。
[0269]附加信息的URL元素可以指示用于接收服务的附加信息或URL信息。
[0270]扩展指示符元素可以指示是否插入了下一级别的水印。
[0271]如图14中所示，当将分级后的水印被插入到A/V内容中时，内容提供方或广播公司可以根据水印概述区分将水印插入到A/V内容中的次数。例如，由于基本概述水印1440包括广播节目的重要的基本信息，内容提供方或广播公司可以设置插入基本概述水印的次数使得接收器尽快地准确识别信息。
[0272]S卩，内容提供方或广播公司在嵌入水印的信号1430的发送周期期间可以插入比扩展概述水印1450和1460多的基本概述水印1440。因此，接收器可以优选地提取基本概述水印1440，然后必要的话提取扩展概述水印1450和1460。在这种情况下，接收器可以根据扩展指示符元素的值检查扩展概述水印的存在，并提取扩展概述水印。即，接收器根据水印的概述可以有区别地提取有区别地插入的水印，并且高效地存储并管理包括在水印中的信息。
[0273]截至目前，已经描述了本发明的实施方式的利用水印嵌入来提供ACR服务的方法和系统。下面，将详细描述根据本发明的实施方式在内容提供方处在内容中嵌入水印的方法以及在接收器处从内容提取水印的方法。
[0274]将参照图15至图17描述在内容提供方处在视频帧中嵌入水印的方法以及在接收器处从内容提取水印的方法，将参照图18描述在内容提供方处在音频帧中嵌入水印的方法以及在接收器处从内容提取水印的方法。
[0275]图15是示出根据本发明的实施方式在视频帧中嵌入水印的方法的图。
[0276]内容提供方首先把一个视频帧1500细分成子帧1501，搜索细分后的子帧1502，并确定将要合适地嵌入水印的区域。如果确定了将要嵌入水印的区域，则该水印被嵌入到子帧区域(1510)中，并且将子帧进行组合以再次生成一个视频帧(1520)。
[0277]为了在接收器处从嵌入在一个视频帧的整体区域中的视频帧提取水印，首先，接收器将一个视频帧细分成子帧。从细分后的子帧中检测其中可能被嵌入水印的区域。从检测到的子帧区域提取水印，并且比较所提取的水印，以最终确定一个水印。可以通过所确定的水印利用内容信息来下载增强数据。
[0278]图16是示出根据本发明的另一实施方式在视频帧中嵌入水印的方法的图。
[0279]更具体地，图16示出根据本发明的实施方式在视频帧的条形数据区域中嵌入水印的方法。
[0280]如果在一个视频帧的整体区域中嵌入水印，则可以提高水印鲁棒性，但可能增加在接收器处提取水印所必要的处理。因此，通过在视频帧的某些区域中嵌入水印，能够减少在接收器处提取水印所必要的处理，从而提高接收器的操作效率。视频帧的整体区域中的其中将要被嵌入水印的某些区域可以根据发送器/接收器的规则预先限定。下面，根据本发明的实施方式，内容提供方可以在作为视频帧的整体区域的一部分的条形数据区域中嵌入水印。
[0281]当内容提供方向接收器发送内容时，如果内容的图像比例与发送格式不匹配，则可以在屏幕上生成条形数据区域1600。例如，如图16中所示，在将具有16:9的长宽比的视频帧转换成4:3的长宽比的情况下，可以在具有4:3的长宽比的屏幕的上下边缘中生成黑带，使得屏幕的左右边缘不被裁剪。黑带的区域可以是被称为信箱(letterbox)的条形数据区域1600。
[0282]如图16中所示，在其中存在条形数据区域1600的视频帧的情况下，水印可以被嵌入条形数据区域1600中以被发送。在条形数据区域中嵌入水印的方法可以与参照图15描述的在视频帧中嵌入水印的处理相同地执行。
[0283]更具体地，内容提供方可以搜索视频帧的将被嵌入水印的条形数据区域1600，(1600)并且在条形数据区域1600中嵌入水印(1620)。
[0284]为了提取嵌入在视频帧的某些区域的水印，首先，接收器将一个视频帧细分成子帧。从细分后的子帧中检测到其中可能嵌入水印的区域。根据图16中所示的本发明的实施方式，接收器可以从细分后的子帧中检测条形数据区域。从检测到的子帧区域提取水印，并且比较所提取的水印，以最终确定一个水印。可以通过所确定的水印利用内容信息来下载增强数据。
[0285]图17是示出根据本发明的另一实施方式在视频帧中嵌入水印的方法的图。
[0286]更具体地，图17示出将包括不同内容信息(或元数据)的多个水印嵌入到一个视频帧的不同区域中的方法。
[0287]例如，如图17中所示，包括CP ID信息的水印可以被嵌入到位于屏幕的右上侧的标识(logo)区域1700中，并且包括内容ID和时间标记信息的水印可以被嵌入到相同屏幕的中心区域1701中。
[0288]根据本发明的实施方式，将包括不同内容信息的多个水印嵌入到一个视频帧中的方法可以主要被分成两种方法。
[0289]多个不同的水印可以被嵌入到视频帧的不同区域1700和1701中。此时，可以根据发送器/接收器的规则预先限定视频帧的将被嵌入水印的两个或多个区域1700和1701。
[0290]另选地，可以首先嵌入包括关于视频帧的不同区域1700和1701的信息的单独水印。可以通过单独水印来检测其中将要被嵌入包括内容信息的水印的不同区域1700和1701，并且水印可以分别嵌入在区域1700和1701中。单独水印可以嵌入在视频帧的特定区域或标识部分中并且可以根据发送器/接收器的规则预先限定。
[0291]如果接收到的视频帧包括根据区域而具有不同内容信息的水印，则首先，接收器通过另一路径或者根据发送器/接收器的规则获取关于其中嵌入有该水印的区域的信息。利用所获取的信息，从视频帧的每个区域提取水印。根据图17中所示的本发明的实施方式，可以从标识区域1700提取包括关于内容提供方的信息的水印，并且可以从屏幕的中心区域1701提取时间信息。另选地，如果从所提取的水印提取不同水印的信息(例如，关于其中嵌入有水印的信息)被包括，则能够利用该信息提取不同的水印。
[0292]图18是示出根据本发明的实施方式在音频帧中嵌入水印的方法的图。
[0293]更具体地，图18示出在音频帧中嵌入一个水印的处理。
[0294]原始音频信号被分成具有恒定长度(1800)的帧，并且划分后的音频帧被细分成子帧(1801)。利用细分后的子帧，可以搜索其中将被嵌入水印的区域(1802)。例如，可以搜索比人耳敏感的4kHz高的频带，并且该频带可以被确定为水印嵌入区域。水印被嵌入在搜索到的区域中(1803)，并且子帧被重新组合成一个音频信号(1803)。
[0295]另外，根据本发明的实施方式，多个水印可以基于图18中所示的水印嵌入处理而被嵌入到音频信号中。嵌入方法可以包括分别将水印嵌入到两个或更多不同频带以及将子帧重新组合成一个音频信号的方法以及在连续的音频帧中嵌入一个水印并且将其它水印嵌入到不同频带的方法。
[0296]根据本发明的上述实施方式，如果接收到其中嵌入有水印的音频信号，则接收器可以首先将音频信号划分成具有恒定长度的帧以从音频信号提取水印。划分后的帧可以被细分成子帧，并且可以从子帧检测水印提取区域。从检测到的区域提取水印。如果在音频信号中嵌入了多个水印，则可以以根据发送器/接收器的规则而预先限定的两个或更多频带从接收到的音频信号提取水印。另选地，可以从连续的音频信号提取一个水印，并且可以从根据发送器/接收器的规则而预先限定的不同频带的信号提取其它信号。另外，根据参照图15至图18描述的嵌入水印的方法的本发明的实施方式，水印可以被嵌入到音频内容和视频内容这两者中。
[0297]如果包括相同内容信息的水印可以被嵌入到视频帧和音频帧这两者中，则相同的水印可以以预定的周期反复地被嵌入到视频帧和音频帧中。根据该方法，由于接收器可以同时从其中嵌入有水印的视频帧和音频帧提取相同的水印，因此能够提高提取水印的结果的准确性并且能够降低用来最终获取准确结果而消耗的时间。
[0298]另选地，水印可以根据包括在水印中的内容信息进行划分，并且划分后的水印可以被嵌入到视频帧和音频帧中。例如，包括在水印中的内容信息被划分成用于识别广播节目的基本信息，例如CP ID和内容ID、以及附加信息。基本信息可以被嵌入到视频帧中，并且附加信息可以被嵌入到音频帧中。相反地，基本信息可以被嵌入到音频帧中，附加信息可以被嵌入到视频帧中。由于限制了嵌入在一个视频帧或音频帧中的信息的量，如果利用该方法嵌入水印，则能够增加在预定的时间期间嵌入的元数据的量。
[0299]图19是示出根据本发明的实施方式嵌入概述的水印的方法的图。
[0300]如参照图14所描述的，由于A/V内容的质量可以随着存储在水印中的内容信息的量的增加而恶化，如果水印根据存储在水印中的信息的类型进行分级，则能够在保持内容的质量的同时高效利用水印。
[0301]根据本发明的实施方式，在根据存储在水印中的信息的属性对水印概述之后，可以不同地设置在预定周期期间在内容帧中嵌入水印的次数。
[0302]例如，存储在水印中的信息可以被划分成用于识别广播节目的基本信息以及附加信息，或具有短的变化周期的信息和具有长的变化周期的信息。可以增加在预定周期期间将包括基本信息和/或具有短的变化周期的信息嵌入到帧中的次数，并且可以减少在预定周期期间将包括附加信息和/或具有长的变化周期的信息嵌入到帧中的次数。
[0303]更具体地，如图19中所示，包括识别诸如CP ID和内容ID的节目所必要的信息在内的水印可以被嵌入到标识区域1900中，并且包括诸如URL信息的附加信息的水印可以被嵌入到帧的其它特定区域1901中。在这种情况下，标识区域1900的水印是识别节目所必要的数据，因此标识区域1900的水印可以被嵌入到全部视频帧1910、1920和1930中，并且用于提供附加信息的、帧的特定区域1901的水印可以被嵌入到两个帧1910和1930中一次。
[0304]图20和图21示出根据本发明的实施方式嵌入和提取水印的方法。
[0305]图20是示出根据本发明的实施方式在连续帧中嵌入水印的方法的图。
[0306]图21是示出根据本发明的实施方式提取插入到连续帧中的水印的方法的图。
[0307]可以嵌入到一个A/V帧中的内容信息的量受到限制。根据图20和图21中所示的本发明的实施方式，水印可以包括大量的内容信息。
[0308]如图20中所示，内容提供方可以将包括内容信息的水印嵌入到连续帧中。为了指示内容信息的开始和结束，在指示内容信息的开始信息的开始标签2001和结束标签2002被嵌入到内容信息中之后，该内容信息可以被划分成子内容信息2003。包括子内容信息2003的水印可以分别被嵌入到连续的A/V帧200中。另外，如果在预定周期期间水印被反复地嵌入到连续的A/V帧2000中，则接收器可以高效地提取水印。
[0309]如图21中所示，接收器可以从嵌入有水印的连续帧提取水印。首先，接收器提取嵌入到连续的A/V帧中的水印。可以从所提取的水印中检测内容信息的开始标签2101和结束标签2102。如果从开始标签2101获取了内容信息的开始信息，则从在检测到开始标签2101之后接收到的A/V帧提取水印，以获取子内容信息2103，并所获取的子内容信息2103被组合。如果从结束标签2102获取了内容信息的结束信息，则完成结合子内容信息的处理，以获取一条内容信息。
[0310]图22是示出根据本发明的实施方式在3D视频帧中嵌入水印的方法的图。
[0311]可以利用两个照相机通过获取左图像和右图像实现全3D视频图像，使得左眼能够观看左图像，使得右眼能够观看右图像。在本发明中，提出一种在3D视频帧中嵌入水印以及从3D视频帧提取水印的方法。
[0312]如图22中所示，3D视频帧可以包括左帧2200和右帧2201。内容提供方可以将内容信息(或元数据)2202嵌入到左帧2200和右帧2201中并生成左帧和右帧，在该左帧中嵌入水印，(下文称为嵌入水印的左帧)2203，在该右帧中嵌入水印，(下文称为嵌入水印的右帧)2204。
[0313]可以生成并发送标准清晰度图像(SD)或高清晰度(HD)图像。
[0314]首先，内容提供方可以仅在左帧2200或右帧2201中嵌入水印，并且向接收器发送嵌入水印的左右帧。接收器可以从嵌入水印的左帧2203或嵌入水印的右帧2204提取水印。在这种情况下，如参照图15至图17所描述的，可以应用在视频帧中嵌入水印的方法以及从视频帧提取水印的方法。可以根据发送器/接收器的规则预先限定嵌入水印的视频帧。
[0315]第二，内容提供方可以将包括相同内容信息的水印嵌入到左帧2200或右帧2201中，并且向接收器发送嵌入水印的左帧和右帧。接收器可以从各个嵌入水印的左帧2203或嵌入水印的右帧2204提取水印。如果水印相同或者如果水印之间的差异在允许的误差范围之内，则比较并校正所提取的水印。在这种情况下，参照图15至图17描述的方法适用于将水印嵌入到左帧2200或右帧2201中的方法以及提取所嵌入的水印的方法。可以利用相同的方法或不同的方法在左帧2200或右帧2201中嵌入水印。尽管当接收器提取水印时该方法可能增加复杂性，但是可以增加水印提取的鲁棒性。
[0316]第三，内容提供方可以在左帧2200或右帧2201中嵌入不同的水印，并且向接收器发送嵌入水印的左右帧。接收器可以从各个嵌入水印的左帧2203或嵌入水印的右帧2204提取水印。所提取的水印可以包括一条内容信息。另选地，包括在所提取的水印中的内容信息可以被组合，以生成一条新内容信息。在后者的情况下，数量比可以经由一个视频帧发送的内容信息的数量多的内容信息可以被嵌入到视频帧中。另选地，可以被包括在一个视频帧中的内容信息可以被划分并且被嵌入到左帧2200或右帧2201中。在这种情况下，能够降低图像质量恶化的可能性。
[0317]图23是示出根据本发明的实施方式的ACR服务提供系统的结构的图。
[0318]更具体地，图23示出根据本发明的一个实施方式的利用水印嵌入技术和指纹嵌入技术这两者来识别广播内容的ACR服务提供系统。
[0319]在水印嵌入中，如果大量的内容信息被嵌入到水印中，则嵌入到一个帧中的内容的识别率较高，但内容的质量会恶化。S卩，所嵌入的元数据的量受到限制。
[0320]在指纹嵌入中，内容的质量不受影响，但是用于识别内容的ACR服务器是必需的。另外，消耗用来识别内容的时间和内容识别结果依赖于参考集的大小。
[0321]根据图23中所示的本发明的实施方式，如果通过水印嵌入技术和指纹嵌入技术的组合来识别广播内容，则能够在解决两种技术的问题的同时高效提供ACR服务。
[0322]本发明包括利用两种技术来识别当前观看的广播节目的方法。诸如内容提供方或广播公司的识别符这样的用来识别节目并且需要被最准确地识别的元数据可以被嵌入到广播A/V内容中，并且可以被发送。
[0323]下面将详细描述图23中所示的ACR服务提供系统的部件之间的机制。
[0324]如果内容提供方2300向MVPD 2301发送嵌入水印的A/V内容和增强数据(2310、2330)，则接收器2303可以通过机顶盒2302接收该A/V内容，但不可以接收增强数据(2320)。因此，为了使接收器2303能够通过另一路径接收该增强数据，内容提供方2300可以向ACR服务器2304发送A/V内容的附加信息并且可以向应用服务器2305发送增强数据(s250) (2340)。A/V内容的附加信息可以是用于向接收器2303传送与A/V内容相关的增强数据的信息并且可以包括内容ID、时间标记、URL等。
[0325]接收器2303的水印提取器2306可以从接收到的A/V内容提取水印，并且同时，指纹提取器2307可以从A/V内容提取指纹签名。接收器2303可以向ACR服务器2304发送包括被包括在水印和指纹签名中的内容信息在内的查询(2360)，并且从ACR服务器2304获取A/V内容的附加信息(2360)。然后，接收器2303可以利用A/V内容的附加信息从应用服务器2305接收增强数据(2380)。通过将水印嵌入结果包括在查询中，能够降低用来识别ACR服务器处的内容消耗的时间并提高ACR服务器的内容识别准确性。
[0326]图24是示出根据本发明的实施方式的利用广播公司标识提供ACR服务的方法的图。
[0327]图25是示出根据本发明的实施方式的广播公司标识的图。
[0328]图26是示出根据本发明的实施方式的利用广播公司标识的ACR服务的图。
[0329]内容提供方(或广播公司)具有指示其内容的标识。例如，内容提供方可以具有图25中所示的标识。广播公司或内容提供方可以将标识嵌入到如图26中所示的屏幕的右上侧、左上侧、右下侧或左下侧，以显示内容。即使当屏幕上显示的视频场景变化时，该标识也不改变并且持续进行显示。在本发明中，提出一种利用标识的属性自动识别在屏幕的特定部分中持续显示的信息的ACR服务方法。
[0330]如图24中所示，根据本发明的实施方式，水印可以被插入到标识中以提供ACR服务。接收器可以识别该标识，以获取指示该标识的内容提供方信息，并且访问该内容提供方以接收服务，从而提供ACR服务。下面将详细描述利用标识来提供ACR服务的方法。
[0331 ] 首先，接收器可以通过标识识别步骤2401和标识比较步骤2402获取标识信息。接收器可以作为比较结果获取内容提供方信息以识别内容提供方(2403)并访问内容提供方服务器(2404)。可以从内容提供方服务器接收内容的附加信息(2405)以提供附加服务器(2406)ο
[0332]接收器的标识识别步骤2401和标识比较步骤2402可以通过将由接收器识别出的标识与预先存储在接收器中的内容提供方的标识比较来执行。
[0333]关于所存储的标识的信息是通过IP网络或MH由接收器接收并存储的信息或者是存储在接收器中的默认信息。标识的新版本信息可以被维持。在经由IP网络或MH接收到信息的情况下，可以通过IP网络或MH持续地接收标识信息来维持新标识信息，并且在默认信息的情况下，可以通过持续更新来维持新标识信息。
[0334]在标识比较步骤2402中，如果将所识别的标识与存储在接收器中的全部标识信息比较，则信息的量较大。因此，对接收器带来负担。根据本发明的实施方式，由于提取、存储和比较可以根据标识的详细性质来执行，因此能够克服该局限。例如，可以识别诸如标识颜色、字母(SBS、CNN等)和轮廓的标识属性，以执行比较。如果使用轮廓，可以根据坐标划分其中显示标识的空间，以利用坐标属性识别标识。
[0335]图27是示出根据本发明的实施方式的利用标识和水印的ACR服务提供方法的图。
[0336]如图27中所示，在ACR服务中，接收器可以提取标识信息2701或水印2702，以获取关于内容提供方的信息并通过IP网络或MH接收由内容提供方提供的附加服务。
[0337]如上所述，如果水印被嵌入在内容中，则可以改变内容的数据。因此，在本发明中，提出了一种在包括在内容中的标识区域中嵌入水印的方法。
[0338]下面将详细描述图25中所示的根据本发明的实施方式在针对ACR服务的接收器处利用标识信息和水印的方法。
[0339]如上所述，根据本发明的实施方式的接收器可以在内容被播放时通过嵌入在A/V帧数据的特定字段中的特定算法提取并利用包括预定量的内容信息的水印。例如，接收包括每秒30帧的视频内容的接收器可以从M个帧提取包括与每个帧中的特定字段或特定位置相对应的N个比特的数据在内的水印。在这种情况下，所提取的水印数据的总量可以成为N*M个比特。如果嵌入了水印的帧的数目增加，则待提取的水印数据的量增加。因此，用来在接收器处提取水印而消耗的时间可能增加，并且由该接收器处理的A/V内容的质量可能退化。
[0340]因此，在本发明中，提出了一种在包括在视频帧中的标识区域中嵌入水印的方法。标识区域被包括在全部的视频帧中，并且即使当播放画面改变时也可以在屏幕上的相同位置显示。因此，即使当数据的量较大时，如果在标识区域中嵌入水印，则能够减少用来提取水印而消耗的时间并降低A/V内容的质量退化的可能性。
[0341]下面将描述根据本发明的一个实施方式在标识中嵌入水印的方法。根据本发明的实施方式在标识中嵌入水印的方法可以包括在标识的预定位置嵌入条形码数据的方法、利用标识信息的元数据包作为水印的方法以及在标识的一部分图像数据中嵌入水印的方法。
[0342]在在标识的预定位置处嵌入条形码数据的方法的情况下，接收器可以将位于该特定位置处的条形码数据识别为水印。在这种情况下，不显示该条形码数据。
[0343]在利用标识信息的元数据包作为水印的方法中，在维持标识的图像数据的初始形式的同时，描述标识的元数据包被用作水印。在这种情况下，元数据包可以包括CPID、内容ID、时间信息等。
[0344]在将水印嵌入在标识信息中的方法中，利用标识的部分图像数据的比特组合N个标识帧，并且在标识图像数据中嵌入N个水印比特。在这种情况下，包括在水印中的内容信息或元数据如上所述。
[0345]图28是示出根据本发明的另一实施方式的ACR服务处理系统的图。
[0346]图28是示出与图27不同的、利用从视频内容提取标识数据、识别该标识数据并且识别关于由该标识数据指示的内容提供方的信息的方法的系统，作为利用标识和水印来处理ACR服务的系统的图。图28的ACR服务处理系统可以包括机顶盒(STB) 2800、终端2801、标识服务器2802、元数据服务器2803、应用查找服务器2804和/或应用服务器2805。根据本发明的一个实施方式的接收器可以包括STB 2800、终端2801以及标识服务器2808，或者可以包括元数据服务器2803、应用查找服务器2804和应用服务器2805中的至少一个，这可以根据设计者的意图改变。
[0347]如图28中所示，使用标识和水印的ACR服务提供装置可以包括机顶盒(STB) 2800、终端2801、标识服务器2802、元数据服务器2803、应用查找服务器2804和/或应用服务器2805。这里，标识服务器2802、元数据服务器2803、应用查找服务器2804和/或应用服务器2805可以作为内部部件被并入在终端中或者可以独立于终端提供。
[0348]根据本发明的一个实施方式的ACR服务接收装置(接收器)可以包括STB 2800、终端2801以及标识服务器2808，或者可以包括元数据服务器2803、应用查找服务器2804和应用服务器2805中的至少一个，这可以根据设计者的意图改变。
[0349]更具体地，图28示出在根据本发明的实施方式的接收器通过STB 2800接收广播的情况下，用于利用标识数据和水印接收与广播内容有关的附加数据(或增强数据)的接收器的部件之间的关系。标识数据指示内容提供方并且对应于诸如在内容的特定区域中显示的广播公司符号的标识图像。下面将描述图28中所示的部件。
[0350]终端2801可以从通过STB 2800接收的广播内容的初始数据的视频帧识别并提取标识数据。根据本发明的一个实施方式的标识数据对应于在内容的特定区域中显示的标识图像。终端2801可以向标识服务器2802发送所提取的标识数据和频道信息搜索信号，并且从标识服务器2808接收频道(经由其发送内容)的频道信息。根据本发明的一个实施方式的频道信息搜索信号可以基于所提取的标识数据来生成并且可以是请求句法。另外，根据本发明的一个实施方式的频道信息可以包括指示由标识数据指示的内容提供方的信息。另外，终端2801可以从广播内容的音频帧提取水印并且获取广播内容的节目信息。根据本发明的实施方式的节目信息可以包括内容ID信息和/或时间信息。
[0351]终端2801可以生产利用所获取的频道信息和/或节目信息来获取URL地址和/或IP地址的请求。终端2801可以向应用查找服务器2804发送该请求以获取URL地址和/或IP地址，并且利用所获取的URL地址和/或IP地址访问应用服务器2805，以接收内容的附加数据。
[0352]标识服务器2802可以从元数据服务器2803接收与标识数据相关的元数据并且在数据库(DB)中存储并管理该元数据。该元数据可以包括由标识数据指示的内容的频道信息。
[0353]标识服务器2802可以从终端2801接收标识数据和频道信息搜索信号，并且针对与接收到的标识数据相关的频道信息搜索该DB。
[0354]根据本发明的实施方式的标识服务器2802可以将接收到的标识数据与预先存储在DB中的标识数据进行比较，并确认由接收到的标识数据指示的内容提供方。更具体地，标识服务器2802可以确定接收到的标识数据是否等于存储在DB中的标识数据。如参照图24所述，根据本发明的一个实施方式的标识服务器2802可以比较标识图像、标识图像颜色、与标识数据相对应的文本和/或轮廓，并确定与接收到的标识数据相对应的标识图像是否等于所存储的标识数据的标识图像。
[0355]如果接收到的标识数据等于存储在DB中的标识数据，则由接收到的标识数据指示的内容提供方等于由存储在DB中的标识数据所指示的内容提供方。因此，标识服务器2802可以从DB获取与存储在和接收到的标识数据相同的DB中的标识数据相关的元数据。如上所述，元数据可以包括频道信息。
[0356]标识服务器2802可以向终端2801发送与标识数据相关的元数据的频道信息。如果在标识服务器2802的DB中不存在频道信息，则标识服务器2802可以从元数据服务器2803接收频道信息。
[0357]元数据服务器2803可以更新与标识数据相关的元数据。更具体地，元数据服务器2803可以添加、更新和/或删除元数据并且定期地向标识服务器2802的DB发送更新后的元数据，以更新标识服务器2802的DB。元数据服务器2803可以由内容提供方(广播公司或第三方)管理，并且终端2801可以由造商(接收器制造商或服务提供平台(SDP)服务器)管理，其可以根据用户的意图发生变化。
[0358]应用查找服务器2804可以分析从终端2801接收的请求并且获取包括在请求中的频道信息和/或节目信息。通过分析后的结果，应用查找服务器2804可以确定是否存在针对与频道信息和/或节目信息相对应的应用。如果针对内容的应用存在，则应用查找服务器2804可以向终端2801发送应用服务器2805的URL地址和/或IP地址。
[0359]应用服务器2805可以管理针对内容的应用和/或关于该应用的数据。
[0360]如上所述，终端2801可以利用标识数据和水印生成请求，并通过所生成的请求从应用查找服务器接收URL地址和/或IP地址。然后，终端2801可以利用接收到的URL地址和/或IP地址访问应用服务器2805，并下载应用。应用服务器2805可以管理由接收器下载的应用。然后，接收器可以通过应用接收内容的附加数据。
[0361]如果接收器无法访问音频信号并因此无法提取嵌入在音频帧中的水印，则根据本发明的实施方式的终端2801可以仅利用从视频帧提取的标识数据生成请求。更具体地，根据本发明的实施方式的终端2801可以向应用查找服务器2804发送包括通过标识数据获取的频道信息在内的请求。根据本发明的一个实施方式的请求可以使用HTTP协议。应用查找服务器2804可以利用包括在HTTP的报头中的数据字段值来确认接收到的请求的时间信息。然后，应用查找服务器2804可以利用频道信息和/或时间信息搜索该终端2801可以访问的应用的URL地址和/或IP地址，并向接收器发送URL地址和/或IP地址。然后，接收器可以通过URL地址和/或IP地址接收附加数据。
[0362]如果接收器无法访问音频信号并因此无法提取嵌入在音频帧中的水印，则根据本发明的实施方式的终端2801可以利用包括在视频帧中的符号数据生成请求。根据本发明的一个实施方式的符号数据对应于在屏幕上显示的符号图像，并且可以表示与内容相关的节目。更具体地，如果符号数据被包括在视频帧中，则终端2801可以提取该符号数据并且利用标识数据和该符号数据生成请求。下面将描述利用符号数据的ACR服务系统。
[0363]如果接收器无法访问视频信号并因此无法提取嵌入到视频帧中的水印，则根据本发明的实施方式的终端2801可以仅利用从音频帧提取的水印来生成请求。终端2802可以生成包括从水印获取的信息在内的请求，并向应用查找服务器2804发送该请求。然后，应用查找服务器2804可以利用接收到的请求搜索该终端2801可以访问的应用的URL地址和/或IP地址，并向接收器发送URL地址和/或IP地址。然后，接收器可以通过URL地址和/或IP地址接收附加数据。
[0364]图29示出了根据本发明的实施方式利用标识和/或水印的ACR服务提供装置的操作的概念。
[0365]图29示出利用参照图28所描述的标识和水印提供ACR服务的ACR服务提供装置的操作，即终端2901、标识服务器2902、元数据服务器2903、应用查找服务器2904以及应用服务器2905之间的操作的概念。
[0366]下面将描述部件之间的操作。
[0367]首先，终端2901可以从视频帧提取标识数据。然后，终端2901可以向如上所述的标识服务器2902发送标识数据和频道信息搜索信号。
[0368]标识服务器2902可以根据终端的请求信号来搜索频道信息，并向终端2901发送搜索到的频道信息。
[0369]元数据服务器2903可以定期更新与标识数据相关的元数据，并向标识服务器2902发送更新后的元数据。元数据服务器2903可以在接收标识数据之前或者在接收标识数据之后更新元数据。
[0370]另外，终端2901可以从音频帧提取水印并且从该水印获取节目信息。根据本发明的实施方式的终端2901可以同时或顺序地执行从视频帧提取标识数据的处理和从音频帧提取水印的处理，其可以根据设计者的意图改变。
[0371]然后，终端2901可以利用从标识数据提取的频道信息和/或从水印提取的节目信息生成请求。终端2901可以通过HTTP协议向应用查找服务器2904发送该请求。
[0372]应用查找服务器2904可以分析接收到的请求，搜索能够提供频道和/或节目的附加数据的应用的URL地址和/或IP地址，并且向终端2901发送该URL地址和/或IP地址。
[0373]终端2901可以通过接收到的URL地址和/或IP地址访问应用服务器2905，并下载应用。所下载的应用可以由应用服务器2905管理，并且附加数据可以通过所下载的应用被发送到终端2901。
[0374]图30是示出根据本发明的另一实施方式的ACR服务处理系统的图。
[0375]图30示出根据参照图29所描述的操作的ACR服务处理系统，该ACR服务处理系统可以包括机顶盒(STB)、终端、标识服务器、元数据服务器、应用查找服务器和/或应用服务器。终端可以进一步包括标识提取器3001和/或水印提取器3002。如图30中所示，与视频帧中包括的标识数据相对应的标识图像3000可以被包括在所显示的内容的特定部分中。如参照图28和图29所描述的，终端可以向应用查找服务器发送请求3003。图30中所示的基本部件等于参照图28所描述的部件，并且将省略与参照图28所描述的部件的操作相同的这些部件的操作的描述。
[0376]如图30中所示，终端可以处理包括在经由独立路径从STB接收的广播信号中的视频信号和音频信号。下面将集中于终端中包括的标识提取器3001和/或水印提取器3002。
[0377]标识提取器3001可以从视频帧中自动识别并提取与标识图像3000相对应的标识数据。更具体地，标识提取器3001可以识别视频帧的特定区域并且提取位于该特定区域中的标识数据。标识提取器3001可以通过图像处理识别与所提取的标识数据相对应的标识图像3000。
[0378]终端可以向标识服务器发送所提取的标识数据，以便标识服务器将由标识提取器3001提取的标识数据与存储在标识服务器的DB中的标识数据比较。将参照图28描述详细的比较方法。如果与所提取的标识数据相对应的标识图像3000等于所存储的标识数据的标识图像，则标识服务器可以搜索标识数据的频道信息并向终端发送该频道信息。根据本发明的一个实施方式，频道信息可以被表示成“频道号码(主一次)”？ “短号码”格式。
[0379]标识服务器可以定期从元数据服务器接收更新后的标识数据，并持续地更新标识服务器的DB。如果当前在标识服务器的DB中不存在标识数据的频道信息，则标识服务器可以从元数据服务器接收频道信息。
[0380]水印提取器3002可以识别并提取插入到音频帧中的水印。插入到音频帧中的水印可以包括节目信息，其中包括内容ID信息和/或时间信息，并且进一步可以包括参照图12所描述的CP ID信息、内容生命周期信息，这些信息可以根据设计者的意图改变。因此，水印提取器3002可以从所提取的水印获取节目信息。
[0381]终端可以利用从音频帧的水印提取的节目信息和从视频帧的标识数据提取的频道信息来生成请求，并且将该请求发送到应用查找服务器。
[0382]根据本发明的一个实施方式的请求3003可以由频道信息、节目信息和应用服务器的URL地址的组合构成。图 30不出了 http://www.0htv.0rg ? ch = 7-l_KBS2HD&ContentID=12-2345&...，其是根据本发明的一个实施方式的请求3003。
[0383]图30中所示的请求是这样的请求，在该请求中，频道信息和节目信息被表示成参数的形式，http://www.0htv.0rg ?可以指示应用查找服务器2904的URL地址，“ch =7-1-KBS2HD&”可以指示频道信息并且“ContentID = 12-2345&...”可以指示节目信息。
[0384]应用查找服务器可以搜索能够利用从终端接收到的请求的参数获取附加数据的应用的URL地址和/或IP地址，并且可以将搜索到的结果发送到终端。
[0385]图31是示出根据本发明的另一实施方式的ACR服务处理系统的图。
[0386]图31示出用于通过利用标识数据和符号数据生成的请求来接收附加数据的ACR服务处理系统。图31中所示的ACR服务处理系统可以包括与图30相同的机顶盒(STB)、终端、标识服务器、元数据服务器、应用查找服务器和/或应用服务器。图31的ACR服务处理系统可以进一步包括符号提取器3102和/或内容元数据服务器3103。
[0387]图31中所示的基本部件等于参照图28和图30所描述的部件，并且将省略其描述。下面将集中于符号提取器3102和/或内容元数据服务器3103。
[0388]如图31中所示，符号提取器3102可以被并入到终端中。内容元数据服务器3013可以被并入到终端中或者被定位为与终端分开，其可以根据设计者的意图改变。如图31中所示，符号图像3100和/或标识图像3101可以被包括在所显示的内容的特定区域中。
[0389]如参照图28所描述的，如果根据本发明的实施方式的接收器无法访问音频信号，则终端可以获取包括在视频帧中的符号数据并且利用标识数据和符号数据生成请求。
[0390]更具体地，图31中所示的符号提取器3108可以从视频帧提取与符号图像3100相对应的符号数据，并且利用图像处理方法识别与所提取的符号数据相对应的符号图像3100。然后，终端可以向内容元数据服务器3103发送所识别的符号图像3100或者与符号图像3100相对应的符号数据。
[0391]内容元数据服务器3103可以获取由符号图像3100所指示的节目的节目信息，并将该节目信息发送到终端。内容元数据服务器3103可以从元数据服务器接收包括与符号图像3100相关的节目信息在内的元数据并且在DB中存储并管理该元数据。内容元数据服务器3103可以搜索内容元数据服务器3103的DB以获取节目信息，并且在DB中不存在该节目信息的情况下从元数据服务器接收节目信息。如上所述，根据本发明的实施方式的节目信息可以包括内容ID信息和/或时间信息。包括节目信息在内的元数据可以由元数据服务器添加、校正、更新和/或删除。可以定期向内容元数据服务器3103的DB发送更新后的元数据。
[0392]如图31中所示，终端可以从视频帧提取标识数据。如图30中所描述的，包括在终端中的标识提取器可以从视频帧提取与标识图像3103相对应的标识数据，向标识服务器发送该标识数据，并且从标识服务器接收该标识数据的频道信息。
[0393]上述标识提取器和符号提取器3102的操作可以被顺序地或同时执行，并且可以根据设计者的意图改变。终端可以生成包括利用符号数据获取的节目信息和/或利用标识数据获取的频道信息在内的请求。利用所生成的请求在终端处接收附加数据的方法与参照图29所描述的方法相同，并且将省略其说明。
[0394]图32是示出根据本发明的实施方式的ACR服务接收装置的图。
[0395]如图32中所示，根据本发明的实施方式的ACR服务接收装置可以包括接收模块3201、提取模块3202、比较模块3203、获取模块3204和/或生成模块3205。
[0396]图32中所示的接收模块3201、提取模块3202、获取模块3204和/或生成模块3205可以被并入到参照图28至图31所描述的终端2801中，并且图32中所示的比较模块3203可以被并入到参照图28至图31所描述的标识服务器2802中，其可以根据设计者的意图改变。下面将描述图32的模块。
[0397]接收模块3201可以接收包括内容的数字服务信号。另外，接收模块3201可以接收用于接收内容的附加数据的URL地址和/或IP地址，参照图28至图31描述了接收URL地址和/或IP地址的详细处理。
[0398]提取模块3202可以提取包括在接收到的内容的每个视频帧中的标识数据。标识数据可以被包括在视频帧的特定区域中，并且对应于如参照图28至图31所描述的内容的特定区域中显示的标识图像。提取模块3202可以从视频帧的特定区域提取水印。在本发明的实施方式中，从视频帧提取的水印可以包括频道信息和/或节目信息。
[0399]比较模块3203可以将由提取模块3202提取的标识数据与存储在ACR服务接收装置3200中的标识数据比较。参照图28至图31描述了将所提取的标识数据与所存储的标识数据比较的详细方法。
[0400]获取模块3204可以利用比较模块3203的比较结果从与标识数据相关的元数据获取频道信息。
[0401 ] 获取模块3204可以利用由接收模块3201接收到的URL地址和/或IP地址获取内容的附加信息。
[0402]生成模块3205可以利用由获取模块3204获取的频道信息来生成请求。如参照图28至图31所描述的，生成模块3205可以利用所获取的标识数据的频道信息和/或包括在音频帧中的水印的节目信息来生成请求。如果音频帧不可访问，则生成模块3205可以仅利用所获取的标识数据的频道信息或包括在视频帧中的符号数据来生成请求。如果视频帧不可访问，则生成模块3205可以仅利用包括在音频帧中的水印的节目信息来生成请求。
[0403]接收模块3201可以利用由生成模块3205生成的请求来接收URL地址和/或IP地址。获取模块3204可以根据由接收模块3201接收到的URL地址和/或IP地址通过IP网络来获取附加数据。
[0404]尽管未在图32中示出，根据本发明的实施方式的ACR服务接收装置3200可以进一步包括水印提取模块、节目信息获取模块、符号提取模块、处理模块和/或更新模块。水印提取模块、节目信息获取模块和/或符号提取模块可以被包括在参照图28至图31所描述的终端2801中。处理模块可以被包括在参照图28至图31所描述的终端2801或内容元数据服务器3103中。更新模块可以被包括在参照图28至图31所描述的终端2801或元数据服务器2803中。这可以根据设计者的意图改变。
[0405]根据本发明的实施方式的水印提取模块可以从由接收模块3201接收的内容的音频帧提取水印。然后，节目信息获取模块可以获取所提取的水印中包括的节目信息。如参照图28所描述的，根据本发明的实施方式的节目信息可以包括内容ID信息和/或时间信息。参照图30描述了在终端处从音频帧提取水印的详细方法。
[0406]如果符号数据被包括在视频帧中，则根据本发明的实施方式的符号提取模块可以从视频帧提取符号数据。然后，根据本发明的实施方式的节目信息获取模块可以从所提取的水印获取节目信息。符号数据可以被包括在每个视频帧的特定区域中。参照图31描述符号提取模块和/或节目信息获取模块的详细操作。
[0407]根据本发明的实施方式的更新模块可以定期更新与标识数据相关的元数据。如参照图28至图31所描述的，元数据服务器2803可以持续地添加、更新和/或删除存储在元数据查找服务器2804中的标识数据。
[0408]图33是示出根据本发明的实施方式的ACR服务发送装置的图。
[0409]如图33中所示，根据本发明的实施方式的ACR服务发送装置可以包括生成模块3301、插入模块3302和/或发送模块3303。
[0410]生成模块3301可以生成包括内容的数字服务信号。更具体地，根据本发明的实施方式所生成的内容可以包括视频内容和音频内容这两者。生成模块3301可以生成待嵌入到音频帧和/或视频帧中的水印。生成模块3301可以生成指示内容的节目的符号数据。
[0411]插入模块3302可以将标识数据插入到内容的每个视频帧中。更具体地，标识数据可以被插入到每个视频帧的相同的特定区域中，并且对应于在内容的特定区域中所显示的标识图像。
[0412]另外，插入模块3302可以将水印插入到音频帧和/或视频帧中。更具体地，插入模块3302可以将音频帧和/或视频帧划分成子帧，并且从划分后的子帧中检测其中将要被插入水印的特定子帧。然后，插入模块3302可以将水印插入到特定子帧中并将子帧组合以生成音频帧和/或视频帧。
[0413]插入模块3302可以将通过生成模块3301生成的符号数据插入到内容的每个视频帧的特定区域中。
[0414]发送模块3303可以向参照图32所描述的ACR服务接收装置3200发送包括其中由插入模块3302插入标识数据和/或水印的内容在内的数字服务信号。根据本发明的实施方式的标识数据可以用来由参照图32所描述的获取模块来接收频道信息。根据本发明的实施方式的频道信息可以用来由参照图32所描述的接收模块3201来接收URL地址和/或IP地址。
[0415]图34是示出根据本发明的实施方式的ACR服务接收处理的图。
[0416]根据本发明的一个实施方式的接收模块3201可以接收包括内容的数字服务信号(S3401)。如上所述，接收模块3201可以被并入到参照图28至图32所描述的终端2801中。更具体地，如参照图28所描述的，终端2801可以从经由STB 2800接收的广播内容的原数据的视频帧识别标识数据。
[0417]根据本发明的一个实施方式的提取模块3202可以从接收到的内容的每个视频帧的特定区域提取标识数据(S3402)。如上所述，提取模块3202可以被并入到参照图28至图32所描述的终端2801中。
[0418]更具体地，如参照图30所描述的，终端的标识提取器3001可以通过图像处理从视频帧提取标识数据。标识数据可以被包括在视频帧的特定区域中，并且对应于如参照图28至图31所描述的内容的特定区域中所显示的标识图像。
[0419]根据本发明的实施方式的终端2801可以从音频帧提取水印，并利用所提取的水印获取节目信息。所提取的水印可以包括节目信息。如参照图28所描述的，根据本发明的实施方式的节目信息可以包括内容ID信息和/或时间信息。参照图30描述了在终端处从音频帧提取水印的详细方法。
[0420]根据本发明的实施方式的终端2801可以从每个视频帧的特定区域提取符号数据。然后，终端2801可以处理所提取的符号数据，以获取节目信息。符号数据可以包括参照图31详细描述的节目信息。
[0421]如参照图28至图31所描述的，根据本发明的实施方式的终端2801可以从每个视频帧的特定区域提取水印。在本发明的实施方式中，从视频帧提取的水印包括频道信息和/或节目信息。
[0422]根据本发明的一个实施方式的比较模块3203可以将所提取的标识数据与存储在标识服务器2802的DB中的标识数据比较(S3403)。如上所述，比较模块3203可以被并入到参照图28至图32所描述的终端中。参照图28至图31描述了将所提取的标识数据与所存储的标识数据进行比较的详细方法。
[0423]根据本发明的一个实施方式的获取模块3204可以从与标识数据相关的元数据获取频道信息(S3404)。如上所述，获取模块3201可以被并入到参照图28至图31所描述的终端2801中。
[0424]更具体地，如参照图28至图30所描述的，如果所提取的标识数据的图像与所存储的标识数据相同，则标识服务器可以搜索DB搜寻标识数据的频道信息，并且向终端发送该频道信息。
[0425]另外，根据本发明的实施方式的更新模块可以定期更新与标识数据相关的元数据。如相对于图32所描述的，更新模块可以被并入到终端或元数据服务器中。根据本发明的实施方式的元数据服务器可以定期更新存储在标识服务器的DB中的元数据。
[0426]根据本发明的一个实施方式的生成模块2305可以利用频道信息生成请求(S3405)。如上所述，生成模块3205可以被并入到参照图28至图31所描述的终端2801中。
[0427]更具体地，如相对于图30所描述的，终端可以利用从标识数据接收的频道信息来生成请求。如参照图29所描述的，终端可以通过HTTP协议向应用查找服务器2904发送所生成的请求。
[0428]如参照图28至图31所描述的，生成模块3205可以利用所获取的标识数据的频道信息和包括在音频帧中的水印的节目信息来生成请求。另外，如果音频帧不可访问，则生成模块3205可以仅利用所获取的标识数据的频道信息或者利用包括在视频帧中的符号数据来生成请求。如果视频帧不可访问，则生成模块可以仅利用包括在音频帧中的水印的节目信息来生成请求。
[0429]根据本发明的一个实施方式的接收模块3201可以利用该请求来接收URL地址和/或IP地址(S3406)。如上所述，接收模块3201可以被并入到参照图28至图32所描述的终端2801中。
[0430]更具体地，如参照图29所描述的，终端2901可以接收由应用查找服务器2904利用该请求所搜索的应用的URL地址和/或IP地址。参照图28至图31描述了 URL地址和/或IP地址的详细处理。
[0431]根据本发明的一个实施方式的获取模块3204可以根据URL地址和/或IP地址通过IP网络获取附加数据(S3407)。如上所述，获取模块3204可以被并入到参照图28至图32所描述的终端2801中。
[0432]更具体地，如参照图29所描述的，终端2901可以通过URL地址和/或IP地址来访问应用2905以下载应用。所下载的应用可以由应用服务器2905管理，并且附加数据可以通过所下载的应用被发送到终端2901，这参照图28至图31详细描述。
[0433]图35是示出根据本发明的实施方式的ACR服务发送处理的图。
[0434]根据本发明的一个实施方式的生成模块3301可以生成包括内容的数字服务信号(S3501)。更具体地，根据本发明的实施方式所生成的内容可以包括视频内容和音频内容这两者。
[0435]生成模块3301可以生成将要插入到音频帧和/或视频帧中的水印。另外，生成模块3301可以生成指示内容的节目的符号数据。
[0436]根据本发明的实施方式的插入模块3302可以将标注数据插入到内容的每个视频帧(S3502)。更具体地，标识数据可以被插入到每个视频帧的相同的特定区域中，并且对应于在内容的特定区域中所显示的标识图像。
[0437]插入模块3302可以将水印插入到音频帧和/或视频帧中。更具体地，插入模块3302可以将音频帧和/或视频帧划分成子帧，并且从划分后的子帧中检测其中将要被插入水印的特定子帧。然后，插入模块3302可以将水印插入到特定子帧中并将子帧组合以生成音频帧和/或视频帧。
[0438]另外，插入模块3302可以将符号数据插入到参照图31详细描述的内容的每个视频帧的特定区域中。
[0439]根据本发明的实施方式的发送模块3303可以发送数字服务信号(S3503)。发送模块3303可以向参照图32所描述的ACR服务接收装置3200发送包括其中由插入模块3302插入水印和/或标识数据的内容在内的数字服务信号。根据本发明的实施方式的标识数据可以用来由参照图32所描述的获取模块3204来接收频道信息。根据本发明的实施方式的频道信息可以用来由参照图32所描述的接收模块3201来接收URL地址和/或IP地址。
[0440]发明的实施方式
[0441]已经以执行本发明的最佳模式描述了各种实施方式。
[0442]可以在不背离本发明的精神或范围的情况下对本发明做出各种修改和变化，这对于本领域技术人员来说是显而易见的。因此，本发明旨在涵盖落入所附权利要求书及其等同物的范围内的本发明的修改和变型。
[0443]工业实用性
[0444]如上所述，本发明可以整体或部分地适用于双重显示的装置。
【权利要求】
1.一种处理数字服务信号的方法，该方法包括以下步骤: 接收具有内容的所述数字服务信号； 从所述内容的各个视频帧提取用于指示内容提供方的标识数据，其中，所述标识数据位于所述各个视频帧中的特定区域中； 将所提取的标识数据与所存储的标识数据比较以获取所述内容的频道信息； 从与所述标识数据相关的元数据获取所述内容的所述频道信息； 利用所获取的频道信息生成用于获取针对与所述内容相关的附加数据的URL信息的请求； 利用所生成的请求接收所述URL信息；以及 根据所述URL信息通过网际协议IP网络获取所述附加数据。
2.根据权利要求1所述的方法，所述方法进一步包括以下步骤: 从所述内容的音频帧提取水印，其中，所述水印携带有与所述内容相关的节目信息，其中，所述节目信息包括识别各个内容的内容ID信息；以及获取所述水印中的所述节目信息。
3.根据权利要求2所述的方法，生成所述请求的步骤进一步使用所获取的节目信息来生成所述请求。
4.根据权利要求1所述的方法，当所述视频帧包括用于指示与所述内容相关的节目的符号图像数据时，所述方法进一步包括以下步骤: 从所述内容的所述各个视频帧提取所述符号图像数据，其中，所述符号图像数据位于所述各个视频帧中的特定区域中； 处理所提取的符号图像数据以获取与所述内容相关的节目信息，其中，所述节目信息包括识别各个内容的内容ID信息；以及获取所述节目信息。
5.根据权利要求4所述的方法，其中，生成所述请求的步骤进一步使用所获取的节目信息来生成所述请求。
6.根据权利要求1所述的方法，所述方法进一步包括以下步骤:定期更新与所述标识数据相关的所述元数据。
7.根据权利要求1所述的方法，所述方法进一步包括从所述视频帧的所述特定区域提取水印，其中，所述水印携带有与所述内容相关的频道信息和节目信息，其中，所述节目信息包括识别各个内容的内容ID信息。
8.—种处理数字服务信号的方法，所述方法包括以下步骤: 生成具有内容的数字服务信号； 将用于指示内容提供方的标识数据插入到所述内容的各个视频帧中，其中，所述标识数据位于所述各个视频帧中的特定区域中； 发送所述数字服务信号，其中，所述标识数据用于获取所述内容的频道信息，并且所述频道信息用于接收针对与所述内容相关的附加数据的URL信息。
9.根据权利要求8所述的方法，其中，所述内容包括音频帧，所述方法进一步包括以下步骤: 生成水印；以及 将所生成的水印插入到所述内容的所述音频帧中，其中，所述水印携带有与所述内容相关的节目信息，其中，所述节目信息包括识别各个内容的内容ID信息。
10.根据权利要求8所述的方法，所述方法进一步包括以下步骤: 生成水印；以及 将所生成的水印插入到所述内容的所述视频帧中，其中，所述水印携带有与所述内容相关的频道信息和节目信息，其中，所述节目信息包括识别各个内容的内容ID信息。
11.根据权利要求9和10所述的方法，所述方法进一步包括以下步骤: 将所述音频帧或视频帧划分成子帧； 从划分后的子帧检测要插入所述水印的特定子帧； 将所述水印插入到所检测到的特定子帧中；以及 将所述划分后的子帧组合成所述音频帧或视频帧。
12.根据权利要求8所述的方法，所述方法进一步包括以下步骤: 生成用于指示与所述内容相关的节目的符号图像数据；以及 将所生成的符号图像数据插入到所述内容的所述各个视频帧中，其中，所插入的符号图像数据位于所述各个视频帧中的特定区域中。
13.一种用于处理数字服务信号的装置，该用于处理数字服务信号的装置包括: 接收模块，该接收模块被构造成接收具有内容的所述数字服务信号并且接收针对与所述内容相关的附加数据的URL信息； 提取模块，该提取模块被构造成从所述内容的各个视频帧提取用于指示内容提供方的标识数据，其中，所述标识数据位于所述各个视频帧中的特定区域中； 比较模块，该比较模块被构造成将所提取的标识数据与所存储的标识数据比较以获取所述内容的频道信息； 获取模块，该获取模块被构造成从与所述标识数据相关的元数据获取所述内容的所述频道信息并且获取与所述内容相关的附加数据；以及 生成模块，该生成模块被构造成利用所获取的频道信息生成用于获取所述URL信息的请求， 其中，所述接收模块利用所生成的请求接收所述URL信息， 其中，所述获取模块根据所述URL信息通过网际协议IP网络获取所述附加数据。
14.根据权利要求13所述的装置，所述装置进一步包括: 水印提取模块，该水印提取模块被构造成从所述内容的所述音频帧提取水印；以及节目信息获取模块，该节目信息获取模块被构造成获取所述水印中的所述节目信息，其中，所述水印携带有与所述内容相关的节目信息，其中，所述节目信息包括识别各个内容的内容ID信息，以及 其中，所述生成模块进一步使用所获取的节目信息来生成所述请求。
15.根据权利要求13所述的装置，当所述视频帧包括用于指示与所述内容相关的节目的符号图像数据时，所述装置进一步包括: 符号提取模块，该符号提取模块被构造成从所述内容的所述各个视频帧提取所述符号图像数据，其中，所述符号图像数据位于所述各个视频帧中的特定区域中； 处理模块，该处理模块被构造成处理所提取的符号图像数据以获取与所述内容相关的节目信息，其中，所述节目信息包括识别各个内容的内容ID信息；以及 节目信息获取模块，该节目信息获取模块被构造成获取所述节目信息， 其中，所述生成模块进一步使用所获取的节目信息来生成所述请求。
16.根据权利要求13所述的装置，所述装置进一步包括:更新模块，该更新模块被构造成定期更新与所述标识数据相关的所述元数据。
17.根据权利要求13所述的装置，所述提取模块进一步从所述视频帧的所述特定区域提取水印，其中，所述水印携带有与所述内容相关的所述频道信息和节目信息，其中，所述节目信息包括识别各个内容的内容ID信息。
18.一种用于处理数字服务信号的装置，该用于处理数字服务信号的装置包括: 生成模块，该生成模块被构造成生成具有内容的所述数字服务信号； 插入模块，该插入模块被构造成将用于指示内容提供方的标识数据插入到所述内容的各个视频帧中，其中，所述标识数据位于所述各个视频帧中的特定区域中； 发送模块，该发送模块被构造成发送所述数字服务信号， 其中，所述标识数据用于获取所述内容的频道信息，并且所述频道信息用于接收针对与所述内容相关的附加数据的URL信息。
19.根据权利要求18所述的装置，当所述内容包括音频帧时，其中，所述生成模块进一步生成水印，所述插入模块进一步将所生成的水印插入到所述内容的所述音频帧中， 其中，所述水印携带有与所述内容相关的节目信息，其中，所述节目信息包括识别各个内容的内容ID信息。
20.根据权利要求18所述的装置，其中，所述生成模块进一步生成水印，所述插入模块进一步将所生成的水印插入到所述内容的所述视频帧中，其中，所述水印携带有与所述内容相关的频道信息和节目信息，其中，所述节目信息包括识别各个内容的内容ID信息。
21.根据权利要求19和20所述的装置，所述嵌入模块进一步: 将所述音频帧或视频帧划分成子帧； 从划分后的子帧检测要插入所述水印的特定子帧； 将所述水印插入到所检测到的特定子帧中；以及 将所述划分后的子帧组合成所述音频帧或视频帧。
22.根据权利要求18所述的装置，其中，所述生成模块进一步生成用于指示与所述内容相关的节目的符号图像数据，所述插入模块进一步将所生成的符号图像数据插入到所述内容的所述各个视频帧中，其中，所插入的符号图像数据位于所述各个视频帧中的特定区域中。
【文档编号】H04N21/43GK104471951SQ201380038071
【公开日】2015年3月25日 申请日期:2013年7月16日 优先权日:2012年7月16日
【发明者】吴世珍, 金镇泌, 安承柱, 金庆镐, 文京洙 申请人:Lg电子株式会社