感觉作品回放的更改与控制的制作方法

专利名称：感觉作品回放的更改与控制的制作方法
技术领域：
简单概括地讲，本公开内容涉及元数据等的创建、使用和/或共享以对
感觉作品(sensory work)的回放进行控制或更改。
背景技术：
个人录像机(PVR)已经彻底地改变了很多消费者观看电视的方式。 与卡带式录像机(VCR)类似，PVR允许用户将节目录制下来以备以后观 看；但是，PVR提供了许多其它功能，包括暂停和倒回实况电视广播的能 力。
因为许多有线电视公司及卫星电视提供商提供100多个频道的节目， 订户要从中找出自己喜欢观看的节目谈何容易。很多PVR提供了很多管 理或降低复杂性的方式。例如，PVR可以允许订户在节目播出的任何时候 都可按照标题来录制所播出节目，这样当他们所喜爱的节目从周一晚上移 到周四晚上时，订户就不必操心了。有些PVR允许按照类别和/或关键词 录制节目。例如，这允许那些有兴趣对其浴室进行重建的人将有关家居装 修的电视节目以"浴室"这个标题描述录制下来。
PVR降低了复杂性并且提高了录制订户希望观看的节目的能力；不 过，PVR的功能仅限于此。 一旦订户录制了节目，这些节目可以被回放、 暂停、快进、倒回等等；然而，观看者通常手动控制该功能性。
具有不同品味、喜好、目的等的个体将电视节目录制到PVR上(以 及以其他方式录制)。例如，某个人录制"超级碗，，节目可能是为了观看 橄榄球，而另一个人录制该节目可能是为了观看赛前和中场休息的节目， 另一个人录制该节目则可能是为了观看新的商业广告。使用常规PVR的 这些个体的每一个希望以不同的方式来回^t该节目。
希望提供一种创建、使用和/或共享电视节目及其它感觉作品的不同回 放的机制。例如，对于录制"超级碗"只为观看商业广告的个体来说，希 望给他提供在他的PVR上回放他所录制的"超级碗"使得只显示商业广 告的能力。类似地，只为橄榄球才录制超级碗的个体可能希望在回放期间
8仅观看每场橄榄球赛。
本公开讨论可以用来创建对诸如电视节目之类的感觉作品的回放进 行控制或更改的元数据等的技术和系统。

发明内容
在一个总的方面中， 一种感觉作品回;^欠系统包括感觉作品输入端口 ， 可操作以接收感觉作品数据；存储设备，用来存储回放控制记录，该回放 控制记录说明对感觉作品数据的回放的改变；感觉作品输出端口，可操作 以将信息发送到感觉输出设备以使得能够回放感觉作品数据；以及处理 器，可操作以藉由通过感觉作品输出端口将改变的感觉作品数据输出来改 变感觉作品数据的回放。该回放控制记录包含感觉作品适用性标识符， 可用来确定回放控制记录是否可适用于感觉作品；参考帧(frame of reference);以及至少一个更改编码，其定义相对于该参考帧的将要应用 于感觉作品的回放的改变。
在一些实施方式中，感觉作品数据包括视听信息，例如，电视节目， 影片，视频游戏等等。该感觉作品数据可以被存储在计算机可读介质上， 该计算机可读介质可以是可移动的。感觉作品数据也可以通过通信信道被 流传送到回放设备。此外，回放控制记录可以存储在存储器中。
在感觉作品回放系统中，该处理器可操作，以藉由通过感觉作品输出 端口输出改变的感觉作品数据来改变感觉作品数据的回放，例如，通过跳 过感觉作品的至少一个片段(segment),对各片段进行重新排序，叠加信 息，变更回^L速度，插入片段等等来改变感觉作品数据的回放。回放控制 记录可被表示为元数据。回放控制记录输入端口和感觉作品输出端口两者 都可以使用输入/输出控制器来实施。
感觉作品回》文系统可以实现为数字录像机。回放系统可以驻留在用户 位置处，驻留在网络上或其组合上。此外，回放系统可以由在不同设备上 执行功能的各部分组成。这些部分驻留在耦合到电视机的消费电子设备
上。 一也可以通过对等网络、服^^提供商或电缆网等在远程位^提供回放系 统的功能。
在另一总的方面中，存储在计算机可读介质上的回放控制记录包括 感觉作品适用性标识符，其可用来确定回放控制记录是否适用于感觉作品；参考帧(其可以是隐式(implicit)的)；以及至少一个更改编码，其 定义了相对于该参考帧的将应用到感觉作品的回放的改变。感觉作品回放 设备可利用该回放控制记录来改变感觉作品的回放。
感觉作品适用性标识符可以通过各种不同的方式来实施。例如，节目 标识符，格式标识符和/或源标识符。此外，感觉作品适用性标识符本质上 可以是分级的。
在一些实施方式中，参考帧;L基于事件的和/或基于时间的。举例来说， 可以通过定义参考发生(reference occurrence )来实现参考帧，所述参考发 生例如其发生识别历元时间(epoch time) to的特定帧，其发生识别历元时 间to的特定帧序列，计算值等等，该计算值使得可以使用感觉作品数据来 执行计算并且将结果同该计算值进行比较以识别历元时间t0 。
更改编码可通过与改变描述一起包含时间标识符(例如，相对于参考 帧的时间t)来实现。作为示例而不是限制，改变描述可包括由以下项组 成的组中的一个或多个删除；重新排序；插入；叠加；以及修改。
在另一总的方面中， 一种改变感觉作品的回放的方法包括接收回放 控制记录；接收感觉作品的一些、全部或一部分；基于回放控制记录改变 感觉作品；以及输出数据以促进由感觉作品回放设备对改变的感觉作品的 回放。
在一些实施方式中，接收回放控制记录包括接收可用来确定回放控制 记录是否适用于感觉作品的感觉作品适用性标识符，参考帧，以及至少一 个更改编码，该更改编码定义了相对于参考帧的将应用于感觉作品的回放 的改变。
在另一总的方面中，存储在计算机可读介质上的软件包括用于访问 回放控制记录的代码段；用于读取感觉作品的代码段；基于回放控制记录 来改变感觉作品的代码段以及用于输出数据以促进由感觉作品回放设备 对改变的感觉作品的回放的代码段。
在另一总的方面中， 一种可操作以控制感觉作品回放的设备包括存 储设备，用来存储回放控制记录，该回放控制记录说明了对感觉作品的回 放的改变；用于基于回放控制记录产生至少一个控制信号的逻辑；和控制 信号端口，其可操作以输出该至少一个控制信号，从而更改感觉作品回放 设备的行为。回放控制记录包含参考帧(其可以是隐式的)，以及至少一 个更改编码，该更改编码定义了相对于该参考帧的将应用于感觉作品的回;改的改变。
在一些实施方式中，每一个更改编码包含相对于参考帧的时间标识符 (其可以是隐式的)，以及改变描述(例如，控制功能和持续时间)。所 述改变描述可用于定义功能，例如播放、停止、快进、倒回、暂停等等。
控制信号端口可操作以输出控制信号来改变感觉作品回放设备的行 为。在一些实施方式中，这是藉由通过红外增强器(blaster )发送红外(IR) 控制信号来实现的。
在另一总的方面中， 一种用于控制感觉作品回放设备的方法包括接 收与感觉作品相关的回放控制纪录，以及输出至少一个控制信号，以基于 所接收到的回放控制记录改变感觉作品的回放，例如输出红外(IR)增强 器可用的信号来控制感觉作品回放设备。
在另一总的方面中， 一种对感觉作品的回放提供控制的方法包括存 储至少一个回放控制记录，该回放控制记录说明对感觉作品的回放的改 变；通过计算机网络接收回放控制记录请求；以及响应于所接收的请求提 交回放控制记录。回放控制记录可由感觉作品回放设备用来改变感觉作品 的回放。感觉作品回放记录可以存储在数据库等中，使得所接收的对于回 放控制记录的请求可以作为数椐库查询提交。响应于接收到的请求，该系 统可以提交一个或多个回》文控制记录。
一些实施方式还包括接收回放控制记录以及存储^"收的回放控制记 录与该至少一个回放控制记录。诸如以上描述的技术可用来提供协作性的 感觉作品回放控制系统。
一个或多个实施方式的细节在附图及下文的描述中进行阐述。根据 该描述和附图以及根据权利要求书，其它特征和优势将是显而易见的。


图1是感觉作品回放系统的示图。 图2是感觉作品回放设备的示图。 图3是用于改变感觉作品的回放的方法的流程图。 图4是感觉作品回放系统的数字录像机实现和传统的视频播放器实 现的示图。
图5是协作性感觉作品回放系统的示图。
具体实施例方式
参看图1，感觉作品回;^文系统10包含耦合到感觉回^t设备14的至少 一个感觉作品输出设备12，使得感觉输出设备12可操作以通过基于回放 控制记录20更改感觉作品18的回放来刺激刺激试验者16的至少其中一 种感觉。为了本公开的目的，刺激试验者16是其感觉受感觉输出设备12 刺激的人。感觉回放设备14可操作以基于回放控制记录20对感觉作品18 的回》丈进行控制或更改。
感觉作品输出设备12是可操作以通过电气、机械、化学、热和/或生 物机制刺激刺激试验者16的至少一种感觉的任何设备。作为示例而不是 限制，感觉作品输出设备12包括以下设备以及类似设备视频显示设备， 如电视机，监视器，显示面板，无论是独立的还是嵌入的(例如，移动电 话显示器，便携式DVD播放器，或手持视频游戏单元)；音频设备，如 扬声器，头戴式送受话器以及耳机；以及触知型(tactile)设备，例如虚 拟现实手套，自动按摩椅，计算机控制的健身器材，模拟器(如飞行模拟 器，枪支训练模拟器，驾驶模拟器等等)，以及触觉(haptic)设备(例 如，视频游戏控制器)。本领域技术人员将认识到，此处所描述的设备、 系统和技术可广泛适用于现有和未来的感觉作品输出技术。
感觉回放设备14是任何用于控制感觉作品输出设备12的设备。作为 示例而不是限制，感觉回放设备14可以实现为数字录像机(DVR ), 卡带式录像机，数字娱乐中心，电缆盒(cable box)，计算机，无线电设 备(陆地或卫星)，卡带播放器，数字音乐播放器，CD播放器，DVD 播放器，蓝光碟播放器，自动按摩椅，电子控制的健身设备，个人数字助 理(PDA)，数字图书浏览设备等等。
当今使用的最常见的感觉作品18包括音频记录(audiorecordings)和 电影。然而，正如本文中所使用的，感觉作品18是指任何以有形表达形 式固定的作品，其可由感觉回放设备14用来通过电气、机械、化学、热、 和/或生物机制刺激刺激试验者16的至少一种感觉。应当指出，以有形形 式"固定"的任何作品可包括动态内容和博客(blog)材料。在任何时刻 可以认为这种材料相对于视频博客的状态和/或内容来说是"固定的"；然 而，本发明人认识到，本发明可以用来控制此类动态社区内容(包括视频 或博客内容)的回放。为了解释的目的而提供的下列感觉作品18不打算是限制性的
1. 电影和电视节目。诸如影片和电视节目的视听作品可从许多来源获 得。例如，可以在蓝光碟，DVD，录像带，通用媒体盘(UMD)等上来 购买或租用它们。此外，可以从电缆、卫星、或空中广播观看或录制它们， 并且可以存储下来以供以后回放。此外，还可以通过数椐网络流传送或下 栽它们。
2. 音乐和音频书籍。音乐的音频记录及音频书籍通常可以通过购买磁 带、CD、 DVD、 UMD、蓝光碟等获得。此外，可利用数据网络流传送或 下载音乐和音频书籍。最后，音乐和音频节目通常由广播电台，卫星无线 电公司，以及因特网上的各个实体广播。音频数据可以以多种格式存储， 例如音频CD格式，MPEG-1音频层3 (MP3)格式，先进音频编码(AAC) 格式等等。
3.iFIT锻炼(workout)。已经使得某些健身器材(如踏车，健身脚踏 车，椭圆训练机等)能够从数据盒式磁带(data cartridge)、录像带、音 频记录、DVD等接收信号，从而改变锻炼的各方面。例如，iFIT录像带 可以用来在运动期间对踏车进行控制，使得用户观看穿过优美风景区的路 线的视频，并且在播放视频的同时更改速度和倾斜水平。
4. 数字书籍。书籍现在完全可以电子格式来购买，以在计算机、个人 数字助理(PDA)、或为这一目的而设计的电子设备上使用。数字书籍 的页面的图像被显示，使得读者可以像传统印刷书籍那样去阅读，其中还 增加了搜索、书签、批注等某些能力。
5. 互联网。互联网提供了种类繁多的静态和动态数据源。基于定义的 元数椐更改用户同互联网网站以及下栽的数据的交互可能是所希望的。
6. 新出现的以及新的格式及技术。现在支持或可预见地支持感觉作品 18的回放的各种新的电气和/或机械设备已经出现。例如，娱乐设施、机 器人按摩椅、激光显示设备、电子控制假日照明、视频游戏系统、模拟器 等等。
本领域技术人员将认识到此处所描述的系统和技术适用于任意的感 觉作品18，包括那些刺激人的视觉、嗅觉、味觉、触觉、或听觉及其任意 组合的作品。
回放控制记录
回放控制记录20包括各种数据，感觉回放设备14可以用所述数据来更改或控制感觉作品18的回放。本领域技术人员将认识到回放控制记录 20可以使用任何常规的数椐存储以及数据访问技术来表示和存储。例如， 感觉作品回放系统10的一个实施方式利用回放控制记录20对感觉作品18 的回放进行更改或控制，回放控制记录20以XML格式远程存储在服务器 上并在需要时传输给感觉回放设备14。回放控制记录20可以包括下列元 素中的一个或多个回放更改及控制操作；感觉作品18的识别；和/或参 考帧。而且，回放控制记录20可以包括特定实施例所期望的任何附加信 息。例如，某些实施例使用具有标题、作者、创建日期等的回放控制记录 20。
回放更改及控制操作
本节讨论可用来更改或控制感觉作品18的回放的各种操作。 删除
可能期望删除或跳过感觉作品18的某些片段。例如，由于各种各样 的原因(包括希望移除认为有害的、不当的、或另外不期望的内容)，影 片或电视节目的有些观看者可能希望跳过商业广告和/或不想看的内容；可 能希望移除对于特定观看者的目的或用途来说不重要的或无关紧要的内 容；或者可能希望移除优先级较低的内容。
例如，考虑在他或她的PVR上录制电视节目《生还者》的观看者。 如果该观看者能够每周观看节目，他或她可能希望看到整个节目(商业广 告除外)；然而，如果该观看者错过了两三集节目，那么他可能不太想看 全部的节目，而只想看最近播出的部分，并且仅仅对重点部分进行了解， 这样他们便可以全数观看最近的广播节目。基于特定观看者的需求和/或目 的，在回放期间将期望跳过或删除该广播节目的不同部分。
再比如，如果用户已经录下了奥斯卡金像奖这一引起许多不同观看者 群体的兴趣的广播节目。录制该事件的观看者可能对社会名流；娱乐新闻； 影片；特定的男演员，女演员，剧作家，导演和/或影片；音乐表演；等 等感兴趣。不同观看者群体可能更喜欢观看该广播节目的不同部分。因此， 希望删除或跳过该广播节目的部分，从而为每个群体提供自定义(custom) 的观看体验。
重新排序
在某些情况下，可能希望以与广播机构、制作者和/或作者所预期的顺 序不同的顺序来观看或体验感觉作品18的某些片段。例如，在听音乐时，听众群体可能希望按照不同于专辑上所显示的顺
序来播放音轨。希望对感觉作品18的片段的回放进行重新排序。 叠力口 ( overlay)
在有些情况下，可能希望在感觉作品18的回放期间叠加信息。
例如，如果提供用于更改电视节目的回放和/或控制的元数据等的网站 将此类信息公布，使得用户可以访问该元数据以折叠(collapse)或者删除 他们不希望看见的内容，该网站可能希望在回》文期间通过叠加标记、品牌 或其它标识符来插入广告数椐。
此外，出于各种各样的原因，可能希望在回放期间插入自定义屏幕消 息(screen ticker)、植入式广告、字幕、配音、图像等等。
回放速度
在有些情况下，可能希望更改感觉作品18的某些片段的回放速度。 例如，广告商们发现，许多PVR用户快进通过商业广告。 一些有创 意的广告商在广播节目中并入了一秒钟的片段，该片段仅可供暂停回放以 观看该内容的PVR用户有效地使用。可能希望更改回放，使得广播节目 的各部分暂停几秒显示、以慢动作显示、或者以快进动作显示，视情况而 定。
此外，在体育赛事(或任何其它节目)的回放期间，能够创建自定义 "即时重放"可能很有用。例如，这允许用户创建元数据，使得可以以慢 动作观看橄榄球比赛中的某个动作(play)。 插入
在某些情况下，可能希望在感觉作品18的回放期间插入附加信息、 视频、音频等。
举例来说，用户可能希望插入来自另一源的媒体，或来自同一源内的 另一片段的媒体，或者插入新的数据。这一技术的一种实施方式是在回放 期间插入基于简档的(profile-based)广告。例如，在回放"超级碗"期间， 可能向观看者显示基于人口统计或者任何其它可用信息的广告。因此，可 能向生活在一个人口普查区的观看者显示雷克萨斯广告，而可能向另一个 人口普查区的观看者显示丰田的广告。
此外，这一技术可以用来向节目添加信息，以创建对其加以评论的新 节目，或者以其他方式创建衍生作品。例如，可以通过插入评论或附加镜头对《极限特工(the State of the Union)》的广播的回放进行修改。此外， 还可以为了讽刺或喜剧的目的修改回放。 呈现(presentation)
在某些情况下，可能希望对感觉作品18的呈现进行修改。例如，一 个观看者可以选择以原始的黑白版本呈现彩色影片，或者反之亦然。类似 地，允许显示和呈现的其它方面适应)t见看者的喜好。
其它
仅为了示例的目的提供上述实施方式。本领域技术人员将认识到，对 感觉作品18的回放的任何改动、修改和/或控制均在本公开的范围之内。 元数据
对感觉作品18的任何修改(如上文提到的那些更改和/或控制)可以 被存储为或概念化为元数椐或其它与特定感觉作品18有关的类似控制数 据。此处所用的元数据是指能够执行所期望的功能的任何控制信号或数 据。
感觉作品的识别
影响感觉作品18的回放更改和/或控制的元数据优选地与特定感觉作 品18和/或感觉作品18的特定实例相关联。例如，位于华盛顿特区的美国 国家广播公司的分公司WRC-TV所广播的电视节目中显示的广告可能与 位于旧金山的美国国家广播公司的分公司KNTV所播出的广告不同。此 外，可能采用不同的格式广播节目，如标准分辨率(SD )和高分辨率(HD )。 希望将元数据与该元数据可适用的感觉作品18相关联。
在一个实施方式中，元数据包括节目标识符。例如，该节目标识符可 以是"超级碗XL"。这一技术可适用于大多数目的；然而，当源之间存 在差异时，可能更希望为每一个源提供单独的标识符(例如，"超级碗 XL: DirecTV"， "超级碗XL: Comcast","超级碗XL: WRC-TV" 等等)。
在将元数据应用到影片的实施方式中，观看者可以通过从广播电视、 从按次计费(pay-per-view)的付费电视录制该影片，从DVD播放该影片， 或者在互联网上通过视频点播系统来获取该影片而得到该影片。由于在每 一个广播之间可能存在更改(即，有些可能被编辑以适应屏幕，有些可能 以宽屏显示，有些可能具有商业广告，等等)，所以提供考虑这些差异的
16该影片的标识可能是有用的。
这个问题的一种可能的解决方案是提供分级表示。例如，可能存在题
为"超级碗XL"的大类，其具有用于不同源的更具体的实例。该解决方 案将允许已经从任何源获得视频的某个人使用该大类，而在可用时使用元 数据的更具体的实例。
有时候，感觉作品18可能提供有用来控制回放的元数据。当元数据 和特定的感觉作品之间的关系是隐式的时候，没有必要参考可适用的感觉 作品18 。
参考帧
一旦用户具有感觉作品18及用来控制或更改回放的元数据，确定共 同的参考帧就很有用。当感觉作品18等同或基本等同时，参考帧可以是 隐式的；但是，当感觉作品18源之间存在相当大变化时，提供某种同步 使得适当的信息被删除，插入，重新排序，快进，或以其它方式修改或控 制可能是有用的。
至少存在两种感觉作品18: (i)那些时间上表现良好的(well behaved);及(ii )那些时间上表现不佳的。如果每一回放在时间上都 相对一致，则感觉作品18是时间上表现良好的。例如，影片和音频记录 是时间上表现良好的，因为在回放过程中每一个视频和/或音频帧的发生基 本在同一相对时刻(即，在大约相同的相对时间点上播放同一音符)。
对于时间上表现良好的感觉作品18，可以通过识别历元时间to并将该 时间与感觉作品18的回放相关联，来在时间上创建参考帧。所使用的关 联的种类将取决于感觉作品18的性质。例如，对于音频感觉作品18来说， 参考帧可以是波形，使得感觉回放设备14在回放期间可以识别该波形， 并且因此将历元时间to与匹配波形相关联。
在某些情况下，匹配单个帧可能不够，因为该帧或一个基本相似的帧 可能会重复出现。已知本领域中存在许多技术来识别视频和/或音频记录。 例如，各种视频指紋技术可以被用来识别在统计上不大可能发生在别处的 感觉作品18的特性。这种特性可以被用来直接定义历元时间to或作为到 参考特性的偏移来定义历元时间t0。
一旦建立了公共的参考帧，由回放控制记录20所定义的更改和控制 操作可能在相对于历元时间t。的定义的时刻纟皮应用。
有些感觉作品18时间上表现不佳，例如，回》丈可能不确定，回放可能会变化，或者回放可能会受到各种外部影响。对于这种感觉作品18,回 放控制记录20可以定义与事件有关的更改和控制操作。例如，可以创建 回放控制记录20，以^"改或更改视频游戏感觉作品18。由于^L频游戏高 度依赖于用户交互，因此基于一个或多个事件的发生而不是预定量时间的 流逝来定义更改和控制操作可能更有效。
确定公共参考帧的方法之一是设定任意的或最佳猜测的初始参考帧， 并允许观看者或用户对回放进行微调，以计及(account for)任何差异。 例如，可以假定，元数据参考感觉作品18的等同副本。如果正在进行的 插入、删除等操作时间不当，用户可能会对回放进行更改(例如，通过相 对于元数据控制降低或加快回^t，或通过相对于元数据控制向前或向后刃匕 过帧)以实现希望的效果。
更改编码
本领域技术人员将认识到，存在无数多种方式来对感觉作品18的回 放的这种更改和控制进行编码。在优选实施例中，元数椐包括与已识别的 参考帧有关的时间参考。例如，元数据可能规定，从参考帧开始，播放最 初的两分二十三秒，再跳过接下来的58秒钟。然后，元数据可以指示例 如其它数据然后被插入，其中在接下来的30秒钟里，某些其它信息被叠 加，等等。
参看图2，感觉回放设备14包括处理器22，该处理器具有可操作 以接收感觉作品18的感觉作品输入端口 24;用来存储回放控制记录20的 存储设备26;以及感觉作品输出端口 28,可操作以将信息发送给感觉输 出设备12,从而使得能够回放感觉作品18。此处使用的"端口"意在包 括感觉回放设备14通过其可以输入或输出数据的任何设备或机构。
参看图3， 一种用以改变感觉作品的回放的方法包括接收回放控制 记录20 (步骤30a);接收感觉作品18 (步骤30b);基于回放控制记录 20改变感觉作品18 (步骤30c);以及输出数据32来促进感觉作品18的 已改变的回放(步骤30d)。
社区
多个用户形成"社区"。在社区内，用户可以访问感觉作品18，例如， 音频记录，影片，电视节目，具有触觉元素的作品，灯光秀等等。感觉作 品可以釆用任何形式并且可以来自几乎任何源。此外，用户可以访问由社 区内另 一用户所创建的元数据。更具体地说，并且作为示例而不是限制，社区内的用户可以访问感觉 作品。例如，用户可以访问最新的"超级碗，，比赛镜头。可提供该比赛镜 头以供访问，使得每个用户具有相同的感觉作品或同 一感觉作品的副本， 或者，用户可以通过其它手段(例如，从广播的电视，电缆，互联网或者 卫星)获取该感觉作品。社区内的用户可以创建元数据以对比赛的回放进
行更改，例如，用户可以创建最新的"超级碗"比赛镜头的克利夫注解(Cliff note)版本以使这种镜头适应于他们的需求和/或愿望。举例来说， 一个用 户可以改编(tailor)该镜头，以便只将整个比赛的"快照"包含在克利夫 注解版本中。通过这种方式，用户可以观看该比赛内的全部系列的表演， 而不用观看与这种比赛不相关的无关资讯。此后，其它用户可以访问此版 本或该媒体的克利夫注解，并按照他们的需求或愿望对之进行修改。例如， 另一个用户可以使用与比赛中所有快照有关的这一版本，但是也添加了中 场休息节目。通过这种方式，社区里的用户可以彼此协作，表达自己的意 见，或者只是享受他人关于有关主题的创造。社区还允许用户就各种克利 夫注解版本进行投票，与社区其它成员进行交互，并表达他们的兴趣及喜 好。此类兴趣及喜好可以被跟踪并被用来为社区或者社区内的特定用户提 供"用户特有"信息。最后，如果需要的话，克利夫注解版本的摘要性质 允许用户在短时间段内观看冗长的数据量。
在另一个实施例中，可以用来自第三方的与克利夫注解版本相关的附 加材料补充克利夫注解版本。例如，广告商可能能够在克里夫注解版本中 插入广告，这些广告适应于创建或修改克利夫注解版本的用户的需求和/ 或愿望。
在实践中，社区内的每一用户都可以访问媒体或数据的片段。该数据 或媒体可能源自TIVO,电视，互联网，或任何其它源。之后，该系统将 用户的片段正规化(normalize)，以为用户中提供的所有片段确定共同的 起始点。这一步骤是必要的，因为由于多个数据源，难以了解每一个用户 的片段从何处开始。 一旦为所有用户确定了这种起始点，包含在该数据或 媒体内的参考点就可以用来为数据/媒体的克利夫注解版本提供起始点和 结束点。在优选实施例中，只有参考点被社区内的用户共享，而不是发送 整个媒体文件。这提供了精确的编辑能力，增强的传输速度，并且将带宽 问题最小化。此外，参考点的使用使得插入来自第三方的数据更简单了。
感觉作品的正规化可以通过多种方式进行。例如，在一些实施方式中，第一元数据参考点包括用于参考帧的指紋。可以取该指紋，以便基于单个 帧或者多帧片段来执行计算。任何技术可以用来生成指紋，使得用户或者 该用户的系统可以确定用来创建元数椐的参考。
一旦建立了社区并且用户具有希望的数据或媒体片段，用户接口就允
许一个或多个用户访问他们的片段并且创建该数据的克利夫注解(Cliff note)版本。当初次访问特定的数据或4某体时，该用户^皮询问他们是否希 望创建克利夫注解版本。 一旦第一克利夫注解版本被创建，可以将这种克 利夫注解版本的参考点存储在数据库中，并且社区内的其它用户可以访问 该参考点。其它用户可以访问该克利夫注解版本，观看该版本、对该版本 进行修改、向其添加或删除数据等。此外，社区可以就最佳版本进行投票， 讨论各种不同的版本等等。奖励或奖品可以与这些版本相关联，并且奖品 或奖励由第三方和/或社区内的成员提供和确定。
上文描述的这种系统提供了增强的创造性环境，使用户因为共同的兴 趣而联合起来，并且单独地或联合地开发数据或媒体的创造性作品或摘 要，该作品或摘要是所有用户共有的或与所有用户相关联。这不仅提供了 兴奋和娱乐，而且提供了一种表达想法和兴趣的论坛。这样的环境也提供 了 一种跟踪用户兴趣和偏好使得社区和/或第三方可以跟踪并提供在数椐 和媒体内的适应于用户和社区的信息的手段。
在一个实施方式中，协作性社区有助于元数据的创建、共享及使用， 从而对感觉作品的回放进行更改或控制。在这一特定示例中，通过在感觉 作品的回放期间插入基于简档的广告来支持社区。
该系统提供了一种帮助用户识别对其目的"最"有贡献的元数据的机 制。例如，可以使用的一种机制是允许用户对元数据贡献进行评价(rate)。
一些实施方式实现了基于简档的广告交换(advertisement swap) , 4吏 得可以在感觉数据的回放期间插入定向广告(targeted advertisement)。为 了确定插入哪个广告，该系统可以使用任何可用信息，例如用户偏好，账 户数据，人口普查数据，人口统计数据，用户评价，过去所参与的社区生 活，等等。
IR增强器(blaster)实施例
以上所描述的技术可以合并到种类繁多的消费电子产品中，包括电子 音乐播放器(如MP3播放器，iPod等，DVR,个人计算机，等等)。然 而，这些技术也可与传统消费电子设备一起使用。例如，考虑用来对消费电子回放设备的回放进行控制或更改的消费电
子控制设备。举例来说，该控制设备可包括IR增强器，串行连接，网络 连接等等，可用来控制VCR、 DVR、 DVD播放器、或任何其它消费电子 回放设备。在IR增强器实施方式中，消费电子控制设备可操作以读取与 特定的感觉作品18的回放有关的元数据并且通过使用IR增强器发送信号 来更改或控制通过消费电子回放设备的回i丈。
例如，与超级碗XL有关的元数据可以识别参考帧并且规定从距离该 参考帧七分十五秒处开始跳过时长为56秒的片段。为了做到这一点，消 费电子控制设备可以在7分15秒的点处启动快进操作，直到该56秒的片 段完成。
在一些实施方式中，IR增强器可能能够只请求跳过56秒；但是，对 于有些设备(如VCR)，消费电子控制设备可能需要与该消费电子回放 设备的快进速度有关的信息。
一些实施方式维护表格，该表格存储各种回放设备的快进及倒回的速 率以及等待时间(latency time ),使得消费电子控制设备能够准确地执行 由元数据所指定的更改和控制功能。
数字录像机实施例
图4是感觉作品回放系统10的实施方式的示图，该系统用来对视频 记录的回放进行更改和/或控制，以供刺激试验者16来观看。在一个实施 方式中，数字录像机40耦合到显示器42 。数字录像机40可操作以执行 诸如那些由传统数字录像机所执行的操作；然而，加强了数字录像机40 以支持对回放的更改和控制。
在一些实施方式中，数字录像机40可操作以接收来自外部源(例如 在数据网络上、来自计算机可读介质、或由用户输入)的回放控制记,20 。 回放记录可以存储在数字录像机40的存储器中并且使得能够改变回放。 例如，已录制了电视广播节目的刺激试验者16可以下栽与该电视广播节 目相关联的回放控制记录20，使得他或她可以跳过商业广告(如通过快 进通过商业广告，通过跳过商业广告等)而观看该节目。
有些消费者没有可以升级为支持这里所公开的概念的数字录像机40 ， 因为他们使用传统的不可升级的硬件。对于这些消费者(诸如传统卡带式 录像机的拥有者)来说，他们的传统视频播放器50可以与控制设备52 — 起使用。控制设备52可使用各种技术来控制视频播放器50,例如上面提到的IR增强器技术。对于这些消费者，控制设备52可能不能确定关于正 在播放的视频的信息。在这种情况下，控制设备52可以依赖刺激试验者 16识别适当的回放控制记录20并且使回放控制记录20的执行与视频回 放同步。例如，在一些实施方式中，控制设备52被配置为控制加栽到视 频播放器50中的节目。刺激试验者16操作视频播放器50以开始播放并 且然后启动通过控制设备52的控制。
控制设备52可以包括用户接口，以实现相对于当前回放的跟踪。例 如，如果控制设备52过早地用信号通知视频播放器50快进通过商业广告 或节目片段，那么刺激试验者16可以使用该接口相对减緩或加速控制以 便同步该设备。
参考图5,协作性感觉作品回放系统包括耦合到网络56的服务器54， 网络56例如互联网，广域网，局域网等。服务器54与数据库58结合操 作以实现回放控制记录20的交换。任何数据库或数据存储技术都可以使 用，使得一个或多个感觉回放设备14可以与服务器54交互以提交回放控 制记录60或检索回放控制记录62
例如，可以使用协作性感觉作品回》丈系统的该实施方式以使得在线初: 区能够共享回放控制记录20。任何上文所述技术都可以在这个系统中使 用。例如，具有DVR感觉回放设备14的一个家庭中的用户可以在DVR 上录制电视节目并且创建更改所录制的感觉作品的回放的回放控制记录 20,并且把回放控制记录60提交给服务器54。回放控制记录20被储存在 数据库58中。诸如另一家庭中的用户的另一用户可以使用使能(enabled) 的DVR感觉回;^文设备14并且使用服务器54进行搜索以找到适用于该用 户可用的特定感觉作品18的任何回放控制记录20。该用户可以选择检索 由第一用户创建和提交的回放控制记录62,并用它来更改在他或她的DVR 上记录的同一感觉作品18的回放。
结论
我们周围充斥着感觉作品18。已经进行了大量努力来识别，定位和访 问特定感觉作品18 (例如，PVR，互联网搜索技术等)；然而，很少有 过程可用来帮助更好地处理特定感觉作品18。上文所述的技术和系统广 泛适用于任何感觉作品18，从而允许用户、公司或社区创建、使用和/或 共享元数椐，该元数据对感觉作品18的回放进行更改和/或控制。
上面已描述了若干实施方式。然而，应该理解在不脱离本发明的精神和范围的情况下，可以进行各种修改。因此，其它实施方式在随附的权利 要求书的范围之内。
权利要求
1.一种感觉作品回放系统，包括用来接收感觉作品数据的感觉作品输入端口；存储设备，用来存储回放控制记录，该回放控制记录说明了对所述感觉作品数据的回放的改变，该回放控制记录包括感觉作品适用性标识符，其可用来确定所述回放控制记录是否可适用于感觉作品；参考帧；以及至少一个更改编码，该更改编码定义了相对于所述参考帧的将应用到感觉作品的回放的改变；感觉作品输出端口，用于给感觉输出设备发送信息，以实现感觉作品数据的回放；以及处理器，用于藉由通过所述感觉作品输出端口输出已改变的感觉作品数据来改变所述感觉作品数据的回放。
2. 权利要求1的感觉作品回放系统 信息。
3. 权利要求1的感觉作品回放系统 算机可读介质上。
4. 权利要求3的感觉作品回放系统 动的。
5. 权利要求1的感觉作品回放系统 输出控制器。
6. 权利要求1的感觉作品回放系统
7. 权利要求1的感觉作品回放系统 输出控制器。
8. 权利要求1的感觉作品回放系统 放感觉作品。
9. 权利要求8的感觉作品回放系统 数据的回放以跳过该感觉作品的至少 一 个片段。
10. 权利要求8的感觉作品回放系统，其中处理器用于改变感觉作品 数据的回放从而将感觉作品的片段重新排序。其中，感觉作品数据包括视听其中，感觉作品数据存储在计其中，计算机可读介质是可移其中感觉作品输入端口是输入/其中，存储设备是存储器。 其中感觉作品输出端口是输入/其中感觉作品数据可被用来回其中处理器用来改变感觉作品
11. 权利要求8的感觉作品回放系统，其中处理器用来改变感觉作品 数据的回放从而叠加信息到该感觉作品上。
12. 权利要求8的感觉作品回放系统，其中处理器用来改变感觉作品 数据的回放速度
13. 权利要求8的感觉作品回放系统，其中处理器用来改变感觉作品 数据的回放从而插入片段。
14. 权利要求1的感觉作品回放系统，其中回放控制记录被表示为元 数据。
15. 权利要求1的感觉作品回放系统，其中感觉作品回放系统是数字 录像机。
16. —种存储在计算机可读介质上的回放控制记录，该回^:控制记录 包括感觉作品适用性标识符，用于确定该回放控制记录是否可适用于感觉作品；参考帧；以及至少一个更改编码，该更改编码定义了相对于所述参考帧的将应用于 该感觉作品的回;j文的改变，其中该回放控制记录可被感觉作品回^:设备用来改变所述感觉作品 的回i文。
17. 权利要求16的回放控制记录，其中感觉作品适用性标识符是分 级的。
18. 权利要求17的回放控制记录，其中感觉作品适用性标示符包括 节目标识符。
19. 权利要求18的回放控制记录，其中感觉作品适用性标示符还包 括源标识符。
20. 权利要求18的回放控制记录，其中感觉作品适用性标示符还包 括格式标识符。
21. 权利要求16的回放控制记录，其中参考帧是隐式的。
22. 权利要求16的回放控制记录，其中参考帧定义了参考发生。
23. 权利要求22的回放控制记录，其中参考发生是特定帧， 该特定帧的发生定义了历元时间t0。
24. 权利要求22的回放控制记录，其中参考发生包括帧序列，该帧 序列的发生定义了历元时间to.。
25. 权利要求22的回放控制记录，其中参考发生是计算值，使得可 使用感觉作品数据执行计算并且将结果与该计算值进行比较，以识别历元 时间to.。
26. 权利要求16的回放控制记录，其中参考帧是基于事件的。
27. 权利要求16的回放控制记录，其中该至少一个更改编码的每一 个包括相对于参考帧的时间标识符；和 改变描述。
28. 权利要求27的回放控制记录，其中时间标识符是相对于参考帧 的时间t。
29. 权利要求27的回放控制记录，其中改变描述包括由以下项组成 的组中的一个或多个删除；重新排序；插入；叠加；呈现；和修改。
30. —种改变感觉作品的回放的方法，该方法包括 接收回放控制记录；接收感觉作 品;基于所述回放控制记录改变所述感觉作品；以及 输出数据以促进由感觉作品回放设备对已改变的感觉作品的回放。
31. 权利要求30的方法，其中接收回放控制记录包括接收感觉作品适用性标识符，该感觉作品适用性标识符用于确定回放 控制记录是否可适用于感觉作品； 参考帧；以及至少一个更改编码，该更改编码定义了相对于参考帧的将应用于感觉 作品的回放的改变。
32. 存储在计算机可读介质上的软件，该软件包括 用于访问回放控制记录的代码段；用于读取感觉作品的代码段；用于基于所述回放控制记录改变感觉作品的代码段；和 用于输出数据以促进由感觉作品回放设备对已改变的感觉作品的回 放的代码段。
33. —种用来控制感觉作品回放的设备，该设备包括 用来存储回放控制记录的存储设备，该回放控制记录说明了对感觉作品的回放的改变，该回放控制记录包括 参考帧；以及至少一个更改编码，该更改编码定义了相对于所述参考帧的将应用于 所述感觉作品的回it的改变；基于所迷回放控制记录产生至少一个控制信号的逻辑；和控制信号端口 ，用于输出该至少 一 个控制信号以更改所述感觉作品回 ^U殳备的4亍为。
34. 权利要求33的设备，其中参考帧是隐式的。
35. 权利要求33的设备，其中该至少一个更改编码的每一个包括 相对于参考帧的时间标识符；以及改变描述。
36. 权利要求35的设备，其中相对于参考帧的时间标识符是隐式的。
37. 权利要求35的设备，其中改变描述包括 控制功能；和持续时间。
38. 权利要求37的设备，其中控制功能包括由以下项组成的组中的 一个或多个播放；停止； 快进； 跳转； 倒回；和 暂停。
39. 权利要求33的设备，其中该控制信号端口用于通过发送红外 (IR)控制信号而输出该至少一个控制信号从而更改感觉作品回放设备的行为。
40. —种控制感觉作品回放设备的方法，该方法包括 接收与感觉作品相关联的回放控制记录；以及输出至少一个控制信号以基于接收的回放控制记录改变所述感觉作品的回i丈。
41. 权利要求40的方法，其中输出至少一个控制信号包括输出可由 红外(IR)增强器用来控制感觉作品回放设备的信号。
42. 在服务器上， 一种回放控制记录系统包括 回放控制记录数据库；以及回放控制记录检索系统，该回放控制记录检索系统用于传输来自该数 据库的回放控制记录。
43. 权利要求42的回放控制记录系统，其中在回放控制记录数据库 中的回;^欠控制记录包括感觉作品适用性标识符，用来确定所述回放控制记录是否可适用于感 觉作品；参考帧；以及至少一个更改编码，该更改编码定义了相对于所述参考帧的将应用于 所述感觉作品的回^t的改变，其中所述回放控制记录可被感觉作品回放设备用来改变所述感觉作 品的回》文。
44. 权利要求42的回放控制记录系统，还包括回放控制记录接收系 统，该回放控制记录接收系统用于接收回放控制记录并把回放控制记录储 存在所述数据库中。
45. —种提供对感觉作品回放的控制的方法，该方法包括 存储说明对感觉作品的回放的改变的至少 一个回放控制记录； 通过计算机网络接收回放控制记录请求；响应于接收到的请求，从该至少一个回》文控制记录中提交回放控制记 录，该回放控制记录可由感觉作品回放设备用来改变感觉作品的回放。
46. 权利要求45的方法，其中存储说明对感觉作品的回放的改变的 至少一个回放控制记录包括将该至少一个回放控制记录存储在数据库中。
47. 权利要求46的方法，其中通过计算机网络接收回放控制记录请 求包括接收数据库查询。
48. 权利要求48的方法，其中从该至少一个回放控制记录中提交回 放控制记录包括提交多个回放控制记录。
49. 权利要求45的方法，还包括接收回放控制记录，并且将接收的 回放控制记录与该至少一个回放控制记录一起存储。
50. 权利要求49的方法，其中，接收和提交回放控制记录可操作以 提供协作性感觉作品回放控制系统。
51. 权利要求45的方法，还包括维护与该至少一个回放控制记录有 关的元数据，并使用维护的元数据来提供社区特征。
52. 权利要求51的方法，其中维护与该至少一个回放控制记录有关 的元数据包括记录关于该至少一个回放控制记录的反馈。
53. 权利要求52的方法，其中记录关于该至少一个回放控制记录的 反馈包括对由以下项组成的组中的一个或多个进行记录回放控制记录评论；和 回^:控制记录评价。
54. —种提供对感觉作品回放的控制的方法，该方法包括 存储至少一个回放控制记录，该回放控制记录说明了对感觉作品的回放的改变；使得该回放控制记录对于社区内的成员可用；通过计算机网络从该社区的一个或多个成员接收回放控制记录请求； 响应于接收到的请求，从该至少 一 个回放控制记录中提交回放控制记 录，该回放控制记录可由感觉作品回放设备用来改变感觉作品的回放。
全文摘要
感觉作品回放系统包括感觉作品输入端口，用于接收感觉作品数据；存储设备，用来存储回放控制记录，该记录说明了对感觉作品数据的回放的改变；感觉作品输出端口，用于发送信息到感觉输出设备，以实现对感觉作品数据的回放；及处理器，用于藉由通过感觉作品输出端口输出已更改的感觉作品数据从而更改感觉作品数据的回放。回放控制记录包括感觉作品适用性标识符，该感觉作品适用性标识符用来确定回放控制记录是否适用于感觉作品；参考帧；和至少一个更改编码，该更改编码定义了相对于所述参考帧的将应用于所述感觉作品的回放的改变。
文档编号G09B7/00GK101622655SQ200880006176
公开日2010年1月6日 申请日期2008年2月20日 优先权日2007年2月26日
发明者G·扎列夫斯基 申请人:美国索尼电脑娱乐公司