专利名称：在视频中注入附加信息的方法和设备的制作方法
技术领域：
本发明涉及视频播放方法和视频播放设备，更具体地涉及在视频中注入附加信息的方法和设备。
背景技术：
目前，视频广告是一个研究热点。例如，美国专利申请US20090037263A1公开了编辑视频以在该视频中包括广告的系统和方法。可以基于视频水线或者在逐帧的基础上将广告插入视频，这是一种强制插入和强制播放的方式，对于用户来说是一种被动的广告接受方式。图1示出了 US 20090037263A1的技术方案所达到的技术效果，在视频播放过程中，以纯文本的方式或者以滚动条的方式在画面上显示free email-www.yahoo, com。诸如优酷的一些现有网络视频，通过编程的方式，在视频头部插入Flash等广告模式，利用视频缓冲的时间来播放广告。这样的广告没有办法做到针对视频中的某一物体，更不用说能跟踪物体的移动。另外，现有技术中已经提供了许多方法和系统以确定视频对象，主要包括:通过水线添加信息，或者人工地逐帧添加信息，或者将广告添加到内容中，或者将视频分为若干段。例如，论文《基于运动信息的视频对象跟踪》(通过链接http://www.zhuoda.0rg/periodical/34343, html可得，作者李莉，2005年11月19日)公开了，在自然场景中，利用不同物体在时域具有连续性的这种特点来跟踪视频对象，把前一帧图像中的一个物体投影到当前帧。对于重叠区域用帧差作为重叠区域象素归属的度量，对露出区域利用这种分水线算法确定视频对象。该论文把活动对象的跟踪方法分成两类:基于边界的方法和基于区域的方法。基于边界的方法依赖图像边缘提供的信息，而基于区域的方法依赖于整个区域的信息(纹理或者基于运动的特性)。现实中的情况是，人们在观看视频节目时，很可能会对视频中的某件物品感兴趣，例如，某个观众可能会对视频场景中出现的椅子感兴趣，希望知道它的制作材料、生产商、价格以及哪里可以买到等等。对于时尚人士而言，很可能会对男/女主角所穿的衣服感兴趣，希望知道衣服的品牌、价格、款式等等。另一方面，商人或者视频制作者希望向用户直接提供更多的信息，举例来说，赞助商并一定希望自己的名字被附在电影结尾处，而更希望在视频播放期间用户能容易地发现他们的产品。如果赞助商提供了汽车或者服装，他们所热衷的可能是用户可以直接点击视频中的汽车而直接访问他们的网站。然而，到目前为止还没有任何一种方法将任何信息链接到视频中的移动物体或者人，例如向视频中的椅子添加广告。难点在于这把椅子可能在每两个相邻帧中保持移动。另夕卜，也没有任何一种方法由用户根据自身需求和喜好主动地选择广告和附加信息。为了克服现有技术中的以上缺陷，本发明试图建立这样一个平台，该平台使得用户能在播放的视频上找到更多感兴趣的信息，使得商家更容易地在视频中发布或注入他们的广告。
发明内容
为了克服现有技术中的缺陷，本发明提出一种在视频播放过程中隐含式地针对特定物体的广告和信息插入方式，它只是根据用户的选择来播放广告和/或信息。根据本发明的一方面，提供了 一种视频播放方法，包括:在视频播放过程中，检测用户对视频中的物体的选择；在物体信息数据库中检索物体信息；将检索到的物体信息链接到与所述物体相关的附加信息；以及向用户提供所述附加信息。在根据本发明的实施例中，用户通过鼠标点击、通过遥控器遥控、通过触摸屏触摸、或者通过键盘输入来选择视频中的物体。在根据本发明的实施例中，其中所述物体信息是所述物体在视频中的位置信息。在根据本发明的实施例中，将检索到的物体信息链接到与该物体相关的附加信息包括将检索到的物体信息映射到与该物体相关的物体链接数据库。在根据本发明的实施例中，将检索到的物体信息链接到与该物体相关的附加信息包括将检索到的物体信息链接到搜索引擎入口或者web站点。根据本发明的另一方面，提供了一种视频播放设备，包括:检测模块，用于在视频播放过程中，检测用户对视频中的物体的选择；检索模块，用于在物体信息数据库中检索物体信息；链接模块，用于将检索到的物体信息链接到与所述物体相关的附加信息；以及，附加信息提供模块，用于向用户提供所述附加信息。在根据本发明的实施例中，所述用户通过鼠标点击、通过遥控器遥控、通过触摸屏触摸、或者通过键盘输入来选择视频中的物体。在根据本发明的实施例中，所述物体信息是所述物体在视频中的位置信息。在根据本发明的实施例中，所述附加信息通过与该物体相关的物体链接数据库获得。在根据本发明的实施例中，所述附加信息通过搜索引擎或者web站点获得。根据本发明的又一方面，提供了一种在视频中注入附加信息的方法，包括:获得视频中包含的物体在视频中的位置信息；将所述位置信息映射到与所述物体相关的附加信息，所述附加信息包括广告和/或由搜索引擎、web站点提供的其他信息；当所述物体在视频播放过程中被选择时，基于所述位置信息，将该物体链接到所述附加信息。在根据本发明的实施例中，基于运动跟踪算法获得所述物体在视频中的位置信肩、O本发明提供的机制使得视频或者电影成为注入或者获取更多附加信息或广告的平台。采用运动跟踪系统，本发明为视频中的任意物体创建数据库。可以将广告或者附加信息链接到物体。当视频播放时，用户可以点击或者选择感兴趣的物体。当检测到点击或者选择时，在例如物体链接数据库中检索附加信息、搜索引擎入口或者广告并向用户呈现，其中物体链接数据库不必与视频相结合，例如web数据库。和现有技术中的视频广告相比，本发明的技术方案基于物体而不是基于水线、帧或者片段等创建数据库。物体链接数据库是开放的并且是可以改变的。举例来说，如果一个视频当前很流行，可以向数据库中添加关于例如椅子或其他物体的广告。仅仅需要将信息与链接提交给“椅子”这个关键字即可，这将生成物体链接数据库到视频中的椅子的附加链接。
因此，本发明的机制将观看附加信息或者广告的主动权完全交给了用户。与不是像现有技术中那样，广告在屏幕的某个位置(例如，角落)强制播放，无论用户喜欢与否。
下面将参照
本发明的示例性实施例。应当理解，以下附图和实施例完全出于解释本发明的基本原理的目的，并不是对本发明保护范围的限定，其中:图1示出现有技术中在视频中插入广告的例子；图2a和图2b示出根据本发明的实施例，将物体信息链接到物体链接数据库的示意性框图；图3是示出根据本发明的实施例的方法流程图；图4是在根据本发明的实施例中，隐含地链接了广告或者附加信息的视频截图；以及图5是根据本发明的实施例的视频播放器的框图。
具体实施例方式图2a和图2b示出根据本发明的实施例，将物体信息映射到物体链接数据库的示意性框图。图2a示出在制作新视频时，在拍摄过程中记录视频中的物体位置信息，建立物体信息数据库。将物体的位置信息链接或映射到物体链接数据库，物体链接数据库中包括相应的广告或者搜索引擎。图2b示出针对现有视频，将物体信息链接到物体链接数据库。具体而言，可以提取视频中的所有或者部分信息，例如男/女主角(他/她还参演了哪些影片，关于他/她的新闻，等)、男/女主角所穿的服装(谁提供了这些服装，哪里可以买到，等)、背景中的物体(例如，椅子、汽车...)、故事发生的地点、建筑物等；用所有信息创建数据库，将数据库与视频相结合，利用这样的信息，我们可以在任何帧找到该物体；向赞助商、广告代理商、商家、搜索引擎入口或者Twiki直接提供数据库接口，他们可以借此提供信息、广告链接或者内容；创建物体链接数据库，将其与视频结合；发布视频，当用户发现任何他/她喜欢的东西时，他/她可以用鼠标或者遥控器进行选择或者点击。基于物体信息数据库信息，视频播放器可以知道用户正在寻找的物体，然后搜索物体链接数据库，向用户提供附加信息。在根据本发明的各种实施例中，物体链接数据库是开放式的，实际运用中可以根据需要添加和删除附加信息。在根据本发明的方法实施例中，在视频播放时，播放器接受用户来自鼠标或遥控器的指令。当接受到点击或选择的指令后，搜索信息数据库。当搜索到选中的物体后，则联系物体链接数据库，播放商家的信息，例如文字，或视频；或者打开浏览器，指向搜索结果，或网购连接。下面将结合图3进行详细描述。在图3示出的步骤301中，播放视频内容；假设用户在视频中发现自己感兴趣的物体，例如图4中的帆船。此时，用户可以利用鼠标点击帆船或者通过遥控器等其他装置进行选择，当然，根据实际情况，用户也可以采用触摸屏或者键盘来选择视频中的物体。在使用键盘的情况下，例如可以通过某一功能键激活当前画面中所有包含外部信息的物体，通过Tab键转移焦点并用enter进行选择。在步骤302中，播放器在视频播放过程中检测到或者捕捉到用户的选择指令(即，鼠标点击或用遥控器进行选择)，接着在步骤303中检索物体信息。可以基于运动跟踪算法获得所有物体的信息。例如在该视频中，帆船的信息可以提取并存储在视频数据库中。例如，帆船可以具有这样的帧信息:从帧XXX到yyy，地址信息由X轴和I轴标注。当播放视频时，来自鼠标或者遥控器的点击(例如具有巾贞ZZZ, X轴25，y轴67的帧和位置信息)将触发检索数据库。在步骤304中，如果搜索结果存在，例如，点击的位置为，帧=23456，x = 25，y =67，搜索装置将发现该点击对应于帆船，接着，将物体信息映射到包括广告的附加信息，附加信息可以由搜索引擎或者物体链接数据库提供。在图3示出的例子中，搜索装置可以讲将链接传送到物体链接数据库，以发现外部广告、额外的介绍或者观众选项等等。最后，在步骤305中，播放器向用户播放上述附加信息。例如关于帆船的广告、对帆船的介绍或者其他可选项。其中，在步骤303中运用了运动跟踪算法，当前已存在许多关于运动跟踪算法的例子，这些运动跟踪算法提供了在播放视频时识别物体的方法。利用该算法可以为物体创建物体链接数据库，以向播放器提供用于识别用户正选择的物体的信息。这样的运动跟踪算法典型地如CamShift算法。CamShift算法的全称是“Continuously ApaptiveMean-SHIFT”，它的基本思想是视频图像的所有帧作MeanShift运算，并将上一帧的结果(即Search Window的中心和大小)作为下一巾贞MeanShift算法的Search Window的初始值，如此迭代下去，就可以实现对目标的跟踪。将MeanShift算法扩展到连续图像序列(一般都是指视频图像序列)，这样就形成了 CamShift算法。至于Mean Shift算法，主要有4步:第I步,选择窗的大小和初始位置；第2布,计算此时窗口内的Mass Center (重心)；第3步，调整窗口的中心到Mass Center ;第4步，重复2和3，直到窗口中心“会聚”，即每次窗口移动的距离小于一定的阈值。由于运动跟踪算法不是本发明的核心，在此只作简单介绍以免混淆本发明。采用运动跟踪算法,例如CamShift,跟踪播放视频中的任何特定物体都是可能的。这实现了将视频中的物体链接到注入广告、商品介绍和搜索引擎等的附加信息。图4在根据本发明的实施例中，隐含地链接了广告或者附加信息的视频截图。由于附加信息的播放根据用户的点击而触发，因此用户的观看体验不会受到任何广告的影响。换句话说，在根据本发明的方案中，视频画面上不会出现任何文本、图像、视频广告。图5示出根据本发明的实施例的视频播放器500的示意性框图。根据本发明的实施例，检测模块5001用于检测用户的选择，例如鼠标点击或者用遥控器发送的遥控信号。检索模块5002将检索对应于用户选择的物体信息。在优选实施例中，物体信息(例如帧信息、地址信息等)存储于物体信息数据库501中。链接模块5003将对应的物体信息映射或者链接到物体链接数据库502，附加信息可以是与用户选择的物体相关的广告，或者任何与该物体有关的其他信息。可选地，附加信息不仅可以由图中的数据库502提供，也可以由诸如google 的搜索引擎或者与该物体信息相关的web站点提供。本领域技术人员应当理解，以上参照附图进行的描述都是说明性的，而不是对本发明的范围的限制。在由权利要求限定的本发明的精神和范围内，本领域技术人员可以设想出各种修改和变体。
权利要求
1.一种视频播放方法，包括: 在视频播放过程中，检测用户对视频中的物体的选择； 在物体信息数据库中检索物体信息； 将检索到的物体信息链接到与所述物体相关的附加信息；以及 向用户提供所述附加信息。
2.如权利要求1所述的方法，其中所述用户通过鼠标、遥控器、触摸屏或者键盘来选择视频中的物体。
3.根据权利要求1或2所述的方法，其中所述物体信息是所述物体在视频中的位置信肩、O
4.如权利要求1所述的方法，其中，将检索到的物体信息链接到与该物体相关的附加信息包括将检索到的物体信息映射到与该物体相关的物体链接数据库。
5.根据权利要求1所述的方法，其中，将检索到的物体信息链接到与该物体相关的附加信息包括将检索到的物体信息链接到搜索引擎入口或者web站点。
6.一种视频播放设备，包括: 检测模块，用于在视频播放过程中，检测用户对视频中的物体的选择； 检索模块，用于在物体信息数据库中检索物体信息； 链接模块，用于将检索到的所述物体信息链接到与所述物体相关的附加信息；以及 附加信息提供模块，用于向用户提供所述附加信息。
7.如权利要求6所述的设备，其中所述用户通过鼠标、遥控器、触摸屏或者键盘来选择视频中的物体。
8.根据权利要求6或7所述的设备，其中所述物体信息是所述物体在视频中的位置信肩、O
9.如权利要求6所述的设备，其中，所述附加信息通过与该物体相关的物体链接数据库获得。
10.根据权利要求6所述的设备，其中，所述附加信息通过搜索引擎或者web站点获得。
11.一种在视频中注入附加信息的方法，包括: 获得视频中包含的物体在视频中的位置信息； 将所述位置信息映射到与所述物体相关的附加信息，所述附加信息包括广告和/或由搜索引擎、web站点提供的其他信息； 当所述物体在视频播放过程中被选择时，基于所述位置信息，将该物体链接到所述附加信息。
12.根据权利要求11所述的方法，其中基于运动跟踪算法获得所述物体在视频中的位置信息。
全文摘要
本发明提出一种在视频播放过程中隐含式地针对特定物体的广告和信息插入机制。根据本发明的一方面，提供了一种视频播放方法，包括在视频播放过程中，检测用户对视频中的物体的选择；在物体信息数据库中检索物体信息；将检索到的物体信息链接到与所述物体相关的附加信息；以及向用户提供所述附加信息。本发明还涉及相应的视频播放设备以及一种在视频中注入附加信息的方法。
文档编号G06Q30/02GK103207862SQ201210010999
公开日2013年7月17日 申请日期2012年1月13日 优先权日2012年1月13日
发明者孙志方, 崔晓军, 闫敏, 雷娜志 申请人:阿尔卡特朗讯公司