专利名称：多媒体内容搜寻方法
技术领域：
本发明有关一种影音片段搜寻方法，尤其是关于具有字幕的多媒体，利 用关键字串，快速搜寻多媒体内容中所需影音片段的方法。
背景技术：
随着多媒体科技进步，高画质影音的时代已经来临，影音多媒体将从
4. 7GB的DVD影音多媒体，迅速提升至25GB(单层)，甚至50GB(双层)的BD (蓝 光)多媒体，容量越来越大，需要更快速的搜寻方法，才能有效率找到多媒体 中所需的影音片段。
如图1所示，为先前技术多媒体内容的搜寻方法的流程。由于先前技术 多媒体的影音档是利用时间来记录影音视频序列，并将影音视频区分成数节 的场景段落形成目录，供使用者点选跳换播放。使用者亦可沿着影音一见频的 时间轴前进或后动快速连续播放，以搜寻所需影音片段。为了快速搜寻，先 前技术多媒体内容的搜寻方法，首先在步骤Pl进行播放多媒体，进入步骤 P2,当画面出现场景段落目录时，使用者藉由记忆，大致选择可能包含所需 影音片段的场景段落，转跳至该场景段落进行播放。
接着，在步骤P3利用快速键沿着时间轴前进或后退移动，快速播放影音 视频。进入步骤P4，以目视——检视播放的影音视频，搜寻需求的目标影音 片段。再进入步骤P5，确认是否找到目标影音片段？假如已找到，则恢复多 媒体正常播放，以观赏所需的影音视频，假如未找到目标影音片段，则回到 步骤P2，重复进行搜寻步骤，直到找到目标影音片段或放弃搜寻才停止。
然而，先前技术多媒体利用时间来记录影音视频序列， 一般使用者对相 似的时间序列记录容易产生混淆，无法详细记忆影音片段在几时几分几秒出 现。因此先前技术的搜寻方法，单凭记忆及盲目地毯式的搜寻方式，对容量 越来越大的影音文件，搜寻目标影音片段如同大海撈针，需要数倍的时间， 甚至徒劳无功无法找到目标影音片段，搜寻方法并无效率。虽然另有先前技 术藉由划面、声波等比对方法进行搜寻，但过程太过复杂，使用上亦不方便。
4因此，先前技术多媒体内容的搜寻方法在搜寻效率上，仍有问题亟待解决。
发明内容
本发明的目的在提供一种多媒体内容搜寻方法，藉由撷取多媒体字幕信 息，再转化成为可搜寻的索引档，以加快搜寻速度。
本发明另 一 目的在提供一种多媒体内容搜寻方法，利用搜寻出多媒体字 幕中关键字串，转跳至出现关键字串相对时间的影音视频进行播放，提高搜 寻效率。
本发明再一目的在提供一种多媒体内容搜寻方法，以自动播放模式或点 选播放模式，进行播放检视搜寻结果，增加操作选择。
为了达到前述发明的目的，本发明的多媒体内容搜寻方法，首先撷取多
媒体文件的字幕信息；辨识字幕信息的字幕图片，形成可检索的文字字幕片 段；将文字字幕片段及其字幕信息的出现时间，依序形成字幕索引档；在字 幕索引档检索关键字串，将包含该关键字串的字幕片段列表；多媒体转跳至 列表中字幕片段出现时间进行播放检视；如未搜寻到目标影音片段，键入其 他关键字串重新检索，以搜寻目标影音片段。
本发明多媒体内容搜寻方法的播放检视检索列表中字幕片段，包含自动 播放模式与点选播放模式两种模式供选择。选择自动播放模式时，自动依序 转跳至检索列表中各字幕片段的出现时间，接续进行播放检视。而选择点选 播放模式时，由使用者点选检索列表中字幕片段，再转跳至该字幕片段的出 现时间，进行播放^r一见，播放冲企视完成后，检查点选完成，未点选完成则继 续点选下一字幕片段，进行播放检视，直到点选完成。
图1为先前技术多媒体内容的搜寻方法的流程图。
图2为DVD多:! 某体文件内容的示意图。
图3为本发明字幕索引档的示意图。
图4为本发明多々某体内容搜寻方法的流程图。
图5为本发明选择播放字幕片段模式的流程图。
主要元件符号说明SI开启多媒体步骤
S2撷取字幕信息步骤
S3辨识字幕步骤
S4形成字幕索引档步骤
S5检索关键字串步骤
S6相符字幕片段列表步骤
S7播放字幕片段步骤
S8找到目标影音步骤
S9正常播放步骤
Tl选择播放模式步骤
T2自动播放模式步骤
T3自动播放检视步骤
T4点选播放模式步骤
T5点选步骤
T6播放点选检视步骤
T7点选完成步骤
具体实施例方式
有关本发明为达成上述目的，所采用的技术手段及其功效，兹举较佳实 施例，并配合附图加以说明如下。
虽然一般使用者的记忆对所需影音片段出现的时间容易产生混淆，但对 特别画面出现的声音及对话都会记忆深刻。因此，本发明多媒体内容搜寻方 法，主要是将多媒体的字幕，形成可检索的方式，让使用者以较容易忆及的 对话字串，作为搜寻多媒体内容中所需影音片段的方法。
一般多媒体的内容将字幕与影音视频文件分开存放。以DVD多媒体文件 为例，请参考图2,为DVD多媒体的文件内容。DVD多媒体一般包含影像资料 夹(VIDEO-TS)及音响资料夹(AUDI0-TS)等两个资料夹，提供影音视频。其 中影像资料夹又包含VOB、 IFO及BUP等三个资料夹，VOB资料夹内含浮见频、 音频及字幕(多国语言)信息，IF0资料夹则为播放的执行档，而BUP资料夹 是IFO资料夹的备份档。因此DVD多媒体的字幕存放在VOB资料夹中，然而 字幕是以图片的形式储存，无法进行文字检索。为了让字幕图片可检索，必需从V0B资料夹中擷取字幕信息。依字幕出
现的时间期间序列，将字幕图片——经由文字辨识软件加以辨认，转换成可 检索的文字。再将每一对话字幕片段出现的时间期间，与文字字幕一一相对
编辑，如图3所示，形成本发明的字幕索引档。字幕索引档包含可检索的字 幕片段，及其相对出现在画面的启始时间及终止时间。字幕索引档以较小时 间期间的每一句对话字幕片段作为单位。因此只要确定某一字幕片段，即可 藉由DVD多J 某体以时间为记录轴的特性，利用字幕片段的启始时间，让DVD 多媒体转跳至该字幕片段的启始时间进行播放，且在字幕片段的终止时间停 才各画面。
确定某一字幕片段，是利用所需影音片段中，所忆及的相关字串，作为 检索的关键字串，于建立的字幕索引档中，进行字串搜寻。由于相同的字串 可能出现在DVD多媒体中的多个字幕片段中，因此检索结果将列出所有包含 有该字串的多个字幕片段。再由DVD多媒体转跳至各字幕片段的启始时间进 行播放至终止时间，让使用者一一检视，以搜寻出所需影音片段。
请再参图3,举例说明字幕的检索方法，假如使用者对于DVD多媒体影 片中出现的京城夕照影音片段，相当感兴趣，想要重新欣赏该画面，即可藉 由回想京城夕照影音片段的场景对话，而以「到达京城」作为关键字串，就 可由字幕索引档中找到「我们很快就到达京城」的字幕片段，并以其启始时 间r01: 04: 10， 806」直接使DVD多i某体转跳至记录时间「 01: 04: 10,806」 进行播放，且停格在其终止时间「01: 04: 11，864」，等待使用者后续播放的 选择。因此多媒体就可以细分至每一句字幕片段为单位，作为检索的标的， 而可快速转跳至所需的画面播放，以提高搜寻效率。
如图4所示，为本发明多媒体内容搜寻方法的流程。本发明利用多々某体 的字幕作为内容搜寻的详细步骤说明如下首先在步骤S1，开启多媒体文件， 进入步骤S2，从多媒体文件的VOB资料夹中，撷取字幕信息。再进入步骤S3， 将图片的字幕——经由文字辨识软件加以辨认，转换成可检索的文字字幕片 段形式。在步骤S4，依撷取字幕信息中字幕片段出现的时间先后，将字幕片 段出现的时间启始及终止期间，与可检索的文字字幕片段——相对排列编辑， 以形成字幕索引档。
接着，进入步骤S5，键入所需影音片段的相关字串，作为检索的关键字 串，在步骤S6，以关键字串在建立的字幕索引档中进行检索，并将所有包含该关键字串的相符字幕片段列表，再进入步骤S7，由多媒体转跳至列表中各 字幕片段的启始时间进行播放，由使用者一一检视，以搜寻出所需影音片段。
然后，进入步骤S8，检查是否搜寻到所需目标影音片段？假如未搜寻到目标 影音片段，就回至步骤S5，再键入其他字串重复搜寻，假如搜寻到目标影音 片段，则进入步骤S9，使多媒体由该目标影音片段开始正常播放。
因此，本发明多媒体内容搜寻方法，即可藉由撷取多媒体字幕信息，经 由字体辨识，转化成可检索字幕索引档，再利用检索字幕索引档中关键字串， 转跳至出现关键字串片段字幕相对时间的影音视频，进行播放检视，让以较 小长度片段字幕为检索单位的字幕索引档，易于搜寻到所需的影音画面，而 可加快搜寻速度，提高搜寻效率。
此外，为方便使用者搜寻，前述本发明多媒体播放内容检索方法流程的 步骤S7，多媒体转跳至各字幕片段启始时间进行播放的过程，又可细分自动 播放模式与点选播放模式两种，供使用者播放选择。自动播放模式即由多媒 体自动依序转跳至检索列表中各字幕片段的启始时间，进行播放检视。而点 选播放模式，则由使用者检视各字幕片段，点选较可能的字幕片段，使DVD 多媒体转跳至点选字幕片段的启始时间，进行播放至终止时间，以增加使用
者的操作选择。
如图5所示，为本发明选择播放字幕片段模式的流程。本发明在前述步 骤S7播放检索列表各字幕片段中所含的细部步骤说明如下在步骤T1，首 先由使用者选择播放检索列表字幕片段的模式，假如选择自动播放模式则进 入步骤T2准备进行自动播放检索列表中字幕片段的影音片段，接着进入步骤 T2,依各字幕片段时间排序的先后，接续自动播放检索列表中各字幕片段的 影音片段进行检视，完成后进入前述的步骤S8检查搜寻到所需目标影音片 段。假如选择点选播放模式，则进入步骤T4静待使用者点选在检索列表中的 字幕片段，再入步骤T5由使用者点选检索列表中较可能的字幕片段，在步骤 T6播放使用者点选的字幕片段的影音片段进行检视，然后进入步骤T6，检查 使用者是否点选完成？假如未点选完成，则回至步骤T5继续点选下一字幕片 段，假如点选完成，则进入前述的步骤S8检查搜寻到所需目标影音片段。
因此，本发明多媒体内容搜寻方法，在步骤S7播放检索列表各字幕片段 的过程，提供自动播放模式或点选播放模式，以便让使用者能视检索列表的 多寡，适当选择过滤检视的方式，提高搜寻效率。以上所述者，仅用以方便说明本发明的较佳实施例，本发明的范围不限 于该等较佳实施例，凡依本发明所做的任何变更，于不脱离本发明的精神下， 皆属本发明申请专利的范围。
权利要求
1.一种多媒体内容搜寻方法，其步骤包含(1)撷取多媒体文件的字幕信息；(2)辨识字幕信息的字幕图片，形成可检索的文字字幕片段；(3)将文字字幕片段及其字幕信息的出现时间，形成字幕索引档；(4)在字幕索引档检索关键字串，将包含该关键字串的字幕片段列表；(5)多媒体转跳至列表中字幕片段出现时间进行播放检视；以及(6)搜寻目标影音片段。
2. 根据权利要求1所述的多媒体内容搜寻方法，其中该字幕索引档以每 一句对话字幕片段作为单位。
3. 根据权利要求1所述的多媒体内容搜寻方法，其中该字幕片段的出现 时间包含启始时间及终止时间。
4. 根据权利要求3所述的多媒体内容搜寻方法，其中该字幕索引档依字 幕片段起始时间依序排列。
5. 根据权利要求3所述的多媒体内容搜寻方法，其中该步骤(5)播放检 视多媒体由各字幕片段出现的启始时间播放至终止时间。
6. 根据权利要求1所述的多媒体内容搜寻方法，其中该步骤(5)播放检 视多媒体为自动播放模式，自动依序转跳至检索列表中各字幕片段的出现时 间，接续进行播放检视。
7. 根据权利要求1所述的多媒体内容搜寻方法，其中该步骤(5)播放检 视多媒体为点选播放模式，由使用者点选检索列表中字幕片段，再转跳至该 字幕片段的出现时间，进行播放检视。
8. 根据权利要求7所述的多媒体内容搜寻方法，其中该点选的字幕片段 播放检纟见完成后，检查是否点选完成，々i如未点选完成，则继续点选下一字 幕片段，进行播放检视，假如点选完成，则进入步骤(6)搜寻目标影音片段。
9. 根据权利要求1所述的多媒体内容搜寻方法，其中该步骤(5)播放检 视多媒体包含自动播放模式与点选播放模式两种模式供选择。
10. 根据权利要求1所述的多媒体内容搜寻方法，其中该搜寻目标影音片 段的步骤(6)包含检查是否搜寻到目标影音片段，假如未搜寻到目标影音片 段，回至步骤(4)键入其他关键字串重复检索，假如搜寻到目标影音片段，则该目标影音片段开始正常播放多媒体。
全文摘要
一种多媒体内容搜寻方法，首先撷取多媒体文件的字幕信息；辨识字幕信息的字幕图片，形成可检索的文字字幕片段；将文字字幕片段及其出现时间，形成字幕索引档；检索包含关键字串的字幕片段列表；多媒体转跳至列表中字幕片段出现时间进行播放检视；未搜寻到目标影音片段，键入其他关键字串重新检索，搜寻目标影音片段，以提升搜寻效率。
文档编号G11B27/10GK101630524SQ20081013773
公开日2010年1月20日 申请日期2008年7月18日 优先权日2008年7月18日
发明者康文俊, 李启志 申请人:广明光电股份有限公司