专利名称：一种用于书记员在庭审中对笔录进行手动和自动打点的方法
技术领域：
本发明用于涉及自动化领域，特别是一种用于法院庭审的书记员笔录记录的方 法。
背景技术：
在目前的书记员录入系统中，其输入端大多使用基于微软Office Word为编辑器 的技术进行开发，Word强大的编辑功能和良好的通用性为用户提供了很好完善的功能支 撑。但由于微软在基于Office Word的二次开发库中未提供按键输入的事件通知机制，所以 现有的笔录打点技术主要靠安装嵌入了快捷键的打点宏来实现打点，即1、创建一个word 模板文件；2、在模板中录制执行打点操作的宏，并配置好执行该宏的快捷键；3、模板文件 随程序安装到用户电脑word模板库中；4、用户在打点时，靠键入对应的快捷键执行打点操 作，由此来实现手动打点的功能。综上发明人在实现本发明的过程中，发现现有技术至少存在以下问题首先现有打点技术在打点时会在编辑器中插入记录标签，该标签在编辑器中可 视，这种可视标签大量存在会影响笔录的可读性，如果不控制标签数量，会造成笔录难以阅 读甚至无法阅读。其次激活打点模块的宏存放在word模板中，快捷键为事先设定好，用户无法按 照自己的习惯进行修改，无法提供用户良好的适用性。第三由于快捷键固定，有一定几率与其他软件的快捷键相冲突，产生兼容问题。第四快捷键为组合键，无法满足用户诸如标点符号打点等实际的需求问题，无法 实现良好的扩展性。最后由于书记员在笔录录入时，没有足够精力保证通篇笔录均通过手动打点加 入时间点，所以，只有手动打点功能的录入系统，无法满足书记员在庭审过后通过音视频文 件精确校对笔录的需求。其实现流程如下图一所示。
发明内容
有鉴于此，本发明要解决的技术问题是在笔录录入系统中，实现可编辑快捷键的 手动打点及可多元化选择配置的自动打点的方法，同时编辑器中的打点标记既可以显示， 又可以隐藏，提高笔录校对的准确性、软件的兼容性、和功能的丰富性。为解决上述技术问题，本发明的实施例提供的技术方案如下一种在庭审中对笔录进行打点的方法，其特征在于步骤1，在庭审开始时，自动加入第一个时间标签作为初始的时间标签，其中初始 的时间标签的时间设置为0 ；步骤2，当收到打点消息时，记录系统监测到输入配置项中设定的方式，并发送消 息给记录系统的打点处理模块，处理模块执行打点操作；
步骤3，记录系统判断此时是否为首次打点，如果时首次打点，则在文档的对应标 点处插入时间标签；步骤4，如果不是首次打点，则根据上一次生成的时间标签信息生成新的标签信 息；步骤5，记录系统更新时间标签的记录；并检测记录系统的配置项是否要上传带 打点信息的笔录，如果需要生成带打点信息的笔录，则向远端服务器发送笔录文件。其中所述时间标签可以由Word中书签构成，打点的时间做为修改书签的书签名 称。其中在记录系统中设置一个全局时间变量的计时器，从庭审开始时对计时，当有 打点操作时，根据全局时间变量计时器的时间变量值插入对应名字的书签。其中记录系统采用监控模块来监视用户的键入，如果键入的是用户设置好的快捷 键，则捕获用户键入的事件。其中记录系统可以设置快捷键的内容，以防止与其它软件的快捷键相冲突。其中所述步骤2中的打点消息由书记员通过快捷键手动发起。其中所述步骤2中的打点消息以具体的标点符号为标记点，将庭审过程中的每句 话的起始、结束时间记录下来；记录系统将该打点信息发送给处理模块，处理模块插入时间 标签，从而实现符号的自动打点功能。其中所述步骤2中标点符号可以为回车、换行、段落符号、章节符号或分页符号。其中所述步骤2中的打点消息来自法庭中麦克风的状态，当法庭中某个麦克风的 语音激励被激活时，记录系统则接收到指令，判断当前发言的角色，处理模块执行打点操 作，并在所述步骤3文档的对应处插入相应的时间标签，从而实现语音激励打点的功能。其中所述步骤2中的打点消息可以由记录系统中定时模块触发，每隔一定的时间 周期，处理模块执行打点操作；并在所述步骤3文档的对应处插入时间标签，从而实现时间 打点的功能。其中所述时间周期可以由用户在30秒 5分钟的范围内自由定义。其中所述步骤5中还包括在插入时间标签后，记录系统可以获得当前笔录文档中 的所有标签，并通过名称和时间进行排序，生成时间标签索引列表，以供查询。其中所述步骤5之后还包括用户根据时间标签来获取记录系统中相应的某段文 字，并将该段文字和庭审过程中录制的多媒体数据相对应；用户通过点击不同段文字来切 换庭审过程中相应的多媒体数据。其中所述步骤5之后还包括用户在通过播放器对庭审过程中的多媒体文件进行 观看时，记录系统会获取当前的多媒体文件对应的时间标签，并和播放器的时间进度相对 比，根据比较结果找到和当前多媒体数据最接近的时间标签，将记录系统中的光标跳转该 时间标签所对应文档位置。其中用户可以实现对时间标签索引列表进行增加、删除、修改、查询的功能。其中用户根据时间标签信息与其对应的文档信息生成庭审中多媒体数据所对应 的字幕文件。采用本发明涉及的技术方案，书记员可以准确的将笔录时间点与庭审录制视频时 间点相对应，方便书记员根据视频、音频进行笔录校对，保证笔录内容的正确性。
图1为现有打点功能的实现流程
图2为手动打点流程图
图3为语音激励打点示意图
图4为时间自动打点流程图
图5为时间签列表示意图
图6为视频跳转流程图
图7为笔录跳转流程图
图8为编辑时间签
图9为索引列表中增加时间签流程图
图10为索引列表中删除时间签流程图
图11为索引列表中搜索时间签流程图
图12为索引列表中替换时间签流程图
具体实施例方式为使本发明的实施例要解决的技术问题、技术方案和优点更加清楚，下面根据附 图和实施例对本发明进行详细描述本发明的实施例可以实现手动打点和自动打点。1.手动打点用户通过触发可设置的组合快捷键，在光标处插入时间点。2.自动打点①符号打点以标点符号(如，。！；等)，回车，换行，段落符，章节符，分页符为标 记点，实现可以将每句话输入的启始，结束时间记录下来。②激励打点根据从MCP发过来的指令来判断当前角色，进行打点标记。③时间打点由定时器根据用户设置的时间间隔自动插入标记点。本发明可以实现打点时时间签隐藏功能，其实现原理如下现有打点技术在打点时会在编辑器中插入记录标签，该标签在编辑器中可视，这 种可标签大量存在会影响笔录的可读性，如果不控制标签数量，会造成笔录难以阅读甚至 无法阅读。由于此原因，本方法采用了 word中插入书签的方式实现时间签的隐藏。当记录 系统收到打点消息后，打点模块会将编辑器当前光标处插入书签，书签名称为计时模块生 成的时间值，书签内容则为光标处文字。由于书签是否显示可调用接口进行设置，所以该方 法可较好的解决插入可视书签造成可读性差的问题。本发明手动打点的实现原理如下由于书记员录入系统内嵌了微软的办公软件Off ice Word软件来实现用户的编辑 等操作。但Office Word 二次开发接口中并没有提供输入单个按键的事件通知机制，因此， 在记录系统中通过监控模块监视用户的键入，如果键入的是用户设置好的快捷键，则监控 模块捕获到用户的键入并向记录系统的打点处理模块发出事件消息。打点处理模块的实现①时间签由word中的书签构成，打点时间作为改书签的书签名称。
②由于书记员需要参考庭审时录制的音视频进行笔录的校对，所以笔录的时间签 是在庭审视频开始录制时开始标记。当庭审开始时，记录系统自动加入第一个时间签(时 间为零)作为初始时间签。同时全局时间变量开始计时，每当有用户进行手动打点操作时， 打点模块根据全局时间变量值插入对应名字的书签。用户可以通过软件设置是否在word中显示该标签。用户可以设置快捷键的内容，以防与其他软件的快捷键相冲突。其实现流程如图二所示，其流程如下1)书记员开启记录系统，记录系统同时启动打点监控模块，读取配置项；2)监控模块实时监测用户输入，并与配置项进行比对，若判断出当前按键为打点 快捷键，发出打点消息；3)记录系统判断是否为首次打点，若为首次打点，则生成首个打点信息标签，插入 到对应的文档中；4)若非首次打点，则根据上次时间签信息生成新的时间签内容，同时插入到文档 光标处；5)记录系统读取当前所有时间签，生成索引列表，更新到时间签索引中去；6)记录系统根据配置项是否上传带打点信息笔录到远端服务器中；7)手动打点流程结束。本发明的自动打点实现原理如下1.符号打点以标点符号(如，。！；等)，回车，换行，段落符，章节符，分页符为标记点，实现可 以将每句话输入的启始、结束时间记录下来。该功能也是通过监控模块来监视用户的键盘 操作，如果键入的是用户设置好的符号键，则通过检测模块来捕获用户键入的事件。监控模 块判断出用户键入的是需要打点的符号之后，发送自定义消息给记录系统，记录系统收到 该消息后再通知打点模块插入时间签，从而实现符号自动打点。通过符号打点功能，系统可以获取到每句话发生的精确时间段，从而实现音视频 文件的字幕生成。2.激励打点语音激励打点需要设备控制终端的支持。设备控制终端监控麦克风状态，当某个 麦克风的语音激励被激活时，设备控制终端即向书记员录入系统发出相应的指令，系统根 据从设备控制终端发来的指令判断当前发言的角色，进行打点标记。流程如图三所示，具体流程如下1)麦克风被语音激励激活，麦克风开启；2)设备控制终端收到被激活的麦克风信息，发送麦克风地址到记录系统；3)设备控制终端发送地址信息及命令给记录系统；4)记录系统监控模块收到来自设备控制终端的命令，同时检查配置项判断是否打 开语音激励打点；5)若是，则记录系统读取配置项，根据地址信息生成时间签内容，在文档的当前光 标处插入时间签；6)结束本次语音打点。
3.时间打点时间自动打点由系统中独立的定时打点线程触发，每隔一定的时间周期，该线程 执行一次打点操作，向当前光标所在位置加入一个时间签。该时间周期由用户自设定，可在 30秒 5分钟范围内自由定义。其流程如图四所示，具体流程如下1)启动记录系统，同时打点处理模块被开启；2)记录系统读取配置项，决定是否开启时间线程模块；3)若开启时间线程模块，则时间线程开始累积时间；4)当累积到配置项中的时间周期后，打点处理模块执行打点操作，时间线程继续 累积时间；5)根据时间进行下一次打点，再次执行步骤4 ；6)结束庭审时结束时间线程，自动打点流程结束。下面具体说明时间签索引列表生成方法插入时间签后，列表生成模块通过获取书签模块获得当前笔录文档中的所有书 签，并通过名称时间进行排序，生成时间签索引列表。如图五所示其中索引点为时间签列表，取自获取到的书签名称。时间签显示内容为word书签 所标记的文档范围，记录系统内设置为打点位置到下一打点位置中间的文本内容。下面描述笔录位置与音视频播放位置相互跳转的实现1.根据笔录跳转到音视频相应位置该功能满足用户通过对笔录文档的双击操作，跳转到音视频文件的响应时间点中 去，从而达到根据庭审过程中记录的音频对笔录进行校对的目的。具体实现方法是当用户双击笔录某一段文字时，记录系统通过监控模块获取到 这一双击事件，根据事件提供的当前位置查找该位置内容所在的书签，获取该书签名称，并 将名称转化为庭审时间。将该时间传递给播放器提供的定位模块进行视频跳转，从而达到 功能的实现。具体流程图如图六所示，具体步骤为1)启动记录系统，记录系统同时开启监控模块；2)用户双击笔录文档中想要跳转的字段；3)监控模块获取到该双击事件后查找当前光标位置的书签信息；4)记录系统解析获取到的书签信息，得到时间参数；5)记录系统发送时间参数到播放器模块；6)播放器模块根据时间信息跳转到该时间位置上进行播放；7)笔录驱动视频跳转流程结束。2.根据音视频位置跳转到笔录相应位置该功能实现当用户对播放的庭审音视频文件进行定位时，使笔录跳转到时间对听 的响应文字位置处。具体实现方法是当用户拖拽播放器进度进行视频定位后，播放器模块返回定位 后的播放时间。此时系统通过微软提供的word 二次开发接口获取文档所有书签，并将书签 名称转化为时间，通过对播放时间和所有的书签时间进行比对，找出最近的一个时间签，并 跳转到此书签处，从而达到功能的实现。其流程图如图七所示，具体流程如下所述
8
1)启动记录系统，记录系统同时启动监控模块；2)用户拖拽视频播放器进度条进行定位；3)播放器处理模块获取到用户操作后定位的时间，同时触发定位事件，发送消息 和时间参数到记录系统监控模块；4)监控模块收到播放器定位事件，获取到时间参数，同时通知记录系统获取当前 笔录所有书签；5)记录系统对播放器时间和所有书签时间进行循环比对，获得与播放器时间最接 近书签；6)记录系统将当前光标跳转到该书签位置；7)结束视频驱动笔录跳转流程。下面描述对时间签进行编辑的方法1.修改时间签用户可以通过对时间签索引列表中的时间签进行编辑修改来实现该功能。既可以 对某一时间签进行修改，即修改某一时间签的内容，或该时间签的时间值，也可以对所有时 间签同时修改，即将所有时间签的时间值前移或后移某一段时间。流程图如图八所示，具体 流程如下1)用户选择需要编辑的时间签；2)编辑调整当前选中的时间签的时间值；3)读取配置项判断此次编辑的类型；4)若仅修改当前时间签，则将编辑后的值写入当前时间签，结束流程；5)若修改当前及之后的所有时间签，则遍历当前时间签之后所有的时间签并加入 增量值，保存修改值；6)结束编辑时间签流程。2.修改时间签索引列表用户也可对时间签索引列表进行增、删、改、查操作①加某一时间签到列表中去；、②在列表中删除某一时间签，同时相应的删除笔录中对应的的书签；③按关键字查找某一字段的时间签；④按关键字替换某一字段的时间签。具体流程如下图九至十二所示此外，用户还可以根据时间签内容生成视频文件对应的字幕文件。为增强庭审的 直观性，在点播视频中增加笔录字幕的显示。每个庭审生成两个笔录一个笔录原档，一个 是字幕文件。在庭审结束后，两个笔录上传到庭审点播服务器中，在用户点播操作时，字幕 文件被自动加载到播放器中，显示视频和笔录复合信息。由于通过符号打点功能，系统可以获取到每句话发生的精确时间段(精确到毫 秒)，根据时间信息和内容信息，生成标准的srt字幕文件，从而实现音视频文件的字幕复 合功能。本发明的实现方式并不受上述实施例的限制，其它任何未背离本发明的精神实质 与原理下所作的改变、修饰、替代、组合、简化，均应为等效的置换方式，都包含在本发明的保护范围之内。
权利要求
一种在庭审中对笔录进行打点的方法，其特征在于步骤1，在庭审开始时，自动加入第一个时间标签作为初始的时间标签，其中初始的时间标签的时间设置为0；步骤2，当收到打点消息时，记录系统监测到输入配置项中设定的方式，并发送消息给记录系统的打点处理模块，处理模块执行打点操作；步骤3，记录系统判断此时是否为首次打点，如果时首次打点，则在文档的对应标点处插入时间标签；步骤4，如果不是首次打点，则根据上一次生成的时间标签信息生成新的标签信息；步骤5，记录系统更新时间标签的记录；并检测记录系统的配置项是否要上传带打点信息的笔录，如果需要生成带打点信息的笔录，则向远端服务器发送笔录文件。
2.根据权利要求1所述的在庭审中对笔录进行打点的方法，其中所述时间标签可以由 Word中书签构成，打点的时间作为修改书签的书签名称，并且可以在word中插入书签的方 式实现时间签的隐藏。
3.根据权利要求2所述的在庭审中对笔录进行打点的方法，其中在记录系统中设置一 个全局时间变量的计时器，从庭审开始时对计时，当有打点操作时，根据全局时间变量计时 器的时间变量值插入对应名字的书签。
4.根据权利要求1所述的在庭审中对笔录进行打点的方法，其中记录系统采用监控模 块来监视用户的键入，如果键入的是用户设置好的快捷键，则捕获用户键入的事件。
5.根据权利要求4所述的在庭审中对笔录进行打点的方法，记录系统可以设置快捷键 的内容，以防止与其它软件的快捷键相冲突。
6.根据权利要求1所述的在庭审中对笔录进行打点的方法，所述步骤2中的打点消息 由书记员通过快捷键手动发起。
7.根据权利要求1所述的在庭审中对笔录进行打点的方法，所述步骤2中的打点消息 以具体的标点符号为标记点，将庭审过程中的每句话的起始、结束时间记录下来；记录系统 将该打点信息发送给处理模块，处理模块插入时间标签，从而实现符号的自动打点功能。
8.根据权利要求7所述的在庭审中对笔录进行打点的方法，所述步骤2中标点符号可 以为回车、换行、段落符号、章节符号或分页符号。
9.根据权利要求1所述的在庭审中对笔录进行打点的方法，所述步骤2中的打点消息 来自法庭中麦克风的状态，当法庭中某个麦克风的语音激励被激活时，记录系统则接收到 指令，判断当前发言的角色，处理模块执行打点操作，并在所述步骤3文档的对应处插入相 应的时间标签，从而实现语音激励打点的功能。
10.根据权利要求1所述的在庭审中对笔录进行打点的方法，所述步骤2中的打点消息 可以由记录系统中定时模块触发，每隔一定的时间周期，处理模块执行打点操作；并在所述 步骤3文档的对应处插入时间标签，从而实现时间打点的功能。
11.根据权利要求11所述的在庭审中对笔录进行打点的方法，所述时间周期可以由用 户在30秒 5分钟的范围内自由定义。
12.根据权利要求1所述的在庭审中对笔录进行打点的方法，所述步骤5中还包括在插 入时间标签后，记录系统可以获得当前笔录文档中的所有标签，并通过名称和时间进行排 序，生成时间标签索引列表，以供查询。
13.根据权利要求1所述的在庭审中对笔录进行打点的方法，所述步骤5之后还包括用 户根据时间标签来获取记录系统中相应的某段文字，并将该段文字和庭审过程中录制的多 媒体数据相对应；用户通过点击不同段文字来切换庭审过程中相应的多媒体数据。
14.根据权利要求1所述的在庭审中对笔录进行打点的方法，所述步骤5之后还包括用 户在通过播放器对庭审过程中的多媒体文件进行观看时，记录系统会获取当前的多媒体文 件对应的时间标签，并和播放器的时间进度相对比，根据比较结果找到和当前多媒体数据 最接近的时间标签，将记录系统中的光标跳转该时间标签所对应文档位置。
15.根据权利要求12所述的在庭审中对笔录进行打点的方法，用户可以实现对时间标 签索引列表进行增加、删除、修改、查询的功能。
16.根据权利要求1所述的在庭审中对笔录进行打点的方法，用户根据时间标签信息 与其对应的文档信息生成庭审中多媒体数据所对应的字幕文件。
全文摘要
本发明提供一种用于书记员在庭审中对笔录进行手动或自动打点的方法。在庭审开始时，自动加入第一个时间标签作为初始的时间标签，其中初始的时间标签的时间设置为0；当收到打点消息时，记录系统监测到输入配置项中设定的方式，并发送消息给记录系统的打点处理模块，处理模块执行打点操作；记录系统判断此时是否为首次打点，如果时首次打点，则在文档的对应标点处插入时间标签；如果不是首次打点，则根据上一次生成的时间标签信息生成新的标签信息；记录系统更新时间标签的记录，并检测记录系统的配置项是否要上传带打点信息的笔录，如果需要生成带打点信息的笔录，则向远端服务器发送笔录文件。通过使用本发明，可以准确的将笔录时间点与庭审录制视频时间点相对应，方便书记员根据视频、音频进行笔录校对，保证笔录内容的正确性。
文档编号G06Q10/00GK101930564SQ201010240629
公开日2010年12月29日 申请日期2010年7月30日 优先权日2010年7月30日
发明者刘卫国, 蒋国兴, 赵月军, 路向宇, 邹康 申请人:北京华夏电通科技有限公司