一种多媒体互动教学系统及教学方法
【专利摘要】本发明提供一种多媒体互动教学系统及教学方法，包括：数据采集模块：采集视频流；其特征在于，还包括：抠像模块：对采集到的视频流进行处理，将感兴趣的运动目标提取出来，获取前景图像；影像合成模块：将获取的前景图像用异形窗口的形式在所有窗口的最前端实时显示；影像传输及实时显示模块：将教师机上的含有合成影像的异形窗口通过网络实时传输到学生机并进行实时显示。本系统通过摄像头获取教师讲课画面，通过网络实时传输给抠像模块进行前景人物图像的提取，通过影像合成模块将提取出的前景人物图像以异形窗口的形式与教师机正在播放的课件叠加，在教师机实时显示，同时将合成的影像以视频流的形式通过网络实时传输给学生机，教师“钻”进电脑里。
【专利说明】一种多媒体互动教学系统及教学方法
【技术领域】
[0001] 本发明涉及多媒体教学领域，具体地讲，涉及一种多媒体互动教学系统及教学方 法。
【背景技术】
[0002] 多媒体是信息化的体现，也是社会发展的趋势，信息化的水平已经成为衡量一个 国家现代化水平和综合国力的重要标准，多媒体教育是信息化的一个部分，大力促进多媒 体教育已成为教育发展的潮流。
[0003] 教学中使用多媒体技术，有利于提高教师的专业水平，有利于教师整合教学资源。 多媒体教学技术能弥补传统教学中的不足，是新型的科学教学技术。
[0004] 现有大部分的多媒体教学系统虽然在功能方面已经比较齐全，但上课学生看电脑 的时候看不到教师的表情、动作、肢体语言，因此会遗漏老师的肢体表达信息，除此之外，其 互动性及趣味性也较差。
[0005] 从采集的视频流中提取出效果比较好的前景人物图像是本系统的关键，为了提取 效果较好的前景，需要找到好的抠像算法。
[0006] 目前抠像技术主要有蓝箱、绿箱及背景移除。蓝箱、绿箱对环境要求较高，需要搭 建纯色背景以及灯光；背景移除需要场景稳定，即摄像头画面中只有教师能动，但是对环境 要求低。
[0007] 现有的背景移除算法有帧差法、背景建模发和光流法。帧差法虽简单，但是提取出 的运动目标存在空洞；背景建模方法对背景中存在规律运动性的背景效果好，但是并不能 保证提取的运动目标不会存在空洞；光流法因其计算量大很少采用，这三种算法都有不足。 此为现有技术的不足之处。
【发明内容】
：
[0008] 本技术方案要解决的技术问题是提供一种多媒体互动教学系统及教学方法，提高 了课堂的趣味性，创新了教学模式，达到了更好的教学效果。
[0009] 本发明通过如下技术手段实现发明目的：
[0010] 一种多媒体互动教学系统，包括：
[0011] 数据采集模块：采集视频流；其特征在于，还包括：
[0012] 抠像模块：对采集到的视频流进行处理，将感兴趣的运动目标提取出来，获取前景 图像；
[0013] 影像合成模块：将获取的前景图像用异形窗口的形式在所有窗口的最前端实时显 示；
[0014] 影像传输及实时显示模块：将教师机上的含有合成影像的异形窗口通过网络实时 传输到学生机并进行实时显示。
[0015] -种多媒体互动教学方法，包括：
[0016] (1)利用摄像头进行数据采集，获取视频流；
[0017] 还包括如下步骤：
[0018] (2)对采集的视频流进行处理，将感兴趣的运动目标提取出来，获取前景图像；
[0019] (3)将获取的前景图像用异形窗口的形式在所有窗口的最前端实时显示；
[0020] (4)将教师机上的含有合成影像的异形窗口通过网络实时传输到学生机并进行实 时显示。
[0021] 作为对本技术方案的进一步限定，所述步骤（2)包括如下步骤：
[0022] (2. 1)从视频流中选取一张无人和运动物体的图像作为背景图像；
[0023] (2. 2)选择混合颜色空间中的不同颜色通道；
[0024] (2. 3)获取摄像头当前帧图像，根据步骤（2. 2)选择的颜色通道，分离出当前帧图 像和步骤（2. 1)中获取的背景图像中相对应的各颜色通道；
[0025] (2. 4)当前帧图像进行运动检测，判断是否为所要检测的运动目标，若为检测的运 动目标，则提取到该通道的前景，否则提取不到该通道的前景图像；
[0026] (2. 5)将步骤（2. 4)中获取的各颜色通道提取的前景图像进行或运算，得到效果 较好的前景图像；
[0027] (2. 6)根据步骤（2. 5)计算得到的前景图像和当前帧的彩色图像进行掩码计算， 得到彩色的前景图像；
[0028] (2. 7)重复步骤（2. 3)-(2. 6)，得到实时的前景图像，以视频流的形式输出。
[0029] 作为对本技术方案的进一步限定，所述步骤（2. 3)包括如下步骤：
[0030] 设定L(x，y)为当前帧图像在某一颜色通道上的像素灰度值，设定B(x，y)为背景 图像在某一颜色通道上的像素灰度值，设定d为前景图像在某一颜色通道上的像素灰度 值，DB(x，y)为前景图像二值化以后的像素灰度值，T为设定的阀值，有：
【权利要求】
1. 一种多媒体互动教学系统，包括： 数据采集模块：采集视频流；其特征在于，还包括： 抠像模块：对采集到的视频流进行处理，将感兴趣的运动目标提取出来，获取前景图 像； 影像合成模块：将获取的前景图像用异形窗口的形式在所有窗口的最前端实时显示； 影像传输及实时显示模块：将教师机上的含有合成影像的异形窗口通过网络实时传输 到学生机并进行实时显示。
2. -种多媒体互动教学方法，包括： (1) 利用摄像头进行数据采集，获取视频流； 还包括如下步骤： (2) 对采集的视频流进行处理，将感兴趣的运动目标提取出来，获取前景图像； (3) 将获取的前景图像用异形窗口的形式在所有窗口的最前端实时显示； (4) 将教师机上的含有合成影像的异形窗口通过网络实时传输到学生机并进行实时显 不O
3. 根据权利要求2所述的多媒体互动教学方法，其特征在于，所述步骤（2)包括如下步 骤： (2. 1)从视频流中选取一张无人和运动物体的图像作为背景图像； (2. 2)选择混合颜色空间中的不同颜色通道； (2.3)获取摄像头当前帧图像，根据步骤（2.2)选择的颜色通道，分离出当前帧图像和 步骤（2. 1)中获取的背景图像中相对应的各颜色通道； (2. 4)当前帧图像进行运动检测，判断是否为所要检测的运动目标，若为检测的运动目 标，则提取到该通道的前景，否则提取不到该通道的前景图像； (2.5) 将步骤（2.4)中获取的各颜色通道提取的前景图像进行或运算，得到效果较好 的前景图像； (2.6) 根据步骤（2.5)计算得到的前景图像和当前帧的彩色图像进行掩码计算，得到 彩色的前景图像； (2. 7)重复步骤（2. 3)-(2. 6)，得到实时的前景图像，以视频流的形式输出。
4. 根据权利要求3所述的多媒体互动教学方法，其特征在于，所述步骤（2. 3)包括如下 步骤： 设定L(x，y)为当前帧图像在某一颜色通道上的像素灰度值，设定B(x，y)为背景图 像在某一颜色通道上的像素灰度值，设定d为前景图像在某一颜色通道上的像素灰度值， DB(x，y)为前景图像二值化以后的像素灰度值，T为设定的阀值，有：
若d> =T，则判定为需要检测的运动目标，可以提取到该通道的前景图像， 若d〈T，则提取不到该通道的前景图像。
5. 根据权利要求2所述的多媒体互动教学方法，其特征在于，所述步骤（3)包括如下步 骤： (3· 1)创建主控窗口； (3.2) 主控窗口控制创建异形窗口； (3.3) 以异形窗口的形式实时显示前景图像。
6. 根据权利要求5所述的多媒体互动教学方法，其特征在于，所述步骤（3. 1)包括如下 步骤： (3.I. 1)设置主控窗口大小及风格； (3. 1.2)设置主控窗口功能模块。
7. 根据权利要求5所述的多媒体互动教学方法，其特征在于，所述步骤（3. 2)包括如下 步骤： (3.2. 1)异形窗口实时获取彩色的前景图像，作为异形窗口的背景位图； (3. 2. 2)检查背景位图的像素颜色，进行透明区域处理，当某一区域像素颜色属于事先 设定的透明区范围时，将此区域设定为透明区域，并从完整的区域中剪裁掉； (3. 2. 3)透明区域裁剪结束，完整的前景人物图像以异形窗口的形式实时显示。
【文档编号】H04N5/272GK104469089SQ201410814272
【公开日】2015年3月25日 申请日期:2014年12月23日 优先权日:2014年12月23日
【发明者】陈清奎 申请人:山东建筑大学