专利名称：远程会议终端设备,远程会议系统,和远程会议方法
技术领域：
本发明涉及远程会议终端设备，远程会议系统，和用于使用通信线路进行远程会议的远程会议方法。
背景技术：
通常，作为用于在多点间进行远程会议的远程会议系统，已提出一种结构，包含多个能发送声音信号和图像信号的移动单元，通过通信网络连接至这些移动单元的主站，配备于主站并能识别声音信号以及在动态和静态图像之间切换的图像传输装置，以及多个接至图像传输装置并能显示所有移动单元图像的监视器。
在上述结构中，所有移动单元条件的静态图像被显示在监视器上。然后，各移动单元记录动态图像获得的图像信号随着声音信号一起被传送至主站的图像传输装置，使用中的移动单元由图像传输装置根据来自各移动单元的声音信号识别，由此只有投射在监视器上的对应使用中的移动单元的图像被从静态切换至动态图像。因此，所有移动单元的静态图像可被监控且使用中的移动单元的动态图像可不通过特地对主站进行选择操作而被显示在监示器上(日本未经审查的专利公开号H5-153585)。
然而，在上述公开文件中描述的远程会议系统中，因为不论是否在使用中所有移动单元都将动态图像的图像信号传送至主站，所以移动单元和主站间的网络通信量很容易过度增长，所以问题在于动态图像的质量下降，仍需要减少图像信号的数据量。
发明内容
所以本发明的目的在于提供一种远程会议终端设备，远程会议系统，和能通过良好的图像质量等等检查特别重要的内容防止通信网络中的通信量扩张的远程会议方法。
本发明是通过通信网络发送和接收图像信号和声音信号进行远程会议的远程会议终端设备，该远程会议终端设备包含通过拍摄图像生成图像信号的图像拍摄装置；将所述图像信号转换为对应于通信网络的信号模式并输出所转换的信号的图像输出处理单元；随着图像拍摄进行声音检测，从而生成对应于该声音的音量的声音信号的麦克风；将声音信号转换为对应于通信网络的信号模式并输出所转换信号的声音输出处理单元；以及根据声音信号的音量来增加或减少从图像输出处理单元输出的图像信号数据量的图像输出处理控制单元。
本发明还可配置为图像输出处理单元包含压缩图像信号的图像编码解码单元，并且图像输出处理控制单元通过改变所述图像编码解码单元中的图像信号压缩比来增加或减少数据量。
本发明还可配置为图像输出处理控制单元至少与图像编码解码单元的编码单元和声音输出处理单元的发送帧存储器相连接，图像输出处理控制单元装载发送帧存储器发送的声音信号，并根据所装载的声音信号的音量信息将与图像信号数据量的增加或减少相关联的指令信号发送至编码单元。
本发明还可配置为图像输出处理控制单元判断输入的所装载的声音信号音量信息是否为预定值或以上，并且指令信号被发送至编码单元，如果判断结果表明所述音量信息至少为预定值，则图像信号以低压缩比数据获取，如果判断结果表明所述音量信息小于预定值，则图像信号以高压缩比数据获取。
本发明还可配置为图像设置为以低压缩率数据获取时，如果判断结果表明音量信息小于预定值，所述判断一直重复进行直至经过预定时段，如果仍然判定音量信息小于预定值，则将指令信号发送到编码单元从而以高压缩比数据获取图像信号。
本发明还可配置为图像输出处理单元包含停止图像信号发送的门控，并且图像输出处理控制单元在门控中通过以固定间隔停止图像信号发送来增加或减少数据量。
本发明的远程会议系统，包含多个具有上述构型的远程会议终端设备；以及连接远程会议终端设备以交换数据的通信网络。
本发明是通过通信网络发送和接收图像信号和声音信号进行远程会议的远程会议通信方法，其中当通过拍摄图像生成的图像信号被变换为对应于通信网络的信号模式并输出时，根据检测随图像拍摄的声音而生成的声音的音量来增加或减少图像信号的数据量。
图1是根据实施例的远程会议系统的示意图；图2是远程会议终端设备显示屏的说明图；图3是表示通信图像处理程序的流程图；以及图4是根据实施例的远程会议系统示意图。
具体实施例方式
以下参照图1至图4说明本发明实施例。
(远程会议系统)如图1所示，根据本实施例的远程会议系统具有通信网络2，例如公用线和专用线，将在后面对其说明的用于通过通信网络2传送和接收图像信号和声音信号进行远程会议的远程会议终端设备1，发送，MCU 3(多点控制单元)，其控制通信网络2内的各远程会议终端设备1之间的多点连接，以及为用户管理远程会议终端设备1的组件服务器4。应注意到远程会议终端设备1，MCU 3，和组件服务器4是从市场上可买到的工作站，个人计算机(PC)，网络连接装置等等配置的。远程会议终端设备1的功能由例如工作站，PC，网络连接装置等的硬件，和使用这些硬件资源的软件处理实现。
MCU 3配置成为同时连接三个或三个以上点以切换或混合视频和声音来结合/分配视频/声音，从而实现远程会议。具体地说，MCU 3配置为可对各会议的已用资源进行设置，并可对由通信速率，音频速率，视频速率，视频期，屏幕分割数，视频协议，由接口类型，连接类型，IP地址，电话号码，信号端口，线路通道数和与会者声音音量组成的与会者设置信息，用于开始预订会议的时间和日期，和持续时间信息进行设置。
此外，组件服务器4连接至远程会议终端设备1及其他具有组件客户端功能块的终端设备，并且具有通过使用远程会议终端设备1在一组用户中进行协作需要的数据库，以及管理该数据库的数据库服务器。此外，组件服务器4具有用于通过给与会者的电子邮件进行会议通知的会议预定功能，用于管理时间表的时间表管理功能，及其他功能。
(远程会议终端设备1)用于如上所述配置的远程会议系统的远程会议终端设备1具有通过拍摄例如人等对象的图像生成图像信号的图像拍摄装置11，例如液晶显示装置的在屏幕上显示图像信号的显示装置12，以及连接至图像拍摄装置11和显示装置12的图像处理部13。
图像处理部13具有图像发送转换功能，将图像拍摄装置11发送的图像信号转换为对应于通信网络2的信号模式，和图像接收转换功能，将通信网络2发送的图像信号转换为对应于显示装置12的信号模式。图像发送转换功能通过将图像拍摄装置11发送的图像信号转换为数字信号的A/D转换器21，存储由A/D转换器21数字化的图像信号的发送帧存储器22，图像编码解码部23的编码部24等来实现。此外，图像接收转换功能由图像编码解码部23的解码部25，存储从解码部25输出的图像信号的接收帧存储器27，将图像信号转换为模拟信号的D/A转换器26等来实现。
图像编码解码部23的编码部24配备有将未压缩图像数据转换为压缩文件形式的图像编码解码器。此外，编码部24能够在高压缩比和低压缩比两状态之间改变压缩过程。编码部24能在高压缩比和低压缩比间切换从而当从以下描述的计算部51输入声音检测信号时，数据以低压缩比压缩，在输入声音检测信号以外的情况下，以高压缩比压缩数据。此外，图像编码解码部23的解码部25包含将图像数据的压缩文件还原为未压缩文件的图像编码解码器。应注意到图像编码解码器不进行当解码压缩文件(打开)时可完全将压缩文件恢复为初始文件的无损压缩，但是进行有损压缩，用于将文件处理至不损害初始文件质量的程度。
此外，同样如图2所示，远程会议终端设备1还包含，与由图像拍摄装置11进行的图像拍摄一起进行声音检测，从而生成对应于声音音量的声音信号的麦克风14，输出作为声音的声音信号的扬声器15，和连接至麦克风14和扬声器15的声音处理部16。
声音处理部16具有声音发送转换功能，将发自麦克风14的声音信号转换为对应于通信网络2的信号模式，和声音接收转换功能，将发自通信网络2的声音信号转换为对应于扬声器15的信号模式。声音发送转换功能通过将发自麦克风14的声音信号转换为数字信号的A/D转换器31，存储由A/D转换器31数字化的声音信号的发送帧存储器32，声音编码解码部33的编码部34等实现。此外，声音接收转换功能由声音编码解码部33的解码部35，存储从解码部35输出的声音信号的接收帧存储器37，将声音信号转换为模拟信号的D/A转换器36等等实现。
如同图像编码解码部23一样，声音编码解码部33具有声音编码解码器，它在编码部34中将未压缩数据转换为压缩文件形式并在解码部35中将压缩文件解码(打开)为未压缩文件。
图像处理部13和声音处理部16连接至接口部54。接口部54连接至通信网络2。远程会议终端设备1能通过通信网络2与其它远程会议终端设备1，MCU 3，或组件服务器4进行数据通信。
接口部54通过处理控制数据等的低速数据处理部53连接至计算部51。计算部51连接至低速数据处理部53，图像编码解码部23的编码部24，和声音处理部16的发送帧存储器32，并能发送声音检测信号至编码部24并从发送帧存储器32读取声音信号。
计算部51包含CPU(中央处理单元)，存储器等，并控制远程会议终端设备1的操作。具体地说，例如，通过执行图3所示的通信图像处理程序，在将由图像拍摄生成的图像信号转换为对应于通信网络2的信号模式并输出已转换信号时，图像信号的数据量根据进行图像拍摄时由检测声音生成的声音音量增加或减少。因此，当防止通信网络2中的通讯量扩展的同时，通过好的图像质量等等，能检查特别重要的内容。换句话说，计算部51储存数据从而根据在进行图像拍摄时通过检测声音生成的声音的音量增加或减少图像信号数据量的通信图像处理程序能被执行，这样当防止通信网络2中的通信量扩大时能通过良好的图像质量等检查特别重要的内容。
此外，例如键盘或鼠标的操作部52，和用户信息处理部17连接至计算部51。用户信息处理部17配备有网页浏览器功能块41，组件客户端功能块42，邮件发送/接收功能块43，等等。因此，远程会议终端设备1能利用网页浏览器功能块41查看因特网上存在的网页，也能利用邮件发送/接收功能块43向和从其它远程会议终端设备1等等发送或接收邮件。此外，远程会议终端设备1能利用组件客户端功能块42通过组件服务器4在其它连接具有组件客户端功能块的远程会议终端设备1的用户组中进行协同工作。例如，能通过组件服务器4发送电子邮件给各远程会议终端设备1或其它终端设备来告知远程会议以预订远程会议，或能使用网页浏览器功能块41进行与远程会议有关的细节准备。
(远程会议终端设备1的屏幕显示)如图2所示，如上所述配置的远程会议终端设备1显示与会者显示部61，该显示部显示远程会议与会者的动态图像，以及资源显示部62，该显示部显示例如用于会议的数据和时间表的资源。与会者显示部61数目相应于与会者数目。与会者显示部61在屏幕上显示发言与会者的高质量动态图像，同时在屏幕上显示不发言的与会者的低质量动态图像。
应当指出在本实施例中显示发言与会者的与会者显示部61配置为显示高质量图像。然而，配置实例不局限于此实例，这样，例如，可提高与会者显示部61的图像质量并可扩大与会者显示部61本身，或者可将与会者显示部61上的显示位置变为中央等。
(远程会议系统和远程会议终端设备1的操作)以上了解释远程会议系统的操作，并参照图3所示的通信图像处理程序解释远程会议终端设备1的操作。
在组件服务器4中管理会议时间表。当决定在预定时间和日期进行会议时，用于通知会议的邮件被从组件服务器4发送到具有组件客户端功能块的远程会议终端设备1或其它终端设备。接收会议通知的人将远程会议终端设备1的图像拍摄装置11，麦克风14等设置为操作状态，利用用户信息处理部17的网页浏览器功能块41读取会议中要求的信息，如图2所示，并使资源显示部62显示信息为会议作准备。然后，通过操作操作部52，接收会议通知的人向组件服务器4报告会议准备已完成。
当在图像处理部13中会议准备完成后，，通过图像拍摄装置11拍摄与会者图像而获得的图像信号被装载至A/D转换器21，转换为数字信号，暂时存储在发送帧存储器22中，此后在图像编码解码部23的编码部24中以基于声音检测信号的压缩比进行压缩。压缩图像信号从图像处理部13输出至接口部54，并经由MCU 3通过通信网络2被发送至其它远程会议终端设备1，或通过通信网络2直接发送至其它远程会议终端设备1。此外，通过通信网络2接收的图像信号由解码部25解码(打开)，暂时保存在接收帧存储器27，通过D/A转换器26转换为模拟信号，然后输出到显示装置12。应注意到自身图像信号也由接收帧存储器27或未显示的显示电路输出到显示装置12。如图2所示，例如，在显示装置12的与会者显示部61上显示四个与会者的动态图像。
此外，在声音处理部16中，通过利用麦克风14收集与会者声音而获得的声音信号被装载至A/D转换器31，转换为数字信号，并暂时保存在发送帧存储器32中。然后信号从发送帧存储器32输出至计算部51，输出到声音编码解码部33，并通过声音编码解码部33的编码部34以预定压缩比压缩。此后，压缩声音信号被从声音处理部16输出至接口部54，并经由MCU 3通过通信网络2被发送至其它远程会议终端设备1，或通过通信网络2直接发送至其它远程会议终端设备1。通过通信网络2接收的声音信号通过解码部35解码(打开)，暂时保存在接收帧存储器37，通过D/A转换器36转换为模拟信号，然后输出到扬声器15。如图2所示，与会者的讲话作为声音从远程会议终端设备1的扬声器15输出。
当图像信号和声音信号以如上所述的方式进行各种处理时，在计算部51中执行图3所示的通信图像处理程序。具体地说，首先，从发送帧存储器32装载声音信号(S1)，并根据声音信号计算声音音量(S2)。然后，判断音量是否为预定值或以上(S3)。如果音量为预定音量或以上(S3，是)，则声音检测信号被输出到图像编码解码部23，借此将图像编码解码器设置为低压缩比(高分辨率图像质量)。因此，输出到通信网络2的图像信号数据量变大，但是重要的发言人的与会者显示部61的高质量动态图像显示在所有远程会议终端设备1中(S4)。然后，分辨率标志被设置为″1″(S5)以指示图像质量为高，开始从图像质量被转换为高质量起计算经过时间段(S6)，并且此后结束程序。
当音量不在预定值以上(S3，否)，判断此刻指示图像质量状况的分辨率标志是否是″1″(S7)。如果分辨率标志不是″1″(S7，否)，则判定图像具有低分辨率质量，那就是说图像信号以高压缩比压缩，并且程序重新从S1开始执行。另一方面，当指示高质量的分辨率标志是″1″(S7，是)，则判断自从图像质量转换为高质量后是否已经过预定时间段(S8)。如果还没有经过预定时间段(S8，否)，则程序重新从S1开始执行。因此，即使讲话暂时中断，在预定时间段内维持高质量，借此能减少图像扭曲。
当经过预定时间段时(S8，是)，停止向图像编码解码部23输出声音检测信号，借此将图像编码解码器设置为高压缩比(低分辨率图像质量)。因此，输出到通信网络2的图像信号数据量变得很小并且能减少通信网络2中的通信量(S9)。此后，设置分辨率标志为″0″以指示图像质量为低(S10)，然后结束程序。
如上所述，本实施例的远程会议终端设备1是用于由通过通信网络2发送/接收图像信号和声音信号进行远程会议，并包含图像拍摄装置(图像拍摄装置11等)，其通过拍摄图像生成图像信号；输出图像处理部(图像处理部13等)，其将图像信号转换为对应于通信网络2的信号模式并输出已转换信号；麦克风(麦克风14等)，它与图像拍摄一起进行声音音量检测，从而生成相应于声音音量的声音信号；声音输出处理部(声音处理部16等)，它将声音信号转换为对应于通信网络2的信号模式并输出已转换信号；以及输出图像处理控制部(计算部51等等)，它根据声音信号的音量增加或减少从输出图像处理部输出的图像信号数据量。
根据以上配置，由于能根据声音信号音量增加或减少发送至通信网络2的图像信号数据量，声音信号就能被用作用于切换图像质量或屏幕更新间隔的开关。例如，利用远程会议中的声音信号音量检测特别重要的图像，并且为将图像质量设置为高质量而增加图像的图像信号数据量。因此，相比于将所有相同数据量的图像信号发送至通信网络2的传统方法，在防止通信网络2中的通信量扩大时通过良好的图像质量等能检查特别重要的内容。
此外，本实施例的图像输出处理部具有压缩图像信号的图像编码解码部23，并且图像输出处理控制部配置为通过改变图像编码解码部中的图像信号压缩比来增加或减少数据量。应注意到本实施例通过使用两种图像质量，即高质量和低质量说明压缩比的变化，但是实例不局限于此实施例，并且这样可以有三种以上图像质量，并且压缩比可线性变化以获得与音量成比例的高质量。
根据以上配置，当图像是动态图像时，动态图像质量在重播和显示所述动态图像时变化。然而，可使所有远程会议终端设备1间的动态图像的移动一致，这样以上配置在实时性方面的性能可以十分出色。
此外，本实施例的远程会议系统包含多个具有以上配置的远程会议终端设备1，和连接远程会议终端设备1以交换数据的通信网络2。依据这种配置，例如，利用远程会议中的声音音量信号检测特别重要的图像，并且为获得高质量而增加图像的图像信号数据量，借此在防止通信网络2中的通信量扩大时能通过良好的图像质量等检查特别重要的内容。
此外，本实施例的远程会议通信方法是用于由通过通信网络2发送/接收图像信号和声音信号进行远程会议的方法，其中当通过拍摄图像生成的图像信号被变换为对应于通信网络2的信号模式并输出时，当进行图像拍摄时根据检测声音生成的声音的音量来增加或减少图像信号数据量。依据这种配置，由于能根据声音信号的音量增加或减少发送至通信网络2的图像信号数据量，声音信号就能被用作用于切换图像质量或屏幕更新间隔的开关。所以，当防止通信网络2中的通讯扩展时，通过好的图像质量等能检查特别重要的内容。
在本实施例中，图像编码解码部23中的图像编码解码器的压缩比是变化的，并且从而增加或减少图像信号数据量，但是实例不局限于此实例。具体地说，如图4所示，在编码部24的前端上配备了能停止发送图像信号的门控71(门控)，并且计算部51(图像输出处理控制部)以预定间隔停止图像信号在逻辑门控71发送，由此可增加或减少数据量。依据这种配置，当图像是动态图像时，在所有远程会议终端设备1间发生动态图像运动中的波动，但是由于可使每个远程会议终端设备1的图像质量一致，就能获得良好可识别性。应注意到门控71可设置在发送帧存储器22的前端或A/D转换器21的前端门控。另外，远程会议终端设备1可以以门控71和图像编码解码器的压缩比改变图像信号数据量。
以上已经说明了本发明的实施例，但以上说明仅仅是具体实例并且不特定地限制本发明，因此这样能改变具体配置等等的设计。应注意到实施例中说明的操作和效果仅仅详述了由本发明产生的最佳操作和效果，这样根据本发明的操作和效果不局限于本发明的实施例中说明的。
权利要求
1.一种远程会议终端设备，通过通信网络发送和接收图像信号和声音信号进行远程会议，其特征在于，该远程会议终端设备包含通过拍摄图像生成图像信号的图像拍摄装置；将所述图像信号转换为对应于所述通信网络的信号模式并输出该转换的信号的图像输出处理单元；随着图像拍摄而进行声音检测，从而生成对应于该声音的音量的声音信号的麦克风；将所述声音信号转换为对应于所述通信网络的信号模式并输出该转换的信号的声音输出处理单元；以及根据所述声音信号的音量来增加或减少从所述图像输出处理单元输出的图像信号的数据量的图像输出处理控制单元。
2.如权利要求1所述的远程会议终端设备，其特征在于，所述图像输出处理单元包含压缩所述图像信号的图像编码解码单元，并且所述图像输出处理控制单元通过改变所述图像编码解码单元中的图像信号压缩比来增加或减少所述数据量。
3.如权利要求2所述的远程会议终端设备，其特征在于，所述图像输出处理控制单元至少与所述图像编码解码单元的编码单元和所述声音输出处理单元的发送帧存储器相连接，所述图像输出处理控制单元装载所述发送帧存储器发送的声音信号，并根据所装载的声音信号的音量信息将与所述图像信号的数据量的增加或减少相关联的指令信号发送至所述编码单元。
4.如权利要求3所述的远程会议终端设备，其特征在于，所述图像输出处理控制单元判断输入的所述装载的声音信号音量信息是否为预定值或以上，并且所述指令信号被发送至所述编码单元，如果判断结果表明所述音量信息至少为所述预定值，则所述图像信号以低压缩比数据获取，如果判断结果表明所述音量信息小于预定值，则所述图像信号以高压缩比数据获取。
5.如权利要求4所述的远程会议终端设备，其特征在于，当前图像设置为以低压缩率数据获取时，如果所述判断结果表明所述音量信息小于所述预定值，所述判断一直重复进行直至经过预定的时段，并且如果仍然判定所述音量信息小于所述预定值，则将所述指令信号发送到所述编码单元使得所述图像信号以高压缩比数据获取。
6.如权利要求1所述的远程会议终端设备，其特征在于，所述图像输出处理单元包含停止图像信号发送的门控，并且所述图像输出处理控制单元通过在门控中以固定间隔停止图像信号发送来增加或减少所述数据量。
7.一种远程会议系统，其特征在于，包含多个如权利要求1所述的远程会议终端设备；以及连接所述远程会议终端设备以交换数据的通信网络。
8.一种远程会议通信方法，通过通信网络发送和接收图像信号和声音信号进行远程会议，其特征在于，当通过拍摄图像生成的图像信号被变换为对应于所述通信网络的信号模式并输出时，根据检测随着图像拍摄的声音而生成的声音的音量来增加或减少所述图像信号的数据量。
全文摘要
本发明提供一种通过通信网络发送/接收图像信号和声音信号进行远程会议的远程会议终端设备。该远程会议终端设备包含通过拍摄图像生成图像信号的图像拍摄装置；将所述图像信号转换为对应于通信网络的信号模式并输出所转换的信号的图像输出处理单元；随着图像拍摄进行声音检测，从而生成对应于该声音的音量的声音信号的麦克风；将所述声音信号转换为对应于通信网络的信号模式并输出已转换信号的声音输出处理单元；以及根据所述声音信号的音量来增加或减少从所述图像输出处理单元输出的图像信号数据量的图像输出处理控制单元。
文档编号H04N7/15GK1949713SQ20061015379
公开日2007年4月18日 申请日期2006年9月14日 优先权日2005年9月14日
发明者富士本淳 申请人:阿鲁策株式会社