情绪分析装置、方法及记录该方法程序的可机读存储介质与流程

文档序号:17727176发布日期:2019-05-22 02:35阅读:154来源:国知局
情绪分析装置、方法及记录该方法程序的可机读存储介质与流程

本发明涉及一种情绪分析技术。具体讲,就是涉及一种提供诱导被测试者表达情绪的影像内容从而分析表露出的被测试者情绪的装置、方法及记录有执行该方法的程序的可机读存储介质。



背景技术:

所谓“心理测验”,是指为了通过测定某个人的智力、性格等心理以便有助于对该人进行更深层次且分析性的了解,而对受验者执行一连串的心理学测定程序,通过此举可以对精神病理、适应性、性格倾向等个人的心理特性进行评估。心理测验按照标准化的方式由受过专业培训的临床医生执行。心理测验大致可分为客观测验和投射测验(projectivetest)。

【先行技术文献】

【专利文献】

韩国公开专利第2014-0053426号,2014年05月08日公开,名称为提供三维心理测验服务的方法及服务器。

发明详述

所要解决的技术问题

本发明的目的在于,提供一种通过提供诱导被测试者表达情绪的影像内容从而分析表露出的被测试者情绪的装置、方法及记录有执行该方法的程序的可机读存储介质。

解决技术问题的方法

为了实现上述目的,依据本发明理想实施例用于情绪分析的分析服务器,包括:通信模块,其与分析装置进行通信;存储模块,其存储诱导影像,该诱导影像提供诱导被测试者表达多种情绪中的任何一种情绪的刺激;以及控制模块,其通过所述通信模块向所述分析装置传输所述诱导影像,之后从所述分析装置接收显示被测试者对所述诱导影像反应的观察数据后,再从所述观察数据中导出被测试者表达情绪的频率。

进一步地,所述诱导影像,包括:表现影像,该表现影像包括:显示以表情表现情绪的卡通人物的图像,该情绪为诱导被测试者以要表达的情绪;及为了使所述被测试者讲述感受所述情绪的经验,所述卡通人物向所述被测试者提问的声音以及共鸣影像,该共鸣影像包括:显示所述卡通人物感受到所述情绪时情况的图像;及所述卡通人物对所述情况进行说明的声音。

进一步地,所述控制模块,根据从在所述表现影像显示期间体现被测试者反应的观察数据中导出的被测试者表达情绪的频率,对被测试者的情绪表现力进行评估,并且根据从在所述共鸣影像显示期间体现被测试者反应的观察数据中导出的被测试者表达情绪的频率,对被测试者的共鸣能力进行评估。

更进一步地,所述控制模块,与所述表现影像或所述共鸣影像对地,从观察数据中导出被识别出与诱导被测试者表达的情绪不同情绪原因的原因影像及原因声音。

为了实现上述目的,依据本发明理想实施例用于情绪分析的分析装置,包括:摄像部,其拍摄被测试者并将所述被测试者的影像、所述被测试者的影像中特征点的三维坐标的位移及所述被测试者的瞳孔影像作为观察数据进行检测;音频部,其获得所述被测试者的声音作为观察数据;显示部,其分别与多种情绪对应地显示提供诱导所述被测试者表达特定情绪的刺激的诱导影像;以及控制部,其与所述诱导影像对应地从所述观察数据中提取被测试者表达情绪的频率,并根据提取的频率对所述被测试者的情绪进行分析。

进一步地,所述诱导影像,包括:表现影像,该表现影像包括:显示以表情表现情绪的卡通人物的图像,该该情绪为分别与多种情绪对应的、诱导被测试者以要表达的情绪;及为了使所述被测试者讲述感受所述情绪的经验,所述卡通人物向所述被测试者提问的声音;以及共鸣影像,该共鸣影像包括:显示所述卡通人物感受到所述情绪时情况的图像;及所述卡通人物对所述情况进行说明的声音。

进一步地,所述控制部,从在所述表现影像显示期间体现被测试者反应的观察数据中导出被测试者的情绪表现力,并且从在所述共鸣影像显示期间体现被测试者反应的观察数据中导出被测试者的共鸣能力。

更进一步地,所述控制部,与所述表现影像或所述共鸣影像对应地从观察数据中导出被识别出与诱导被测试者表达的情绪不同情绪原因的原因影像及原因声音。

为了实现上述目的,依据本发明理想实施例的分析服务器的情绪分析方法,包括:将提供分别与多种情绪对应的、诱导被测试者表达特定情绪的刺激的诱导影像传输给分析装置的步骤;从所述分析装置接收体现被测试者对所述诱导影像反应的观察数据的步骤;以及从所述观察数据中提取被测试者表达情绪的频率,并根据提取的频率对所述被测试者的情绪进行分析的步骤。

为了实现上述目的,依据本发明理想实施例的分析装置的情绪分析方法,包括:显示将提供分别与多种情绪对应的、诱导所述被测试者表达特定情绪的刺激的诱导影像的步骤;将与显示的所述诱导影像对应的、体现所述被测试者反应的所述被测试者的影像、所述被测试者的影像中特征点的三维坐标的位移、所述被测试者的瞳孔影像及所述被测试者的声音作为观察数据进行收集的步骤;以及从所述观察数据中提取被测试者表达情绪的频率,并根据提取的频率对所述被测试者的情绪进行分析的步骤。

另外,本发明提供一种可机读的存储介质,其记录有执行前述依据本发明理想实施例的分析服务器的情绪分析方法的程序。

另外,本发明提供一种可机读的存储介质,其记录有执行前述依据本发明理想实施例的分析装置的情绪分析方法的程序。

发明效果

依据本发明,能够通过诱导特定情绪的诱导影像对被测试者的情绪进行缜密分析,并能够基于这种情绪分析结果为被测试者提供必要的咨询。

附图说明

图1是表示依据本发明实施例的被测试者情绪分析系统的示意图;

图2是表示依据本发明实施例的心理评估分析服务器的构成框图;

图3是表示依据本发明实施例的远程测读分析装置的构成框图;

图4至图12是表示依据本发明实施例的诱导影像的画面示例;

图13是依据本发明实施例的被测试者情绪分析方法的流程图;

图14至图22是表示依据本发明实施例的被测试者情绪分析方明的示意图。

附图标记说明

100:分析服务器110:通信模块

120:存储模块130:控制模块

200:虚拟机300:分析装置

310:通信部320:摄像部

330:3d传感器330:音频部

350:输入部360:显示部

370:存储部380:控制部

具体实施方式

在对本发明进行详细说明之前,需要对以下情况进行说明,即以下阐述的本说明书及权利要求书中使用的术语或者词语不能仅限定于通常意义或者字典释义去理解,应当基于“发明人为了通过最佳的方法对其自身的发明进行说明可以对术语的概念进行适当定义”的原则,按照符合本发明技术思想的意义和概念进行解释。因此,本说明书中列举的实施例和附图所示的构成不过是本发明最理想的实施例,并不代表本发明的全部技术思想。所以,应当理解为,在提出本申请时,可能存在能够代替它们的多种等同物和变形例。

下面,将参照附图对本发明的理想实施例进行详细说明。在这种情况下,需要注意,附图中同一构成要素会尽可能用相同的符号体现。另外,对于可能冲淡本发明主旨的公知功能及构成,这里就不再进行详细说明。基于同样的原因,对附图中一部分构成要素进行了夸张或者省略或者进行了概略性显示,各个构成要素的大小并非完全反映其实际大小。

首先,将对依据本发明实施例的被测试者情绪分析系统进行说明。图1是表示依据本发明实施例的被测试者情绪分析系统的示意图。

如图1所示,依据本发明实施例的被测试者情绪分析系统(以下简称“情绪分析系统”),包括:分析服务器100、虚拟机(virtualmachine)200、及分析装置300。未说明的附图符号400是分析隔间(booth),分析装置300可以设置在这种分析隔间400内,被测试者可以在分析隔间400内接受情绪分析或者心理测验。在本发明的实施例中,以被测试者为幼儿、儿童的情况为例进行说明。但是,本发明并非仅限定于此,即使是成人,也可以执行依据本发明实施例的情绪分析或者心理测验。

分析服务器100及虚拟机200是存在于网络上的实体(entity),分析装置300是设置在对被测试者进行情绪分析或者心理测验场所内的装置。

在基于云(cloud)技术的台式电脑(desktop)以虚拟化方式提供情绪分析或者心理评估的情况下,可以选择性地使用虚拟机200。在这种情况下,虚拟机200将分析装置300根据http(hypertexttransferprotocol)传输的数据转换为符合rdp(remotedesktopprotocol)的数据并将其传输给分析服务器100,并且将分析服务器100根据rdp传输的数据转换为符合http的数据并将其传输给分析装置300。

基本上,依据本发明实施例的分析服务器100将用于分析被测试者情绪的影像即刺激影像提供给分析装置100,刺激影像提供刺激,以诱导被测试者表达多种情绪中任何一种特定情绪(以下简称“诱导情绪”)。

刺激影像诱导被测试者通过观看相关影像根据影像的指示进行回答或者根据所提出的问题进行解答。这种用于心理评估的影像可以根据不同的问题进行区分提供。即,将进行心理评估的一个评估问题制作成一个评估影像。将所述进行心理评估的影像称为“评估影像”。

另外,分析服务器100将用于评价被测试者心理的影像即评估影像提供给分析装置300,这种评估影像诱导被测试者通过观看相关影像根据评估影像的指示进行回答或者根据所提出的问题进行解答。这种用于心理评估的评估影像可以根据不同的问题进行区分提供。即,将进行心理评估的一个评估问题制作成一个评估影像。

分析装置300提供分析服务器100所提供的评估影像,以使被测试者能够看到,分析装置300收集被测试者对评估影像的回答,并将其提供给分析服务器100。同时,分析装置300收集观看评估影像的被测试者反应,并将其提供给分析服务器100。如果根据被测试者的反应或者以设定的规则满足规定的条件,则分析服务器100通过控制分析装置300以使其转换显示评估影像的方式,能够诱导被测试者集中注意力进行心理评估。对于这种显示方式,在之后进行更加详细的说明。

接下来,将对依据本发明实施例的用于心理评估的分析服务器100构成进行更加详细的说明。图2是表示依据本发明实施例的心理评估分析服务器的构成框图。如图2所示,依据本发明实施例用于心理评估的分析服务器100,包括:通信模块110、存储模块120、及控制模块130。

通信模块110用于直接与分析装置300进行通信或者用于经由虚拟机200与分析装置300进行通信。例如,通信模块110能够通过网络与分析装置300进行通信。为了通过网络传输数据,通信模块110包含调制解调器(modem),其对发送的信号进行调制,且对接收的信号进行解调。这种通信模块110将由控制模块130传输的数据通过网络传输给分析装置300。另外,通信模块110将接收到的数据传输给控制模块130。

存储模块120起到存储分析服务器100运行所需的程序及数据的作用。特别是,存储模块120可以对依据本发明实施例用于心理评估的影像,即评估影像进行存储。保存到存储模块120中的各种数据根据用户的操作能够被登记、删除、变更、追加。

控制模块130能够起到对分析服务器100的所有运行及分析服务器100内部组件(block)之间的信号流动进行控制,并处理数据的数据处理功能。控制模块130可以是中央处理器(cpu:centralprocessingunit)、数字信号处理器(dsp:digitalsignalprocessor)等。在之后,将对这种控制模块130的运行进行更加详细的说明。

接下来,将对依据本发明实施例用于心理评估的分析装置300的构成进行更加详细的说明。图3是表示依据本发明实施例的远程测读(remotemeterreading)分析装置构成的框图。如图3所示,依据本发明实施例的分析装置300,包括:通信部310、摄像部320、3d传感器330、音频部340、输入部350、显示部360、存储部370、及控制部380。

通信部310是与分析服务器100进行通信的单元。通信部310可通过网络与分析服务器100进行通信。通信部310,包括:rf(radiofrequency)发送器tx,其将发送的信号频率进行上升转换及放大;rf接收器rx,其将接收的信号进行低杂音放大并将频率进行下降转换。另外,通信部310,包括:调制解调器,其对发送的信号进行调制,且对接收的信号进行解调。通信部310将接收的信息(message),即测读请求信息传输给控制部380。另外,通信部310接收由控制部380发送的信息,即测读应答信息,并通过网络将其传输给分析服务器100。

摄像部320用于拍摄被测试者,其至少包含图像传感器。图像传感器接收从拍摄对象反射的光并将其转换成电信号,其能够基于ccd(chargedcoupleddevice)、cmos(complementarymetal-oxidesemiconductor)等实现。摄影部320,还包括:模拟-数字转换器(analogtodigitalconverter),其能够将由图像传感器输出的模拟信号转换成数字信号并将其传输给控制部380。特别是,摄像部320,包括:3d传感器330。3d传感器330输出以三维坐标原点为基准点cp拍摄的影像的各像素的三维坐标x、y、z并将其传输给控制部380。3d传感器330可以采用利用激光、红外线、可见光等多种方式的传感器。这种3d传感器部330可以列举:利用飞行时间法(timeofflight,top)、相移(phase-shift)及在线波形分析(onlinewaveformanalysis)中任意一种的激光方式三维扫描仪;利用光学三角法的激光方式三维扫描仪;利用白色光或者调制光的光学方式三维扫描仪;;利用图形投影(patternprojection)或者线性扫描(linescanning)的光学方式或激光方式全身扫描仪;采用照相测量法(photogrammetry)的照相方式扫描仪;利用kinectfusion的实时(realtime)扫描仪等。另外,虽然图中显示3d传感器330包含在摄像部320内,但是3d传感器330也可以构成外与摄像部320分离的模块。

音频部340,包括:话筒mic、及扬声器spk。音频部340通过话筒mic接收用户的声音,然后将接收到的声音提供给控制部380。另外,音频部340将由控制部380输入的声音通过扬声器spk输出。

输入部350接收用户对分析装置300进行控制的操作指令,生成输入信号并将其传输给控制部380。输入部350,包含:用于控制分析装置300的各种指令(key)。当输入部350是由显示部360的触摸屏构成时,各种指令的功能就可以在显示部360中实现,且在仅通过触摸屏就能够执行所有功能的情况下,输入部350也可以被省略。

显示部360将分析装置300的菜单、输入的数据、功能设定信息及其它多种信息通过可视方式向用户提供。显示部360执行输出分析装置300的启动画面、待机画面、菜单画面等画面的功能。特别是,显示部360执行将依据本发明实施例的评估影像通过画面输出的功能。显示部360既可以由一个显示装置(screen)构成,也可以由多个显示装置构成。这种显示部360可以由液晶显示装置(lcd,liquidcrystaldisplay)、有机发光二极管(oled,organiclightemittingdiodes)、主动式有机发光二极管(amoled,activematrixorganiclightemittingdiodes)等构成。另外,显示部360可以通过触摸屏实现。在这种情况下,显示部360包含触摸传感器。触摸传感器感应用户的触摸输入。触摸传感器既可以由电容方式(capacitiveoverlay)、压力式、电阻膜方式(resistiveoverlay)、红外线感应方式(infraredbeam)等触摸感应传感器构成,也可以由压力感应传感器(pressuresensor)构成。除了所述传感器之外,能够感应物体的接触或压力的所有种类的传感器设备均可用作本发明的触摸传感器。触摸传感器感应用户的触摸输入,产生感应信号并将其传输给控制部380。特别是,当显示部360由触摸屏构成时,输入部350的部分或全部功能可以通过显示部360实现。

存储部370起到存储分析装置300运行所需的程序及数据的作用。特别是,存储部370能够存储用于心理评估的影像。保存在存储部370中的各种数据均根据用户的操作能够被删除、变更、追加。

控制部380能够起到对分析装置300的所有运行及分析装置300内部组件之间的信号流动进行控制,并处理数据的数据处理功能。另外,控制部380基本上起到控制分析装置300的各种功能的作用。控制部380,包括:中央处理器(cpu:centralprocessingunit)、数字信号处理器(dsp:digitalsignalprocessor)等。在之后,将对这种控制部380的运行进行更加详细的说明。

接下来,将对依据本发明实施例的诱导影像进行说明。图4至图12是表示依据本发明实施例的诱导影像的画面示例。

首先,如图4至图12所示,依据本发明实施例的诱导影像,包括:分别与多种情绪对应的表现影像及共鸣影像。即,对于某一种情绪,提供一组表现影像及共鸣影像。表现影像及共鸣影像诱导被测试者表达特定情绪。

特别是,表现影像,包括:显示通过表情表达想要诱导被测试者表达情绪的卡通人物(character)的图像;及通过卡通人物向被测试者提问,来诱导被测试者对感受情绪的经验进行讲述的声音。另外,表现影像,还包括:在提问结束之后,在规定时间以上利用于收集被测试者的回答与反应的图像。例如,表现影像可以是卡通人物在规定时间内在进度条(progressbar)上方奔跑的图像。

另外,共鸣影像,包括:显示卡通人物感受相关情绪时情况的图像;及卡通人物对相关情况进行说明的声音。图5、图6、图7、图8、图9、图10及图11分别显示了与平静、喜悦、悲伤、恐惧、惊讶、厌恶、愤怒对应的表现影像和共鸣影像的实例。

例如,图6中的(c)是针对喜悦的表现影像的一个示例,图6中(c)的表现影像将卡通人物想要诱导被测试者表达的情绪即喜悦通过表情表达出来。与此同时,其中还包含:为了使被测试者讲述感受卡通人物想要诱导表达的情绪即喜悦的经验而进行提问的声音。这种表现影像,通过卡通人物的喜悦表情诱导被测试者感受到喜悦,并使被测试者讲述喜悦的经验,从而诱导被测试者自然地表露出喜悦的表情。

另外,图6中的(d)是针对喜悦的共鸣影像的一个示例,图6中(d)的共鸣影像,包括:显示感受想要诱导的情绪即喜悦时情况的图像;及对感受喜悦时的情况进行说明的声音。这种共鸣影像,提供卡通人物展示与情绪相关情况的图像及对该情况进行说明的声音,从而诱导被测试者对相关情况产生共鸣并感受到与相关情况相符的情绪。

另外,如图4及图12所示,依据本发明实施例的诱导影像,还包括:开始影像及结束影像。图4中表示了依据本发明实施例的开始影像的画面示例,图12中表示了结束影像的画面示例。开始影像与结束影像在提示测验开始与结束的同时,为了让被测试者熟悉卡通人物,从而增加将卡通人物呈现给被测试者的次数。

接下来,将对利用前述诱导影像分析被测试者情绪的方法进行说明。图13是依据本发明实施例的被测试者情绪分析方法的流程图,图14至图22是表示依据本发明实施例的被测试者情绪分析方法的示意图。

如图13所示,分析服务器100的控制模块130在步骤s110中从存储模块120提取诱导影像,并通过通信模块110将其传输给分析装置300。在这种情况下,所传输的诱导影像,包括:开始影像、结束影像、及分别与多种情绪对应的表现影像和共鸣影像。

分析装置300的控制部380通过通信部310接收到诱导影像后,在步骤哦s120中通过显示部360显示诱导影像。在这种情况下,控制部380可以依次显示开始影像、分别与多种情绪对应的表现影像及共鸣影像,以及结束影像。

如果显示评估影像,被测试者观看评估影像后就会做出相应的反应。

由此,控制部380在步骤s130中通过包含3d传感器330的摄像部320及音频部340中的至少一个装置收集规定时间以上被测试者的反应作为观察数据。例如,控制部380能够通过包含3d传感器330的摄像部320对被测试者的影像和被测试者影像中特征点的三维坐标的位移作为观察数据进行收集。特别是,被测试者的影像可以是包含被测试者面部影像及瞳孔影像的被测试者全身影像。另外,控制部380可通过音频部340收集声音作为观察数据。特别是,提供诱导影像中表现影像所包含的提问之后,控制部380就可以通过音频部340收集相关回答即声音作为观察数据。

这种观察数据可以按照分别与多种情绪对应的表现影像和共鸣影像进行区分收集。例如,当存在与包含平静、喜悦、悲伤、恐惧、惊讶、厌恶及愤怒的7种情绪对应的表现影像和共鸣影像时,就可以分别针对所述14个影像进行区分收集观察数据。

在收集到被测试者反应的观察数据后,控制部380在步骤s140中将观察数据通过通信部310传输给分析服务器100。在分析服务器100的控制模块130通过通信模块110接收到观察数据后,在步骤s150中基于观察数据对被测试者的情绪进行分析。在本发明的实施例中,控制模块130可以对被测试者的情绪进行分析,从而对被测试者的情绪表现力及共鸣能力进行评估。另外,控制模块130通过分析被测试者的情绪,得出使被测试者的情绪产生急剧变化的原因。

在这种情况下,控制模块130利用行动识别、表情识别、瞳孔追踪及声音识别技术中至少一项技术根据观察数据对被测试者的情绪进行分析。依据利用表情识别的情绪分析实施例,控制模块130从观察数据的被测试者影像中特定用于决定被测试者的面部表情的特征点,并根据特定的特征点的位置导出被测试者的表情及与该表情分别对应的多种情绪的强度。另外,控制模块130可以将多种情绪中强度最高的情绪识别为被测试者的情绪。例如,如图14所示,一个观察数据包含拍摄被测试者的被测试者影像,被测试者影像由多个帧图像构成。如图15所示,控制模块130根据被测试者影响的各帧图像在被测试者面部中特定特征点fp。接下来,如图16所示,控制模块130根据特定的特征点fp位置导出被测试者的表情和由其表情决定的多种情绪的强度。将分别针对多种情绪导出的情绪强度的示例图示在图16所示的条形图中。依据图16所示的条形图,控制模块130可以将多种情绪中强度最高的喜悦情绪识别为被测试者的情绪。

如图14所示,与任意一个表现影像或者任意一个共鸣影像对应检测出的观察数据中被测试者影像包含多个帧图像。因此,控制模块130就针对一名被测试者影像中包含的多个帧图像分别识别被测试者表达的情绪。然后,控制模块130将从多个帧图像中分别识别到的情绪进行积累,从而可以通过被测试者收看任意一个表现影像或者任意一个共鸣影像期间的反应导出被测试者表达情绪的频率。

特别是,控制模块130可以从在表现影像显示期间体现被测试者反应的观察数据中导出被测试者的情绪表现力。即,与表现影像对应的情绪的频率数越高,则控制模块130评估被测试者的情绪表现力越强。例如,如图6中的(c)所示,当显示与喜悦对应的表现影像时,就可以根据从收集的观察数据中导出的喜悦情绪的频率数评估被测试者的情绪表现力是否丰富。图17是显示图6中的(c)所示在表现影像显示期间体现检测出的被测试者情绪频率的曲线图。如果将图17的(甲)与(乙)进行比较,可以看出图17的(甲)的喜悦的频率更高,因此可以评估,与图17的(甲)相关的被测试者情绪表现力比(乙)的被测试者情绪表现力更强。

另外,控制模块130可以从在共鸣影像显示期间体现被测试者反应的观察数据中导出被测试者的共鸣能力。即,与共鸣影像对应的情绪的频率数越高,则控制模块130评估被测试者的共鸣能力越强。例如,如图7中的(f)所示,当显示与悲伤对应的共鸣影像时,就可以根据从收集的观察数据中导出的悲伤情绪的频率数评估被测试者的共鸣能力是否强。图18是显示图7中的(f)所示在共鸣影像期间体现检测出的被测试者情绪频率的曲线图。如果将图18的(丁)与(丙)进行比较,可以看出图18的(丁)的悲伤的频率更高。因此,可以评估,与图18的(丁)相关的被测试者共鸣能力比(丙)的被测试者共鸣能力更强。

另外,如果控制模块130从观察数据中识别出与诱导影像中包含表现影像及共鸣影像的诱导影像所诱导的情绪即诱导情绪不同的情绪,控制模块130就会对与诱导情绪不同的情绪表达的原因进行检测。

例如,如图19所示,与任意一个表现影像或者共鸣影像对应收集到的观察数据中的被测试者影像om均包含多个帧图像。假设图19所示的多个帧图像为,当显示诱导情绪为喜悦即图6中的(c)所示表现影像或者图6中的(d)所示共鸣影像时,收集到的观察数据中的被测试者影像om。

控制模块130将被测试者影像om按照规定的时间单位进行分割,并从分割影像各自的多个帧图像中导出被测试者的情绪,即情绪的频率。例如,控制模块130将由图19所示的多个帧图像构成的被测试者影像om按照规定的时间单位进行区分,例如,按照第1至第4小时t1、t2、t3及t4区分的影像即区分为第1至第4分割影像im1、im2、im3、im4。另外,控制模块130分别从多个帧分割影像即第1至第4分割影像im1、im2、im3、im4中导出情绪(情绪的频率)。图20中的pf1、pf2、pf3及pf4分别显示从第1至第4分割影像im1、im2、im3、im4的多个帧图像中导出的情绪(情绪的频率)。控制模块130将第1至第4分割影像im1、im2、im3、im4的第1至第4情绪pf1、pf2、pf3、pf4的轮廓(profile)分别进行比较,从而导出轮廓之差超过规定数值的分割影像。例如,第1至第4情绪pf1、pf2、pf3、pf4中第4情绪pf4的轮廓与其它情绪pf1、pf2、pf3的轮廓之差超过规定数值。控制模块130计算出情绪的轮廓之差,并将其情绪存在差异的分割影像即第4分割影像im4作为识别与诱导情绪不同情绪的原因影像va导出。

图21中表示了从图19所示被测试者影像om中导出的原因影像va即第4分割影像im4。控制模块130可以分别从原因影像va:im4的多个帧图像f01~f13中对被测试者的情绪进行识别。关于所述识别结果,除第10帧图像f10之外的所有帧...f01~f09,f11~f13,...的识别结果如图22中的(x)所示,虽然属于与诱导情绪相同的喜悦,但是第10帧图像f10的识别结果如图22中的(y)所示,假设其被识别为与诱导情绪不同的情绪即悲伤。那么,控制模块130就将识别为与诱导情绪不同情绪的时间设定为分析时间。例如,控制模块130将第10帧f10设定为分析时间ta。另外,控制模块130从被测试者影像中导出在分析时间ta处播放的声音作为原因声音ca。例如,如图21所示,假设分析时间ta即第10帧f10播放时播放的声音为“妈妈”。由此,控制模块130可以将从被测试者影像中在分析时间ta处播放的声音即“妈妈”确定为原因声音ca。如此,控制模块130就可以导出体现使被测试者的情绪急剧变化即变为与诱导情绪不同情绪原因的原因影像va及原因声音ca。

如上所述,在分析完被测试者的情绪后,控制模块130在步骤s160中存储情绪分析结果。这种情绪分析结果,包含被测试者的情绪表现力及共鸣能力。另外,情绪分析结果,包括:体现使被测试者的情绪急剧变化即变为与诱导情绪不同情绪原因的原因影像va及原因声音ca。

然后,控制模块130通过通信模块110在步骤s170中将其情绪分析结果传输给分析装置300。在分析装置300的控制部380通过通信部310接收情绪分析结果后,将其保存到存储部370中,之后,如果有申请情绪分析结果指令被输入,则控制模块130就通过显示部360及音频部340提供情绪分析结果。

到目前为止,对分析服务器100根据由分析装置300收集到的观察数据分析被测试者情绪的方法进行了说明。依据本发明的对策性实施例,分析服务器100分析情绪的方法也可以由分析装置300执行。例如,分析装置300提供诱导影像后,将收集的观察数据可以不传输给分析服务器100,而基于收集的观察数据按照以步骤s150相同的方式对被测试者的情绪进行分析。由此,分析装置300的控制部380可以对被测试者的情绪进行分析,并对被测试者的情绪表现力及共鸣能力进行评估。另外,分析装置300的控制部380可以通过对被测试者的情绪进行分析,导出使被测试者的情绪急剧变化的原因。

另外,前面介绍的依据本发明实施例的方法,可通过多种计算机设备以可读取的程序形态实现,并利用计算机将相关信息记录到可读取的存储介质中。在这里,存储介质可以单独包含程序指令、数据文件、数据结构等或者包含它们的组合。记录在存储介质中的程序指令,既可以是为本发明特别设计的程序指令,也可以是计算机软件从业者公知可使用的程序指令。例如,存储介质,包括:硬盘、软盘及磁带等磁介质(magneticmedia)、cd-rom、dvd等光存储介质(opticalmedia)、光磁软盘(flopticaldisk)等磁光介质(magneto-opticalmedia)以及只读存储器(rom)、随机存储器(ram)、闪存(flashmemory)等为存储并执行程序指令而特别配置的硬件装置。程序指令的实例,不仅包括通过编译器(compiler)编写的程序指令等机器语言wire,而且还包括使用直译器(interpreter)等编写能够通过计算机执行的高级语言wire。这种硬件装置为了执行本发明的动作可以由一个以上软件模块启动,其域也一样。

由此,依据本发明的实施例,可以通过诱导特定情绪的诱导影像对被测试者的情绪进行缜密分析,并可以基于这种情绪分析结果为被测试者提供必要的措施及咨询。

以上,利用几个理想实施例对本发明进行了说明。但是,这些实施例只是为方便说明而列举的示例,其并不限定本发明的范围。所以,通过上述说明,具有本发明所属技术领域一般知识的技术人员,完全可以在不偏离本发明的技术思想和后附权利要求书中提出的权利范围的前提下,根据等同原则实施多种改变及修改。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1