信息处理系统、数字相框、程序以及信息存储介质的制作方法

专利名称：信息处理系统、数字相框、程序以及信息存储介质的制作方法
技术领域：
本发明涉及一种信息处理系统，其具有媒体信息获得部，其获得媒体信息；媒体 信息存储部，其存储所获得的媒体信息；日常性评价部，其根据包括来自测定用户行动的行 动传感器、测定用户状态的状态传感器和测定用户环境的环境传感器中至少1个传感器的 传感器信息在内的信息，进行评价用户日常性的处理测量测量测量；以及写入部，其将通过 上述日常性评价部的评价处理而获得的用户日常性与所获得的媒体信息关联起来写入到 上述媒体信息存储部。另外，本发明还涉及使计算机作为上述各部分发挥功能的程序或存 储了该程序的计算机可读信息存储介质。 在本发明中，获得来自行动传感器、状态传感器、环境传感器中至少1个传感器的 传感器信息，根据所获得的传感器信息等，评价用户日常性。而且，如上获得的日常性与所 获得的媒体信息关联起来，并写入到媒体信息存储部。由此，能够将获得时等的用户日常性 与该所获得的媒体信息对应起来，能够实现对使用了日常性的媒体信息进行各种处理。
另外，在本发明中也可以具有检索部，其使用与媒体信息关联起来的用户日常性，对存储在上述媒体信息存储部的媒体信息进行检索处理。
这样，能够对与日常性对应的媒体信息进行检索处理。 另外，在本发明中上述检索部能够进行这样的检索处理其从存储在上述媒体信
息存储部的媒体信息中优先提取出在获得时用户日常性较低的媒体信息。 这样，能够优先提取在日常性较低的状况下获得的媒体信息，向用户进行提示等。 另外，在本发明中也可以具有转移部，该转移部使用与媒体信息关联起来的用户
日常性，提取出存储在上述媒体信息存储部的媒体信息，将提取出的媒体信息转移到第2
媒体信息存储部。 这样，能够对与日常性对应的媒体信息进行转移处理。 另外，在本发明中也可以构成为，上述转移部从存储在上述媒体信息存储部的媒 体信息中优先提取出获得时用户日常性较高的媒体信息，从上述媒体信息存储部删除所提 取的媒体信息，并且将其转移到上述第2媒体信息存储部。 这样，能够优先提取在用户日常性较高的状况下获得的媒体信息，将其转移给第2 媒体信息存储部，能够进行高效的媒体信息的整理等。 另外，在本发明中也可以构成为，上述第2媒体信息存储部是容量比上述媒体信 息存储部大的大容量的存档用存储部。 这样，在媒体信息存储部的使用存储容量没有余量时等，能够将媒体信息作为存 档信息转移到第2媒体信息存储部进行保存。 另外，在本发明中也可以构成为具有状况估计部，该状况估计部根据包含测量用 户行动的行动传感器、测量用户状态的状态传感器和测量用户环境的环境传感器中至少1 个传感器发出的传感器信息在内的信息，估计用户状况，上述日常性评价部根据所估计的 用户状况，进行评价用户日常性的处理。 这样，能够根据包含传感器信息在内的信息，按照所估计的用户状况来评价用户
曰常性。 另外，在本发明中也可以构成为具有日常性信息存储部，该日常性信息存储部将 日常性与用户停留场所关联起来进行存储，上述状况估计部确定用户获得媒体信息时的用 户停留场所，上述日常性评价部从上述日常性信息存储部读出与所确定的停留场所对应起 来的日常性，评价用户日常性。 这样，能够按照用户停留场所来评价日常性，将获得的日常性与在该停留场所获 得的媒体信息关联起来。 另外，在本发明中也可以构成为上述日常性信息存储部将日常性与用户停留场 所以及停留时间段关联起来进行存储，上述状况估计部确定用户获得媒体信息时的用户停 留场所和停留时间段，上述日常性评价部从上述日常性信息存储部读出与所确定的停留场 所和停留时间段对应起来的日常性，评价用户日常性。 这样，能够按照用户停留场所和停留时间段来评价日常性，将所获得的日常性与 在该停留场所和停留时间段获得的媒体信息关联起来。 另外，在本发明中也可以构成为具有检索部，该检索部使用与媒体信息关联起来 的用户日常性，对存储在上述媒体信息存储部的媒体信息进行检索处理，上述检索部进行 按照提取比例来提取媒体信息的检索处理，并且，用户获得媒体信息时的用户停留场相对于用户而言日常性越低，则该提取比例被设定为越高的比例。 这样，能够按照被设定为较高比例的提取比例，将在日常性较低的停留场所获得 的媒体信息提取出来。 另外，在本发明中也可以构成为具有转移部，该转移部使用与媒体信息关联起来 的用户日常性，提取出存储在上述媒体信息存储部的媒体信息，将所提取的媒体信息转移 给第2媒体信息存储部，上述转移部按照提取比例来提取媒体信息，从上述媒体信息存储 部中删除所提取的媒体信息，并且将其转移给上述第2媒体信息存储部，其中，上述提取比 例被设定为用户获得媒体信息时的用户停留场所相对于用户而言日常性越高，则该提取 比例被设定为越高的比例。 这样，能够通过被设定为较高比例的提取比例，将在日常性较高的停留场所获得 的媒体信息提取出来，将其转移给第2媒体信息存储部。 另外，在本发明中也可以构成为，上述状况估计部确定停留区域和比停留区域狭 小的停留点作为用户停留场所，上述日常性评价部在确定了停留点作为用户停留场所的情 况下，从上述日常性信息存储部中读出与所确定的停留点关联起来的日常性，评价用户日 常性。 这样，通过将对于用户而言意义不同的区域作为小于停留区域的停留点提取出
来，使用与其相关的日常性，从而能够实现更为正确且适当的日常性的评价处理。 另外，在本发明中也可以构成为，上述状况估计部根据既定期间内的用户位置的
标准偏差是否处于既定的第1阈值以下，判断用户是否处于停留区域内；上述状况估计部
根据既定期间内的用户位置的标准偏差是否处于小于上述第1阈值的既定的第2阈值以
下，判断用户是否处于停留点内。 这样，通过求出既定期间内的用户位置的标准偏差这样的统计处理，能够将用户 停留的场作为区域或者点而确定为具有意义的区域。 另外，本发明还涉及数字相框，其具有显示器；以及显示控制部，其根据上述信 息处理系统写入到上述媒体信息存储部的媒体信息即图像数据，进行在上述显示器上显示 图像的控制。 这样，通过根据与图像数据关联起来的日常性来控制显示于显示器上的图像，能 够实现以往所没有的类型的数字相框的再现处理。 另外，本发明还涉及信息处理系统，其具有媒体信息存储部，其将媒体信息与获 得媒体信息时的用户日常性关联起来进行存储；以及检索部，其使用与媒体信息关联起来 的用户日常性，对存储在上述媒体信息存储部的媒体信息进行检索处理，其中，上述检索部 进行这样的检索处理从存储在上述媒体信息存储部的媒体信息中优先提取出在获得时用 户日常性较低的媒体信息。另外，本发明还涉及使计算机作为上述各部分发挥功能的程序、 或者存储有该程序的计算机可读取的信息存储介质。 根据本发明，在媒体信息存储部中将媒体信息与获得媒体信息时的用户日常性关 联起来进行存储。而且，使用与媒体信息关联起来的用户日常性来执行媒体信息的检索处 理，优先提取出在获得时用户日常性较低的媒体信息。由此，能够使日常性较低的媒体信息 优先地向用户进行提示等。
另外，在本发明中也可以构成为上述检索部进行如下检索处理该检索部按照提取比例来提取媒体信息，上述提取比例被设定为，用户获得媒体信息时的用户停留场所越
是相对于用户而言日常性低的停留场所，则该提取比例越被设定为较高比例。
另外，本发明还涉及一种数字相框，其具有显示器；以及显示控制部，其根据通
过上述信息处理系统提取出的媒体信息即图像数据，进行在上述显示器上显示图像的控制。 这样，能够提供一种优先再现日常性较低状况下的图像的数字相框。
另外，本发明还涉及信息处理系统，其具有媒体信息存储部，其将媒体信息与获 得媒体信息时的用户日常性关联起来进行存储；以及转移部，其使用与媒体信息关联起来 的用户日常性，提取出存储在上述媒体信息存储部的媒体信息，将提取出的媒体信息转移 给第2媒体信息存储部，上述转移部从存储在上述媒体信息存储部的媒体信息中优先提取 出在获得时用户日常性较高的媒体信息，从上述媒体信息存储部删除所提取的媒体信息， 并且将其转移给上述第2媒体信息存储部。另外，本发明还涉及使计算机作为上述各部分 发挥功能的程序、或者存储有该程序的计算机可读取的信息存储介质。 根据本发明，媒体信息存储部关联地存储有媒体信息和在取得该媒体信息时的用 户日常性。并且，使用与媒体信息关联起来的用户日常性，执行将媒体信息转移给第2媒体 信息存储部的转移处理，优先提取出在获得时用户日常性较高的媒体信息并转移。由此，能 够从媒体信息存储部删除日常性高的媒体信息，并转移给第2媒体信息存储部进行保存。
另外，本发明还可以构成为上述转移部按照提取比例来提取媒体信息，从上述媒 体信息存储部删除所提取的媒体信息，并将其转移给上述第2媒体信息存储部，其中，用户 获得媒体信息时的用户停留场所越是相对于用户而言日常性高的停留场所，则上述提取比 例越被设定为较高比例。


图1(A)、图1(B)是传感器信息的获得方法的说明图。 图2是本实施方式的第1系统构成例。 图3是用于说明媒体信息的写入处理的流程图。 图4是日常性的评价处理的说明图。 图5是媒体信息存储部的数据结构的例子。 图6是用于说明媒体信息的检索处理的流程图。 图7是用于说明媒体信息的转移处理的流程图。 图8(A)、图8(B)是关于媒体信息的提取比例的说明图。 图9是本实施方式的第2系统构成例。 图10 (A)、图10 (B)是数字相框的说明图。 图11是关于用户在停留场所中的位置分布的说明图。 图12(A)、图12(B)是停留区域、停留点的说明图。 图13是表示各点/各区域上的停留时间、距离范围的特征的图。 图14是关于停留场所的存在概率的说明图。 图15(A)、图15(B)是基于存在概率和存在次数的日常性的计算方法的说明图。 图16是日常性的评价方法的其它例子的说明图。
图17(A) 图17(D)也是日常性的评价方法的其它例子的说明图。
符号说明 100便携型电子设备；102处理部；103媒体信息获得部；104传感器信息获得部； 106状况估计部；107状况鉴定部(状况辨别部)；108状况预测部；110日常性评价部；112 写入部；114检索部；116转移部(转送部)；120存储部；122媒体信息存储部；124日常性 信息存储部；125预定信息存储部；126履历信息存储部；128个人模式信息存储部；130信 息存储介质；138通信部；140可穿戴显示器；142信息提示部；146摄像部；148麦克风；150 可穿戴传感器；200服务器；202处理部；215检索部；216转移部；220存储部；222媒体信息 存储部；238通信部；300数字相框；302处理部；314检索部；316转移部；318显示控制部； 320存储部；322媒体信息存储部；600外部服务器；610第2媒体信息存储部
具体实施例方式
下面说明本实施方式。并且，如下所说明的本实施方式不对请求保护的本发明内 容进行不适当的限定。另外，本实施方式中说明的所有构成未必是本发明的必要构成要件。
1.传感器信息的获得 在本实施方式中，为了将用户日常性(日常度)与图像(动态图像、静态图像)、声 音(音频、音乐)等媒体信息关联起来，需要获得来自测量用户行动、状态、环境的行动传感 器(行动测量部)、状态传感器(状态测量部)、环境传感器(环境测量部)的传感器信息。 而且，根据所获得的传感器信息(通过传感器信息所估计的用户状况)等，评价用户当前的 日常性(非日常性)。于是，首先说明该传感器信息的获得方法。 在图1 (A)中，用户(使用者)携带作为数字相机(数字照相机、数字摄像机)的 便携型电子设备100。另外，在头部的一只眼睛附近装有作为移动控制对象设备的可穿戴显 示器(Wearable Display) 140 (移动显示器)。进而，在身体上装有作为可穿戴传感器(移 动传感器)的各种传感器。具体而言，装有室内外传感器510、周围温度传感器511、周围湿 度传感器512、周围光度传感器513、手臂安装型运动测量传感器520、脉搏(心跳数)传感 器521 、体温传感器522、末梢皮肤温度传感器523、出汗传感器524、足压力传感器530、说话 和咀嚼传感器540、设置在便携型电子设备100上的GPS(Global Position System :全球卫 星定位系统)传感器550、以及设置在可穿戴显示器140上的颜色传感器560和瞳孔大小传 感器561等。通过这些便携型电子设备100、可穿戴显示器140等移动控制对象设备、可穿 戴传感器等构成移动子系统。 数字相机等便携型电子设备100 (移动计算机)例如能够具有处理器(CPU)、存储 器、操作面板、通信装置或显示器等。另外，便携型电子设备ioo具有摄像部和麦克风，能够 获得图像和声音等媒体信息。另外，例如具有GPS传感器550等位置检测传感器，能获得用 户的位置信息，并且能够通过时钟功能来获得日期时间等时间信息。 并且，便携型电子设备100不限于数字相机，例如也可以是具有媒体信息获得功 能(摄像部、麦克风等)的便携型信息终端、便携型游戏机、便携电话、手表或移动式音响设 备等。另外，如图1(B)所示，用户也可以携带2个便携型电子设备100-l、100-2。在图1(B) 中，通过作为数字相机等的便携型电子设备100-1获得图像等媒体信息，使用无线通信将 所获得的媒体信息转移给便携型电子设备100-2。便携型电子设备100-2例如具有收集来自传感器的传感器信息的功能、根据所收集的传感器信息进行运算处理的功能、根据运算 结果进行控制对象设备(可穿戴显示器等)的控制(显示控制等)或从外部数据库取入信 息的功能、与外部进行通信的功能等。而且，用户的状况履历信息和所获得的媒体信息被保 存在便携型电子设备100-2的存储部中。 可穿戴显示器140 (广义上为信息提示部)装在用户的一只眼睛附近，并且被设定 为显示器部的大小小于瞳孔大小，作为所谓的透视取景器的信息显示部发挥功能。并且，也 可以使用耳机、振动器等对用户进行信息提示。另外，作为移动控制对象设备(信息提示 部)，除了可穿戴显示器140之外，还能够想到例如手表、移动电话或移动式音响等各种设 备。 室内外传感器510是检测用户位于室内还是室外的传感器，例如照射超声波，测
量直到超声波被天花板等反射回来的时间。其中，室内外传感器510不限于超声波方式，也
可以是有源光方式、无源紫外线方式、无源红外线方式、无源噪声方式的传感器。 周围温度传感器511例如使用热敏电阻、放射温度计、热电偶等测量外界温度。周
围湿度传感器512例如使用湿度导致的电阻变化，测量周围的湿度。周围光度传感器513
例如使用光电元件测量周围的光度。 手臂安装型运动测量传感器520通过加速度传感器和角加速度传感器来测量用 户手臂的动作。通过使用该运动测量传感器520和足压力传感器530，能够更为正确地测 量用户的日常动作、步行状态。脉搏(心跳数)传感器521装在手腕或手指或耳朵上，例如 通过红外光的透射率和反射率的变化来测量例如伴随搏动而导致的血流变化。体温传感器 522、末梢皮肤温度传感器523使用热敏电阻、放射温度计、热电偶等测量用户的体温、末梢 皮肤温度。出汗传感器524例如通过皮肤表面电阻的变化来测量皮肤出汗。足压力传感器 530检测脚底对鞋的压力分布，测量、判定用户的站立状态、就座状态、步行状态等。
说话/咀嚼传感器540是用于测量用户正在说话(会话中)还是正在咀嚼(吃饭 中)的可能性的耳机型传感器，在其壳体中内置有骨传导麦克风、外界声音麦克风。骨传导 麦克风检测说话/咀嚼时由体内产生且在体内传播的振动即体内声音。外界声音麦克风检 测包括随着说话而传导至体外的振动即声音以及环境中的杂音在内的外界声音。而且，对 通过骨传导麦克风、外界声音麦克风所捕捉的声音的单位时间的功率进行比较处理等，由 此测量说话可能性和咀嚼可能性。 GPS传感器550是检测用户位置(场所)的传感器。并且，也可以使用移动电话的 位置信息服务或位于周边的无线LAN的位置信息来代替GPS传感器550。颜色传感器560 例如在脸部附近配置光传感器，比较通过了多个光学带通滤波器之后的光度来测量颜色。 瞳孔大小传感器561例如在瞳孔附近配置相机，解析相机的信号来测量瞳孔大小。
2.第1系统构成例 图2表示本实施方式的信息处理系统(信息提示系统)的第1系统构成例。图2 是例如通过便携型电子设备100实现本实施方式的信息处理系统的情况的例子。
处理部102根据来自未图示的操作部的操作信息、由可穿戴传感器150所获得的 传感器信息等，进行各种处理。例如进行媒体信息和传感器信息的获得处理、各种运算处 理、评价处理、显示器等信息提示部142上的信息提示的控制处理。该处理部102的功能可 通过各种处理器(CPU等)、ASIC(门阵列等)等硬件、或者存储在信息存储介质130(光盘、IC卡、HDD等)中的程序等来实现。 存储部120为处理部102、通信部138等的工作区域，其功能可通过RAM等存储器 或HDD(硬盘驱动器)等实现。该存储部120包含媒体信息存储部122、日常性信息存储部 124、预定信息存储部125。 信息存储介质130(可通过计算机读取的介质)用于存储程序和数据等，其功能可 通过光盘(CD、 DVD)等实现。处理部102根据存储于信息存储介质130中的程序(数据) 进行本实施方式的各种处理。即，信息存储介质130中存储有用于使计算机(具有操作部、 处理部、存储部、输出部的装置)作为本实施方式的各部分发挥功能的程序(用于使计算机 执行各部分的处理的程序)。 处理部102包含媒体信息获得部103、传感器信息获得部104、状况估计部106、日 常性评价部110、写入部112、检索部114、转移部116。并且能够实施省略这些构成要素的 一部分(例如状况估计部、检索部、转移部)、或追加其他构成要素等各种变形。
媒体信息获得部103获得图像(静态图像、动态图像)、音频、音乐、文本信息等媒 体信息。例如通过由CCD和CMOS传感器构成的摄像部146对被摄体进行摄像，或通过麦克 风148对音频进行录音，则媒体信息获得部103取入所摄像的图像和所录音的音频。然后， 将所取入的图像和音频等媒体信息存储在媒体信息存储部122中。并且，在图1(B)中，当 通过作为数字相机的便携型电子设备100-1对图像摄像的情况下，便携型电子设备100-2 可使用无线通信等从便携型电子设备100-1获得图像。 传感器信息获得部104获得来自可穿戴传感器150(广义上为传感器)的传感器 信息。具体而言，可穿戴传感器150具有测量用户行动(步行、会话、吃饭、手脚动作、感情 表现或睡眠等)的行动传感器、测量用户状态(疲劳、紧张、空腹、精神状态、身体状态或用 户所产生的事件等)的状态传感器、测量用户环境(场所、时间、亮度、气温或湿度等)的环 境传感器中的至少1个传感器，传感器信息获得部104获得来自这些传感器的传感器信息。
并且，传感器既可以是传感器装置本身，也可以是除传感器装置之外还具有控制 部和通信部等的传感器设备。另外，传感器信息既可以是从传感器直接获得的传感器1次 信息，也可以是通过对传感器1次信息进行加工处理(信息处理)而获得的传感器2次信 息。 状况估计部106 (状况鉴定部)根据由传感器信息获得部104获得的传感器信息 等，进行用于估计(鉴定)用户状况(用户的行动、状态和环境中的至少l个)的处理。具 体而言，进行所获得的传感器信息的乘法处理和加法处理，实现用于传感器信息的过滤处 理(选择处理)和解析处理的各种运算处理。而且，进行估计用户当前状况的处理即状况 鉴定处理。或者进行估计用户未来状况的处理即状况预测处理。 例如下式(1)所示，进行使来自多个传感器的多个传感器信息数字化后的测量值 Xj和各系数存储于系数存储部(未图示)中通过2维阵列(矩阵)表示的系数A".的积和 运算。于是如下式(2)所示，将积和运算的结果为多维坐标运算成为n维矢量Yi。并且，i 是n维空间的i坐标，j是分配给各传感器的编号。
[式1]
<formula>formula see original document page 12</formula>(2)
通过进行以上式(1)、式(2)那样的运算处理，能够实现从所获得的传感器信息中去除不需要的传感器信息的过滤处理和用于根据传感器信息估计用户行动、状态、环境(TPO信息)的解析处理等。例如，如果将与脉搏(心跳数)、出汗量、体温的测量值X相乘的系数A设定为比相对于其它传感器信息的测量值的系数大的值，则通过以上式(1)、式(2)所运算的数值Y表示用户状态即"兴奋度"。另外，通过将与说话量的测量值X相乘的系数以及与足压力的测量值X相乘的系数设定为适当的值，则能够估计用户的行动是坐着会话，还是行进中会话，还是安静思考，还是睡眠状态等。通过这样估计用户的状况，从而能够获得用户的TPO(Time Place Occasion :时间，地点，场合)信息，该TPO信息是时间信息(年、月、周、日、时间等)、用户的场所信息(位置、停留场所、距离等)和用户的状态信息(精神状态、肉体状态、用户所发生的事件等)中的至少l个信息。 并且，状况估计部106所估计的用户状况例如是用户的行动、状态或环境等。用户行动的估计的实现方式是通过用户在身上携带的行动传感器的信息，判别用户的静止/步行/行进/就座/翻身/上下楼梯的状态；或通过配置在用户周边的传感器(外部相机、本地传感器)判别用户的行动/姿态状态；或通过位置检测传感器所求出的位置轨迹，判别用户停止中/移动中的状态。另外，用户状态是用户的精神状态和肉体状态等。用户状态的估计可通过用户身上携带的活体传感器的信息，判别压力/兴奋/紧张/健康状态等来实现。另外，用户环境是用户的场所信息、时间信息、周围环境信息等。用户环境的估计的实现方式是通过位置检测传感器判别用户停留场所(当前地)，或通过时钟获得年/月/日/星期几/时间，或通过周围环境传感器获得气温/气压/照明度/噪声等。这种情况下，由于难以通过传感器信息完全/正确地确定用户状况，因而状况估计部106的状况估计的准确性具有某种程度上的伸縮性。 并且，可以使用传感器信息之外的信息用于用户状况的估计。具体而言，可以使用存储在预定信息存储部125中的用户的预定信息(预定表数据、日程表信息)和通过通信部138等获得的外部信息，来估计用户的状况。例如，根据用户输入的日程表信息来估计用户今后的计划，或者根据所输入的计划来估计附带的计划。或者，根据网页信息和由外部数据库通过因特网等获得的信息(例如今天的天气/交通信息)、从其它用户获得的信息(例如来自其它用户的联络信息)等外部信息，估计用户状况。 如果使用这种预定信息和外部信息，相比仅使用传感器信息估计用户状况的情况，能够提高状况估计的准确度。例如通过组合传感器信息和预定信息来估计用户行动，能够进行更为准确的用户行动的估计。 日常性评价部110进行用户日常性(非日常性)的评价处理。例如根据所获得的传感器信息等评价(判断)用户日常性。具体而言，根据来自GPS的经纬度信息，单纯依据以往的滞留经验在该位置附近的频度来评价日常性。或者也可以为，例如当状况估计部106根据所获得的传感器信息等估计出用户的状况(例如当前的场所)时，日常性评价部110根据所估计的用户的状况评价用户日常性。即，判断用户当前的状况是日常状况还是非日常的状况，评价日常性。 具体而言，日常性信息存储部124(日常性数据库)将日常性与用户的停留场所关联起来、或者与用户的停留场所和停留时间段关联起来进行存储。例如，日常性信息存储部124针对用户以往停留的多个停留场所中的每个，将与其对应的日常性关联起来进行存储。或者针对停留场所和停留时间段的各个组合，将与其对应的日常性关联起来进行存储。
状况估计部106确定用户获得媒体信息时用户的停留场所(例如图像的摄影场所，音频的录音场所)。而且日常性评价部IIO从日常性信息存储部124中读出与所确定的停留场所关联起来的日常性，由此评价用户日常性。而且，所读取的日常性与在该停留场所获得的媒体信息关联起来。或者状况估计部106确定用户获得媒体信息时用户的停留场所和停留时间段。而且，日常性评价部110从日常性信息存储部124中读出与所确定的停留场所和停留时间段关联起来的日常性，由此评价用户日常性。而且，所读出的日常性与在该停留场所以及该停留时间段获得的媒体信息关联起来。 并且，状况估计部106也可以将停留区域和小于停留区域的停留点确定为用户的停留场所。例如根据既定期间内用户位置的标准偏差是否小于等于第1阈值，判断用户是否处于停留区域内。另外，根据既定期间内用户位置的标准偏差是否小于等于比第1阈值要小的第2阈值，判断用户是否处于停留点内。并且，用于求出停留区域的既定时间和求出停留点的既定时间既可以相同也可以不同。另外，也可以不是停留区域和停留点这样的2个层次的划分(等级)，而是划分为3个层次以上。 在不仅停留区域被确定为用户的停留场所，还确定了停留点作为用户的停留场所的情况下，日常性评价部110从日常性信息存储部124中读取与所确定的停留点关联起来的日常性，评价用户日常性。而且，所读取的日常性与在该停留点获得的媒体信息关联起来。 并且，作为日常性评价部IIO进行的日常性评价处理，可设想各种处理。例如可以通过对用户的状况履历(例如用户的场所的状况履历)的信息和所估计的用户当前状况(例如当前的场所)的信息进行比较处理，从而评价用户当前的日常性。另外，也可以通过对所预测的用户行动和用户的实际行动进行比较处理，评价用户当前的日常性。并且，日常性例如是在与用户过去的状况(状况履历)的比较等中，表示用户当前状况在何种程度上为日常(普通、随处可见、平凡)水平的参数。另外，评价用户日常性的处理和评价非日常性(不同于平时、异常度)的处理可以作为等价处理来对待。 写入部112进行媒体信息的写入处理。具体而言，将通过日常性评价部110的评价处理而获得的用户日常性与所获得的媒体信息关联起来写入媒体信息存储部122。例如当媒体信息为图像的情况下，将获得该图像时(摄影时)的日常性作为中间信息与各图像数据(图像文件)关联起来写入媒体信息存储部122。另外，当媒体信息为音频(音乐)的情况下，将获得该音频时(录音时)的日常性作为中间信息与各音频数据(音乐数据)关联起来写入媒体信息存储部122。这种情况下，也能够将获得媒体信息时的时间信息(年月日、时间)和用户的停留场所作为中间信息与媒体信息关联起来写入。 检索部114进行媒体信息的检索处理。具体而言，使用与媒体信息关联起来的用户日常性，对存储在媒体信息存储部122中的媒体信息进行检索处理。例如，从存储在媒体信息存储部122中的媒体信息中优先提取出在获得时用户日常性较低的媒体信息。例如使用与各媒体信息关联起来的日常性对媒体信息分类，例如提取出与较低日常性关联起来的媒体信息。由此，能够通过信息提示部142等优先再现日常性较低的非日常状况下的媒体信息。 例如，日常性评价部110从日常性信息存储部124读取与停留场所关联起来、或者与停留场所和停留时间段关联起来的日常性，评价用户日常性。这种情况下，检索部114按照提取比例来提取媒体信息，该提取比例被设定为用户获得媒体信息时的用户停留场所越是相对于用户而言日常性低的停留场所，则该提取比例就越高。即，在检索处理时，以较高的提取比例提取出在对用户而言是日常性较低的停留场所获得的媒体信息，以较低比例提取在日常性较高的停留场所获得的媒体信息。 转移部116进行媒体信息的转移处理。具体而言，转移部116使用与媒体信息关联起来的用户日常性，提取存储在媒体信息存储部122的媒体信息。然后，将提取出的媒体信息转移给第2媒体信息存储部610。例如，通过通信部138转移给设置在外部(外部服务器等)的存档用存储部即第2媒体信息存储部610。更具体而言，转移部116从存储在媒体信息存储部122中的媒体信息中优先提取出在获得时用户日常性较高的媒体信息。例如，使用与各媒体信息关联起来的日常性对媒体信息进行分类，例如提取与较高日常性关联起来的媒体信息。而且，将所提取出的媒体信息从媒体信息存储部122中删除，并且转移给第2媒体信息存储部610 (存档保存)。 例如，日常性评价部IIO从日常性信息存储部124读取与停留场所关联起来、或与停留场所和停留时间段关联起来的日常性，来评价用户日常性。这种情况下，转移部116按照提取比例来提取媒体信息，该提取比例被设定为用户获得媒体信息时的用户停留场所越是相对于用户而言日常性高的停留场所，则该提取比例就越高。即，在检索处理时，以较高的提取比例提取出在对用户而言日常性较高的停留场所获得的媒体信息，以较低比例提取在日常性较低的停留场所获得的媒体信息。而且，将所提取的媒体信息转移给第2媒体信息存储部610。
3.媒体信息和日常性 下面具体说明本实施方式的方法。在数字相机中，伴随其摄影的便利性和存储器的容量变大，很多情况下会摄影大量图像，却在PC的HDD等中大量保存拍摄后未曾再现过的图像。因此，存在HDD的使用存储容量被迫地压縮，或难以从拍摄保存的图像之中找出用户期望的图像等问题。 另一方面，作为用户而言，相比在与平时别无二致的日常状况下摄影的图像，更多会对在经历非日常体验的状况下拍摄的图像存在兴趣与情绪。例如在再现数字相机所拍摄的图像的情况下，可认为相比在经常去的场所拍摄的图像(记录的意义更强)，对在平时几乎没有去过的地方拍摄的图像(乐趣、珍贵/美丽的纪念性意义较强)会存在更多关注。另外，如果能够优先再现和鉴赏在因非日常体验而兴奋/感动的状况下摄影的图像等，则对于用户而言会很方便。 于是，在本实施方式中，关于用户日常性(非日常性)，着眼于可根据传感器信息等估计用户状况来进行判断的情况，采用了将如上获得的用户日常性与图像等媒体信息关联起来进行存储的方法。这样，能够实现以下等方法优先提取在日常性较低的非日常体验状况下拍摄的图像进行再现，或者反之优先提取出在日常性较高的平常那样的状况下拍摄的图像，进行删除/整理。 例如，图3表示本实施方式的媒体信息的写入处理(保存处理)的流程图。
首先，获得图像/音频等媒体信息(步骤S1)。接着，获得来自行动传感器、状态传感器、环境传感器的传感器信息(步骤S2)。然后，根据所获得的传感器信息、用户的预定信息和从外部获得的外部信息等，估计用户的状况(TP0f)(步骤S3)。 接着，根据所估计的用户的状况，参照日常性信息存储部124(日常性数据库)，评价用户日常性(步骤S4)。然后，将所获得的用户日常性与媒体信息关联起来写入媒体信息存储部122 (步骤S5)。并且，在图3中，在步骤S3中估计用户状况，在步骤S4中根据用户状况评价日常性，然而也可以省略步骤S3，直接根据传感器信息评价日常性。另外，在步骤S5中，未必需要将媒体信息和日常性同时写入媒体信息存储部122。例如也可以为，在传感器(或与其连接的数据记录器)中预先一起记录传感器信息与时刻，然后根据传感器信息针对与时刻一起记录的媒体信息判定日常性，将所获得的日常性与媒体信息关联起来。
例如设想在公司里拍摄会议中的记录照片的情况。这种情况下，如图4所示，通过传感器信息估计出日期时间(T)为平日的白天、用户停留场所(P)为工作办公室、用户的行动(0)是会议中、用户状态(f)是适度紧张状态，因此用户的状况是平时的状况，用户日常性被评价为较高。即，根据来自行动传感器和活体传感器的各种传感器信息、预定信息和外部信息等，判断为用户状况为日常性较高的状况。因此，当在这种情况下用户获得了媒体信息时，则该媒体信息与被设定为较高值的日常性关联起来。 并且，关于用户停留场所(O)，能够使用GPS传感器、或使用移动电话的位置信息服务和处于周围的无线LAN的位置信息来确定该位置，能够使用地图信息等确定该场所。另外，关于用户的行动(0)，能够通过使用RFID等来识别出用户位于PC附近，或者根据时间(T)和场所(P)来估计用户行动，或在某种程度下估计出行动之后，向用户提示选项使其选择并输入，以确定行动。 另外，设想例如离开公司之后在附近的饭店与友人会餐，拍摄该纪念照片的情况。这种情况下，如图4所示，分别估计出日期时间为平日的夜间(定时之后)、用户停留场所为公司附近的饭店、用户的行动为会餐、用户的状态为放松状态，因此用户日常性被评价为中等程度，在这种状况下获得媒体信息时，该媒体信息与被设定为中等程度的值的日常性关联起来。 另外，例如设想休息日前往观光地拍摄风景照片的情况。这种情况下，分别估计为日期时间是休息日的白天、用户停留场所为观光地、用户的行动为散步中、用户的状态为适度兴奋状态，因此评价为用户日常性较低(被评价为非日常)，在这种状况下获得媒体信息时，该媒体信息与被设定为较低值的日常性关联起来。 并且，日常性信息存储部124将日常性与用户停留场所关联起来进行存储，或者与用户停留场所和停留时间段关联起来进行存储。例如在图4中，将日常性与作为停留场 所的工作地办公室关联起来进行存储，或将日常性与作为停留场所的工作地办公室和作为 停留时间段的平日的白天关联起来进行存储。而且，状况估计部106确定获得媒体信息时 用户的停留场所、或停留场所和停留时间段，日常性评价部110从日常性信息存储部124读 取与所确定的停留场所或所确定的停留场所和停留时间段关联起来的日常性，来评价用户 日常性。例如在图4中，如果将公司的办公室确定为用户停留场所，或者将公司的办公室确
定为用户停留场所且将平日的白天确定为停留时间段，则用户日常性会被评价为很高。
图5表示媒体信息存储部122的数据结构(一览表)的例子。图5中，作为媒体 信息的图像文件(JPEG文件)关联着各种中间信息。具体而言，作为中间信息关联着拍摄 图像的日期时间、此时的经纬度、由经纬度所确定的用户停留场所(区域/点)。进而，作为 中间信息还关联着拍摄图像时用户日常性。再如图5所示，既可以用一览表形式来关联日 常性等中间信息，也可以例如将这些中间信息写入图像文件内的既定区域。
例如在图5中，由于日光东照宫(日本神社)为用户几乎不会前往的观光地，因此 如图4所说明的那样，判断为此时用户日常性较低(判断为非日常)。因此，例如将日常性 =1与停留于日光东照宫时所拍摄的图像文件关联起来。并且，这里，日常性越低则越将日 常性的值(参数值)设定为较低的值。 另一方面，在图5中，在平日的白天位于新宿的公司的大厦时，则为平常，如图4所 说明的那样，判断为用户日常性较高。因此，例如将日常性=io与此时所拍摄的图像文件 关联起来。另外，当平日的夜间位于公司附近的酒店时，则判断为用户日常性在中等程度。 因此，例如将日常性=5与此时所拍摄的图像文件关联起来。 并且，即便同样在新宿的公司大厦中，但是在例如判断为用户在休息日的白天位 于该大厦的情况下，判断为日常性较低。在如此评价日常性时，不仅评价用户停留场所，还 对于停留场所与停留时间段的组合进行评价，从而能够使日常性的评价处理变得合理。
另外，在包含用户公司大厦的新宿，若按照后述的停留区域那样较为宽广的划分 领域来判断日常性，则无法区分用户是处于公司大厦中还是处于公司附近的酒店中，会发 生日常性评价变得不正确的事态。关于这点，如果按照后述的停留点那样以小于停留区域 的划分领域来判断日常性，就能防止这种事态。 接着，说明关联有日常性的媒体信息的使用方法。例如，图6中示了通过数字相框 等图像再现装置来再现图5的图像文件的处理的流程图。 首先，获得数字相框中的幻灯片放映的再现时间Tp(再现总时间)和每张图像的 显示时间Td(步骤S11、S12)。该再现时间Tp、显示时间Td既可以由用户进行输入设定，也 可以在系统侧进行设定。 接着，根据所获得的再现时间Tp和显示时间Td，计算再现张数N = Tp/Td(步骤 S13)。然后，从存储在媒体信息存储部122中的图像中提取出日常性较低的N张图像(步 骤S14)。然后，使用所提取的N张图像，执行数字相框的幻灯片放映(步骤S15)。
如上，在图6中，从存储在媒体信息存储部122中的图像(广义上为媒体图像)中 优先提取在获得时用户日常性较低的图像。因此，如图5可知，优先再现作为非日常体验的 观光时的照片等，不再现日常的记录照片等。由此，用户可通过观察再现图像来回顾以往的 非日常体验，能提供赋予用户日常生活模式以变化的契机。另外，还能不经意间再现未曾再现过就拍摄保存起来的图像，能回想起以往的体验，实现所保存的图像的有效活用，并且能 够提供一种迄今为止都不存在的类型的数字相框。 接着，说明关联着日常性的媒体信息的其他利用方法。例如，图7示出了从图5的 图像文件中高效地提取被认为不需要的图像，并转移(存档)给第2媒体信息存储部610 的处理的流程图。 首先，计算媒体信息存储部122中的图像保存张数、使用存储容量等(步骤S31)。 即，把握媒体信息存储部122的空闲存储容量等。而且，根据该计算结果，计算出存档用的 应转移给第2媒体信息存储部610的图像的张数和使用存储容量(步骤S22) 。 S卩，为使媒 体信息存储部122中的空闲存储容量具有余量，需要计算应转移何种程度的张数和使用存 储容量的图像。 接着，如图5所示，使用与各图像关联起来的日常性对存储在媒体信息存储部122 中的图像进行分类(步骤S33)。例如，以日常性较高的图像在先的方式进行分类。然后，按 照从日常性较高的图像起的顺序，转移(移动)到第2媒体信息存储部610，实现图像的存 档(步骤S34)。这种情况下，所转移的图像从媒体信息存储部122中被删除。然后，重复步 骤S34的转移，直至达到步骤S32中计算出的存档量为止(步骤S35)。
如上，在图7中，从存储在媒体信息存储部122中的图像(媒体信息)中优先提取 在获得时用户日常性较高的图像，将所提取的图像从媒体信息存储部122中删除，并且转 移给第2媒体信息存储部610。因此，根据图5可知，会保留作为非日常体验的观光时的照 片等，而日常的记录照片等会被存档(保存在图片库中)。即，被转移到容量大于媒体信息 存储部122的存档用存储部即第2媒体信息存储部610中进行保存。由此，用户能够从拍 摄保存的图像中，将再现可能性较小的日常状况下的摄影图像存档到第2媒体信息存储部 610。因此，能够对拍摄保存的图像进行高效整理，或防止由于拍摄保存的图像导致媒体信 息存储部122的使用存储容量被压縮的事态。另外，由于这种情况下不会存档非日常体验 下的图像，因而不必从第2媒体信息存储部610再次进行读取，能够方便地再现，回顾非日 常体验。尤其通过组合图6的方法和图7的方法，能够优先地将非日常体验下的摄影图像 保留于媒体信息存储部122中，能够在用户期望的时刻便利地再现和欣赏。
另外，例如也可以在外部服务器设置第2媒体信息存储部610，实现这种存档服 务。即，使用该服务的用户通过图7的方法，通过因特网等将图像等媒体信息转移到服务提 供者所运营的外部服务器，保存在该外部服务器的第2媒体信息存储部610中。这种情况 下，按照用户的保存数据量对用户进行收费处理。这样，能够提供一种迄今为止不存在的类 型的数据保存服务。 并且，基于日常性的媒体信息的检索处理和转移处理不限于图6、图7的处理，能 够进行各种变形实施。 例如在图8(A)中，当居住在东京的用户前往伦敦观光旅行并停留在伦敦的情况 下，由于被认为是非日常，因此判断为用户日常性N较低，评价为N二1。另一方面，当去大阪 出差并停留于大阪的情况下，日常性被评价为N二 4，当处于作为工作地的新宿的情况下， 日常性被评价为N二IO。而且，在图8(A)中，按照日常性设定了媒体信息的提取比例。
此处，提取比例例如是提取数量相对于在该停留场所获得的媒体信息的总数(总 张数)的比例。例如在旅居伦敦的情况下，由于日常性较低，提取比例被设定为例如100%这样较高的比例。另一方面，当处于新宿的情况下，由于日常性较高，因此提取比例被设定 为例如5%这样较低的比例。 而且，当从存储在媒体信息存储部122中的媒体信息中提取出要再现的媒体信息 的时候，使用图8(A)的提取比例。例如假设旅居伦敦的期间内拍摄的照片为100张，则与 该照片关联起来的日常性为N二 l，提取比例被设定为100%，因此提取数量为100张。另 外，假设处于大阪的期间内拍摄的照片为50张，则与该照片关联起来的日常性为N = 4，提 取比例被设定为70%，因此提取数量为35张。另外，假设处于新宿的期间内拍摄的照片为 200张，则与该照片关联起来的日常性为N = IO，提取比例被设定为5%，因此提取数量为 10张。这样，根据图8(A)的方法，按照如下的提取比例来提取媒体信息用户获得媒体信 息时用户的停留场所越是对于用户而言日常性较低的停留场所，则该提取比例越被设定为 较高的比例。 另一方面，图8(B)是用于存档的转移时的提取比例的设定例。当从存储在媒体信 息存储部122中的媒体信息中提取转移给第2媒体信息存储部610的媒体信息时，使用图 8(B)的提取比例。例如假设旅居在伦敦的期间内所拍摄的照片为100张，由于旅居伦敦时 的照片是非日常状况下的珍贵的照片，因此转移时的提取比例被设定为0%。因此，不会将 旅居伦敦的期间的照片作为存档转移给第2媒体信息存储部610。另一方面，假设在停留大 阪的期间内拍摄的照片为50张，则日常性为N = 4，转移时的提取比例被设定为20%。因 此，10张照片被转移到第2媒体信息存储部610。另外，如果在处于新宿时拍摄的照片为 200张，则日常性为N二 10，转移时的提取比例被设定为60%。因此，120张照片被转移到 第2媒体信息存储部610。如上，在图8(B)中，按照以下提取比例来提取媒体信息并转移给 第2媒体信息存储部610，即用户获得媒体信息时的用户停留场所越是对于用户而言日常 性高的停留场所，则该提取比例越被设定为较高的比例。并且，对于用户期望无论停留场所 如何都不转移给第2媒体信息存储部610而是留在手头的照片，能够在摄影时等将照片设 定为不能转移。 4.第2系统的构成例 图9表示本实施方式的第2系统构成例。在图9的系统中设置有服务器200 (本地 服务器、PC)。便携型电子设备100和服务器200例如通过因特网、无线LAN等进行通信连 接。而且，在图9中主要是在用户持有的便携型电子设备100中执行用户状况的估计处理、 日常性的评价处理、媒体信息的写入处理。另一方面，图6 图8 (B)所说明的检索处理和转 移处理主要是通过服务器200的处理部202的检索部214和转移部216执行的。另外，所 检索的图像的再现处理(幻灯片放映)是通过数字相框300的处理部302来执行的。艮P， 数字相框300的显示控制部318进行显示器340的显示控制，从而执行图6所说明那样的 幻灯片放映。并且，也可以在服务器200中执行用户状况的估计处理、日常性的评价处理、 媒体信息的写入处理，或在数字相框300中执行媒体信息的检索处理。
在图9中，便携型电子设备100的媒体信息获得部103获得由摄像部146所摄像的 图像和由麦克风148所录音的音频等媒体信息。另外，传感器信息获得部104从可穿戴传 感器150的行动传感器、状态传感器或环境传感器获得传感器信息。而且，状况估计部106 根据所获得的传感器信息、存储在预定信息存储部125中的预定信息、从服务器200和外部 服务器600接收到的外部信息等，估计用户的状况。而且，日常性评价部110参照日常性信息存储部124评价用户日常性，写入部112将所获得的日常性与所获得的图像和音频等媒 体信息关联起来，写入媒体信息存储部122。 这样，与日常性关联起来的媒体信息通过通信部138被发送给服务器200，服务器 200通过通信部238进行接收。然后，所接收的媒体信息被保存存储在服务器侧的媒体信息 存储部222。 服务器侧的检索部214进行以下检索处理从如上地保存于服务器侧的媒体信息 存储部222的媒体信息之中提取要在数字相框300中再现的媒体信息。具体而言，使用与 媒体信息关联起来的用户日常性，对存储在媒体信息存储部222中的媒体信息进行检索处 理，优先提取出在获得时用户日常性较低的媒体信息。而且，所提取出的媒体信息经由通信 部238发送给数字相框300，数字相框300经由通信部338进行接收。而且，所接收的媒体 信息被保存在数字相框侧的媒体信息存储部322。 于是，数字相框300的显示控制部318根据被写入媒体信息存储部322的媒体信 息即图像数据，进行在显示器340上显示图像的控制。S卩，执行图6所说明的幻灯片放映来 再现图像。另外，在媒体信息包含音频数据的情况下，还通过未图示的扬声器等进行音频再 现。 另外，服务器200的转移部216进行如下处理使用与保存在媒体信息存储部222 中的媒体信息关联起来的用户日常性，提取媒体信息，将所提取的媒体信息转移给第2媒 体信息存储部610。具体而言，从存储在媒体信息存储部222中的媒体信息之中提取在获得 时用户日常性较高的媒体信息，从媒体信息存储部222中删除所提取的媒体信息，并转移 给第2媒体信息存储部610。 S卩，经由外部服务器600将所提取的媒体信息发送给外部服务 器600，外部服务器600将所接收的媒体信息保存在作为存档用信息存储部的第2媒体信 息存储部610中。这样，能够实现图7中说明的媒体信息的存档，能够防止由于未曾再现就 直接保存的媒体信息而导致服务器200的媒体信息存储部222的使用存储容量被压縮的事 态。并且，当按照用户的请求等而再现存储在第2媒体信息存储部610中的媒体信息时，能 够从外部服务器600接收该媒体信息，重新保存在服务器200的媒体信息存储部222中，或 转移给数字相框300。 图10 (A)表示数字相框300 (数字照片再现器、图像再现装置)的例子。图10 (A) 是所谓相架(Photo Stand)型的数字相框的例子。该数字相框300由用户设置在家中等任 意场所。而且，执行存储在存储部320的媒体信息存储部322中的媒体信息(数字图像数 据、声音数据)的再现处理(图像再现、声音再现)。数字相框300即使例如没有用户明示 的再现指示，也能够自动再现存储在媒体信息存储部322中的媒体信息。例如自动执行图 6中说明的照片的幻灯片放映，或进行视频的自动再现。 并且，图10(A)表示了直立式相框类型的数字相框的例子，然而例如也可以是电 子纸那样的壁挂型的结构。另外，还能够在数字相框300上设置媒体信息的再现指示按钮， 或使用遥控器进行再现指示。 该数字相框300可以具有SD卡等存储卡的接口。或者可以具有无线LAN、蓝牙 (Bluetooth)等无线通信的接口、USB等有线通信接口。例如，用户将媒体信息(关联有日 常性的媒体信息)保存在存储卡中，将其安装在数字相框300的存储卡接口上，则数字相框 300执行保存在存储卡中的媒体信息的自动再现(幻灯片放映等)。或者，如果数字相框300通过无线通信或有线通信从外部接收到媒体信息，则对该媒体信息执行再现处理(自 动再现处理)。例如，当用户持有的数字相机或移动电话等便携型电子设备100具有蓝牙等 无线功能的情况下，使用该无线功能从便携型电子设备100的媒体信息存储部122向数字 相框300的媒体信息存储部322转移媒体信息。于是，数字相框300执行所转移的媒体信 息的再现处理。 图10 (B)表示数字相框300的构成例。该数字相框300具有进行各种处理的处理 部302、用于进行无线和有线通信的通信部338、存储部320、显示器340。另外，能够实施省 略这些构成要素中的一部分或者追加其他构成要素等各种变形。 处理部302可以通过CPU等处理器、显示控制用的ASIC等实现。存储部320例如 可通过RAM和HDD等实现。并且，在将媒体信息保存于存储卡中并自动再现的情况下，存储 部320可通过存储卡实现。显示器340例如可通过液晶显示器、使用有机EL等发光元件的 显示器、电泳型显示器等实现。 在图10(B)中，处理部302包括检索部314、转移部316、显示控制部318。 检索部314进行以下的检索处理从存储在媒体信息存储部322中的媒体信息中
优先提取出在获得媒体信息时用户日常性较低的媒体信息。 转移部316进行以下的处理使用与媒体信息关联起来的用户日常性，提取存储 在媒体信息存储部322中的媒体信息，将所提取的媒体信息转移给外部的第2媒体信息存 储部610。即，在图9中，由服务器200执行了这种检索处理和转移处理，而在图10(B)的例 子中是由数字相框300执行这种检索处理和的。 显示控制部318进行根据作为媒体信息的图像数据在显示器340上显示图像的控 制。例如进行对被压縮的图像数据解码的处理，或进行再现所解码的图像数据的处理等。
如果使用图10(A)、图10(B)中所说明的数字相框300，则能够从用户拍摄保存的 大量图像中根据日常性提取图像进行再现。而且，由于能够优先提取出例如在非日常体验 的状况下摄影的图像进行再现，因此，能够对不经意间观看到数字相框300所自动再现的 图像的用户提供一种赋予日常生活模式以变化的契机等。
5.日常性的评价处理 下面说明日常性评价处理的具体例子。如图5所说明的那样，为了评价用户日常 性，需要确定各时间段中的用户的停留场所。然而，通过GPS传感器等获得的位置数据(经 纬度)本身只不过是数据，并非直接体现用户停留场所的信息。因此，如何根据这种位置数 据来确定对用户而言具有意义的场所就成为了重要的课题。 例如根据停留时间对用户的停留地进行归类，则能够提取对用户而言具有意义的 场所。在图11中以从车站下车的用户在车站周边行走，在各时间段逗留于商场A、薄饼店 B、电影院C、家族餐厅D、杂货店E、书店F的情况为例示出了热力型数据地图(Heat M即热 图)。如果使用GPS传感器等，则能够获悉用户在这些停留场所上的位置分布，并且该分布 的大小和浓度(密度)根据停留场所不同而不同。在该热力型数据地图中，停留时间较长 的场所很浓，该场所中的伴随移动的位置分布在较广的范围。 而且，如在图5中所说明的那样，对于新宿等的街道，如果以广泛的区域来评价日 常性，则会在其中混合存在多个意义不同的场所(例如办公室和小酒馆和商场等)，可能会 不正确地评价日常性。另一方面，对于观光地等不会长时间停留在特定场所而是以散心为目的造访的场所，若是狭小的区域则有可能无法提取出有意义的场所而无法评价日常性。
于是，本实施方式中如图12(A)、图12(B)所示，作为用户停留场所而导入了停 留区域和停留点这样的概念。如图12(A)所示，停留区域是比停留点要宽广的区域，如图 12(B)所示，例如在各停留区域内存在比停留区域狭窄的停留点。本实施方式中，通过如下 说明的方法提取这种停留点和停留区域。 例如，停留区域是既定期间T1内的位置的标准偏差o小于等于第l阈值Sthl(几 百m 1000m)的区域。另一方面，停留点是既定期间T2内的位置的标准偏差o小于等于 第2阈值Sth2(几十m 100m)的区域。本实施方式中，通过对用户身上携带的GPS传感 器等位置检测传感器的信息进行统计性处理，由此提取出停留区域和停留点。
具体而言，设既定期间T1(例如4小时)内的经纬度平均为(Ni! 、EiO、标准偏差 为(No、Eo)。在这种情况下，对(No 、Eo)进行距离换算，提取出南北、东西距离的标准 偏差分别在Sthl(例如lkm)以下的区域，从而能够提取出图12(A)所示的对用户有意义的 停留区域。另一方面，将距离的阈值减小为Sth二Sth2(例如几十m)，进行与上述同样的处 理，从而能够提取出图12(B)所示的停留点。 如上，在本实施方式中，根据既定期间T1内的用户位置的标准偏差o是否小于等 于第1阈值Sthl，判断用户是否处于停留区域内。另一方面，根据既定期间T2内的用户位 置的标准偏差o是否小于等于比第1阈值Sthl小的第2阈值Sth2，判断用户是否处于停 留点内。 例如在时刻t，对从时刻(t-Tl)到时刻t为止的用户位置(经纬度)进行统计处 理，求出位置的标准偏差o 。而且，在此时的标准偏差o小于等于第1阈值Sthl的情况 下，可判断为该用户在(t-Tl) t的时间段内位于区域内。同样地，对从时刻(t-T2)到时 刻t为止的用户位置进行统计处理，求出位置的标准偏差o。而且，在此时的标准偏差o 小于等于第2阈值Sth2的情况下，可判断为该用户在(t-T2) t的时间段内位于点内。另 外也可以是T1 = T2。另外，关于停留区域、停留点的提取，既可以通过针对1个用户长时间 观测其位置来统计处理加以实现，也能够观测多个用户的位置来统计处理加以实现。
如图13所示，根据各点、各区域不同，平均的停留时间、其中的距离范围存在特 征。因此，通过适当设定停留时间和距离范围，能够某种程度上对点和区域的性质进行分 类。即，有意义区域的粒度(划分)根据场所、类别而不同，因此这种分类对于日常性等的 评价是有效的。例如在图13中，茶馆的距离范围为10m左右、停留时间为30分钟左右，电 影院的距离范围同样为10m左右，但停留时间为2小时左右，要比茶馆长。另外，杂货店的 距离范围比茶馆长，为100m左右，停留时间为30分钟左右，但购物中心的停留时间增长，为 4小时左右。另外，区域相比点而言距离范围较大，并且停留时间也较长。通过这样调查距 离范围和停留时间，能够将仅凭位置数据无法提取的该场所具备的意义也提取出来。
例如，将阈值(距离范围)Sth设定为几十m时，则仅能提取出用户坐下并经过了 某种程度的时间的场所。而且，如果略微增大阈值Sth，则能够提取出在建筑物内移动的场 所，进一步增大阈值Sth就能够提取出在设施内移动的场所、较大的公园、进行散步的街道 和观光地、攀登的山等。 这里，如果增大了阈值Sth，则能够提取出包含多个点的区域，然而仅凭该区域的 提取无法区别出是在新宿的办公室还是在新宿的小酒馆，无法实现准确的评价处理。于是优选通过区域和点的组合进行评价。
图14中，求出如上提取出的区域和点(停留区域和停留点)上的用户的存在概
率。这种情况下，由于对用户而言，由于星期几和时间段的不同，该停留场所具有的意义也
不同，因此在图14中，以平日和休息日、白天和早晚分类，求出存在概率。而且，例如能够将
最近30天内各区域和各点上的停留时间的比例与用户的存在概率关联起来。 例如在图14中，对于自家，平日白天的存在概率较低，然而平日早晚的存在概率
较高。另外，在休息日的白天，存在概率某种程度上变高，而休息日早晚的存在概率更高。 另一方面，对于作为工作地的办公室，平日白天的存在概率较高，而平日早晚的存
在概率较低。另外，对于休息日的办公室，白天和早晚双方的存在概率都很低。 如图15(A)所示，图14中获得的存在概率能够分配给日常性N(作为日常性计算
基础的值)。还可以对这种存在概率进一步追加状况和感情等来计算日常性。 另外，例如利用该场所的平均停留时间对各区域、各点的停留时间的比例进行标
准化，还能够评价用户相对于该场所的日常性。这样，能够防止停留时间原本较短的便利店
这样的场所的日常性被计算得较低的事态。 或者也可以如图15(b)所示，不根据停留时间定义存在概率，而是仅根据既定期 间内(例如1 3个月)用户存在于该点/区域的次数(进入次数)来定义存在概率，计
算日常性N。 并且，日常性信息存储部124(日常性数据库)能够通过图14和图15(A)的组合或 图14和图15(B)的组合来实现。例如在日常性信息存储部124中，如图15(A)、图15(B)， 将日常性与图14的停留区域和停留点等用户停留场所关联起来进行存储。或者将日常性 与停留区域、停留点等用户停留场所以及平日白天、平日早晚、休息日白天、休息日早晚等 停留时间段关联起来进行存储。如果确定了用户的停留区域、停留点等停留场所，或除此之 外还确定了平日白天、平日早晚等停留时间段，则通过从利用图14、图15(A)或图14和图 15(B)的组合来实现的日常性信息存储部124中读取日常性，能够评价用户日常性。
3.日常性评价处理的其他例子 接着，使用图16等说明日常性评价处理的其他例子。在图16中，状况估计部106 包含状况鉴定部107和状况预测部108。 状况鉴定部107根据行动、状态、环境的传感器信息等，鉴定(估计)用户的行动、 状态、环境等状况。然后，将所获得的用户状况的履历信息(登录信息)保存在履历信息存 储部126中。而且，通过解析所保存的状况履历信息，由此将用户个人的兴趣/嗜好和行动 倾向等作为个人模式构建起来，存储在个人模式信息存储部128(个人模式数据库)中。
并且，作为个人模式(个人模型)能够使用概率模型，作为这种概率模型，例如具 有隐马尔可夫模型(Hidden Markov Model, HMM)。该隐马尔可夫模型(HMM)中，系统假定 参数是未知的马尔可夫过程，根据可观测的信息估计该未知的参数。即，HMM是一种在认为 某系统具有按照马尔可夫过程迁移的内部状态，并概率性输出与各状态对应的记号的情况 下，根据记号的出现概率分布来估计系统内部的状态迁移的概率模型。能从外部观测的仅 是记号序列，无法直接观测内部的状态迁移，因而被称作"隐"。 状况预测部108根据该个人模式信息(状况履历信息)，预测用户下一个行动(广 义上为状况)。另外，通过状况鉴定部107来鉴定用户的实际行动。而且，日常性评价部110通过判断所鉴定的用户实际行动与根据刚才(之前)的状况以及个人模式所预测的用户行 动在何种程度上是否一致，由此评价日常性。 接着，使用图17(A) 图17(D)来具体说明图16的日常性评价方法。图17(A)是 用户平日的状况履历(行动履历)的例子。用户在平日7点30分起床，8点吃早餐，8点30 分从家出发，8点45分在自家附近的A车站搭乘电车。状况预测部108根据这种用户状况 履历来预测用户下一个行动。 而且，如图17(B)所示，状况预测部108例如根据图17(A)的状况履历，预测在下 一个行动中用户前往公司的概率最高。而且，在由状况鉴定部107所鉴定出的用户的实际 行动为前往公司的行动的情况下，日常性评价部110评价为用户日常性较高。另一方面，在 由于紧急事态等用户马上返回家中，所鉴定的用户的实际行动为返回家中的情况下，评价 为日常性较低、属于非日常。 图17(C)是用户休息日的状况履历的例子。用户在休息日8点30分起床，9点吃 早餐，9点30分乘车从家出发。状况预测部108根据这种用户的状况履历预测用户下一个 行动。 而且，如图17(D)所示，状况预测部108根据图17(C)的状况履历，预测出用户在 下一个行动中前往网球学校H的概率最高。而且，在由状况鉴定部107所鉴定出的用户的实 际行动为前往网球学校H的行动的情况下，日常性评价部IIO评价为用户日常性较高。另 一方面，在用户前往距市中心较远的观光地K兜风的情况下，被评价为日常性较低、属于非日常。 并且，作为日常性评价对象的用户的状况信息除了用户停留场所的信息之外还可
以设想各种信息，例如可以是用户会话中的人物信息或用户紧张度信息等。 例如，假设作为日常性评价对象的状况信息是用户会话中的人物信息。这种情况
下，当用户与经常见面的人会话时，评价为日常性较高；当与很少见面的人会话时，被评价
为日常性较低。具体而言，使用GPS传感器等检测第l用户停留场所和第2用户停留场所，
如果这些停留场所一致且检测到说话，则判断为第l用户与第2用户见面正在会话。而且，
根据第1、第2用户的识别信息和第1、第2用户的状况履历信息，获得第1用户与第2用户
会话的频度信息，根据该频度信息判断对于第1用户而言，与第2用户进行会话是否为日常事件。 而且，针对例如与很少见面的人一起拍摄的照片，关联较低的日常性。因此，在此 后通过数字相框300等再现该照片的情况下，优先提取出与该人一起拍摄的照片，因此能 够优先显示出作为用户回忆的照片。 另外，在评价日常性的情况下，优选分别评价5WlH(Who、 What、 When、 Where、 Why、 How:何人、何事、何时、何地、何因、何法)。例如假设用户的公司所在地在新宿。这种情况 下，如果用户平日在新宿，则被评价为日常性较高，而如果休息日在新宿，则反之被评价为 日常性较低。即，即便场所相同，只要时间段和日期不同，则日常性的评价结果也会不同。另 外，彼此是公司同事的第1、第2用户如果平日在公司见面则被评价为日常性较高，而如果 休息日在公司之外的场所见面，则被评价为日常性较低。即，即使人物相同，只要时间段和 停留场所不同，则日常性的评价结果也会不同。 并且，如上详细说明了本实施方式，能够实施在实质上不脱离本发明的新颖事项和效果的多种变形，这对于本领域技术人员来说是容易理解的。因此，这种变形例都属于本 发明范围内。例如，在说明书和附图中与更为广义或同义的不同用语(传感器、媒体信息 等) 一起记载了至少1次的用语(可穿戴传感器、图像等)，无论在说明书或附图中何处都 可以置换为该不同用语。另外，信息处理系统的构成、动作也不限于本实施方式中所说明的 内容，可实施各种变形。
权利要求
一种信息处理系统，其特征在于，该信息处理系统具有媒体信息获得部，其获得媒体信息；媒体信息存储部，其存储所获得的媒体信息；日常性评价部，其根据包括来自测量用户行动的行动传感器、测量用户状态的状态传感器和测量用户环境的环境传感器中至少1个传感器的传感器信息在内的信息，进行评价用户日常性的处理；以及写入部，其将通过上述日常性评价部的评价处理而获得的用户日常性与所获得的媒体信息关联起来写入到上述媒体信息存储部。
2. 根据权利要求1所述的信息处理系统，其特征在于，上述信息处理系统还具有检索 部，该检索部使用与媒体信息关联起来的用户日常性，对存储在上述媒体信息存储部的媒 体信息进行检索处理。
3. 根据权利要求2所述的信息处理系统，其特征在于，上述检索部进行这样的检索处 理上述检索部从存储在上述媒体信息存储部的媒体信息中优先提取出在获得时用户日常 性较低的媒体信息。
4. 根据权利要求1至3中任一项所述的信息处理系统，其特征在于，上述信息处理系统 还具有转移部，该转移部使用与媒体信息关联起来的用户日常性，提取出存储在上述媒体 信息存储部的媒体信息，并将提取出的媒体信息转移到第2媒体信息存储部。
5. 根据权利要求4所述的信息处理系统，其特征在于，上述转移部从存储在上述媒体 信息存储部的媒体信息中优先提取出在获得时用户日常性较高的媒体信息，将所提取出的 媒体信息从上述媒体信息存储部删除并转移到上述第2媒体信息存储部。
6. 根据权利要求4或5所述的信息处理系统，其特征在于，上述第2媒体信息存储部是 容量比上述媒体信息存储部大的大容量的存档用存储部。
7. 根据权利要求1至6中任一项所述的信息处理系统，其特征在于，上述信息处理系统 具有状况估计部，该状况估计部根据包含来自测量用户行动的行动传感器、测量用户状态 的状态传感器和测量用户环境的环境传感器中至少1个传感器的传感器信息在内的信息， 估计用户状况，上述日常性评价部根据所估计出的用户状况，进行评价用户日常性的处理。
8. 根据权利要求7所述的信息处理系统，其特征在于，上述信息处理系统具有日常性 信息存储部，该日常性信息存储部将日常性与用户停留场所关联起来进行存储，上述状况估计部确定用户获得媒体信息时的用户停留场所，上述日常性评价部从上述日常性信息存储部读出与所确定的用户停留场关联起来的 日常性，评价用户日常性。
9. 根据权利要求7所述的信息处理系统，其特征在于，上述日常性信息存储部将日常 性与用户停留场所以及用户停留时间段关联起来进行存储，上述状况估计部确定用户获得媒体信息时的用户停留场所和用户停留时间段， 上述日常性评价部从上述日常性信息存储部读出与所确定的用户停留场所以及用户 停留时间段关联起来的日常性，评价用户日常性。
10. 根据权利要求8或9所述的信息处理系统，其特征在于，上述信息处理系统具有检 索部，该检索部使用与媒体信息关联起来的用户日常性，对存储在上述媒体信息存储部的媒体信息进行检索处理，上述检索部进行按照提取比例来提取媒体信息的检索处理，并且，用户获得媒体信息 时的用户停留场所对用户而言日常性越低，上述提取比例被设定越高的比例。
11. 根据权利要求8至10中任一项所述的信息处理系统，其特征在于，上述信息处理系 统具有转移部，该转移部使用与媒体信息关联起来的用户日常性，提取出存储在上述媒体 信息存储部的媒体信息，并将所提取出的媒体信息转移给第2媒体信息存储部，上述转移部按照用户获得媒体信息时的用户停留场所对用户而言日常性越高其被设 定为越高的比例的提取比例来提取媒体信息，将所提取出的媒体信息从上述媒体信息存储 部删除并转移给上述第2媒体信息存储部。
12. 根据权利要求8至11中任一项所述的信息处理系统，其特征在于，上述状况估计部 确定停留区域和比停留区域狭小的停留点作为用户停留场所，在确定了停留点作为用户停留场所的情况下，上述日常性评价部从上述日常性信息存 储部读出与所确定的停留点关联起来的日常性，评价用户日常性。
13. 根据权利要求12所述的信息处理系统，其特征在于，上述状况估计部根据既定期 间内的用户位置的标准偏差是否处于既定的第1阈值以下，判断用户是否处于停留区域 内；上述状况估计部根据既定期间内的用户位置的标准偏差是否处于小于上述第1阈值 的既定的第2阈值以下，判断用户是否处于停留点内。
14. 一种数字相框，其特征在于，该数字相框具有 显示器；以及显示控制部，其根据图像数据，进行在上述显示器上显示图像的控制，上述图像数据是 由权利要求1至13中任一项所述的信息处理系统写入到上述媒体信息存储部的媒体信息。
15. —种信息处理系统，其特征在于，该信息处理系统具有媒体信息存储部，其将媒体信息与获得该媒体信息时的用户日常性关联起来进行存 储；以及检索部，其使用与上述媒体信息关联起来的用户日常性，对存储在上述媒体信息存储 部的媒体信息进行检索处理，上述检索部进行这样的检索处理该检索部从存储在上述媒体信息存储部的媒体信息 中优先提取出在获得时用户日常性较低的媒体信息。
16. 根据权利要求15所述的信息处理系统，其特征在于，上述检索部进行按照提取比 例来提取媒体信息的检索处理，并且，用户获得媒体信息时的用户停留场所对用户而言日 常性越低，该提取比例被设定为越高的比例。
17. —种数字相框，其特征在于，该数字相框具有 显示器；以及显示控制部，其根据图像数据，进行在上述显示器上显示图像的控制，上述图像数据是 由权利要求15或16所述的信息处理系统提取出的媒体信息。
18. —种信息处理系统，其特征在于，该信息处理系统具有媒体信息存储部，其将媒体信息与获得该媒体信息时的用户日常性关联起来进行存 储；以及转移部，其使用与上述媒体信息关联起来的用户日常性，提取出存储在上述媒体信息 存储部的媒体信息，并将提取出的媒体信息转移给第2媒体信息存储部，上述转移部从存储在上述媒体信息存储部的媒体信息中优先提取出在获得时用户日 常性较高的媒体信息，将所提取出的媒体信息从上述媒体信息存储部删除并转移给上述第 2媒体信息存储部。
19. 根据权利要求18所述的信息处理系统，其特征在于，上述转移部按照提取比例来 提取媒体信息，将所提取出的媒体信息从上述媒体信息存储部删除并转移给上述第2媒体 信息存储部，其中，用户获得媒体信息时的用户停留场所对用户而言日常性越高，上述提取 比例被设定为越高的比例。
20. —种程序，其特征在于，其使计算机作为如下部分发挥功能 媒体信息获得部，其获得媒体信息； 媒体信息存储部，其存储所获得的媒体信息；日常性评价部，其根据包括来自测量用户行动的行动传感器、测量用户状态的状态传 感器和测量用户环境的环境传感器中至少1个传感器的传感器信息在内的信息，进行评价用户日常性的处理；以及写入部，其将通过上述日常性评价部的评价处理而获得的用户日常性与所获得的媒体 信息关联起来写入到上述媒体信息存储部。
21. —种程序，其特征在于，其使计算机作为如下部分发挥功能媒体信息存储部，其将媒体信息与获得媒体信息时的用户日常性关联起来进行存储；以及检索部，其使用与媒体信息关联起来的用户日常性，对存储在上述媒体信息存储部的 媒体信息进行检索处理，上述检索部进行如下检索处理从存储在上述媒体信息存储部的媒体信息中优先提取 出在获得时用户日常性较低的媒体信息。
22. —种程序，其特征在于，其使计算机作为如下部分发挥功能媒体信息存储部，其将媒体信息与获得媒体信息时的用户日常性关联起来进行存储；以及转移部，其使用与媒体信息关联起来的用户日常性，提取出存储在上述媒体信息存储 部的媒体信息，将提取出的媒体信息转移给第2媒体信息存储部，上述转移部从存储在上述媒体信息存储部的媒体信息中优先提取出在获得时用户日 常性较高的媒体信息，将所提取出的媒体信息从上述媒体信息存储部删除并转移给上述第 2媒体信息存储部。
23. —种计算机可读取的信息存储介质，其特征在于，存储有权利要求20至22中任一 项所述的程序。
全文摘要
本发明提供一种信息处理系统、数字相框、程序以及信息存储介质，它们能够将用户日常性与媒体信息关联起来。本发明的信息处理系统具有获得媒体信息的媒体信息获得部(103)；日常性评价部(110)，其根据包含来自测量用户行动的行动传感器、测量用户状态的状态传感器和测量用户环境的环境传感器中至少1个传感器的传感器信息在内的信息，进行评价用户日常性的处理；以及写入部(112)，其将通过评价处理而获得的用户日常性与所获得的媒体信息关联起来写入到媒体信息存储部(122)。
文档编号H04N5/76GK101710956SQ20091017584
公开日2010年5月19日 申请日期2009年9月17日 优先权日2008年9月17日
发明者井场阳一, 杉原良平, 龙田成示 申请人:奥林巴斯株式会社