专利名称：配合音乐来调节移动无线终端的可视用户界面的方法及相应的移动无线终端的制作方法
技术领域：
本发明总体上涉及电子设备，诸如用于进行语音通信和/或用于播放 视听内容的电子设备。更具体地说，本发明涉及基于与音乐的回放相关 的参数来改变所显示内容的方法及系统。
背景技术：
移动和/或无线电子装置正变得日益普及。例如，现在广泛使用移动 电话和便携式媒体播放器。此外，与某些类型的电子装置相关的特征变 得日益多样化。例如，许多电子装置都能够拍照、发送并接收文本消息、 浏览互联网、发送并接收电子邮件、回放视频内容、回放音频内容、显 示图像、以及与免提耳机进行接口连接。
许多电子装置用户喜欢在使用该电子装置进行其它活动的同时使用 该电子装置来播放音乐。其它活动可以包括进行游戏、对数据进行分 类、编写文本消息、浏览互联网、阅读电子邮件消息等。传统上，在以 背景的方式回放音乐与其它活动的执行之间没有关联。也就是说，用户 可以收听作为背景而播放的音乐，但是在其它方面并不受该音乐的影响。
发明内容
鉴于音乐回放与其它电子装置活动之间的上述分隔，在本领域内需 要通过在向用户播放的音乐与显示给用户的可视内容之间建立关联，来 提高用户对电子装置(尤其是对便携式手持装置)的体验。
根据本发明的一个方面，公开了一种用于生成多媒体用户界面的方 法，该方法包括以下步骤使用电子装置来播放音乐；确定与所述音乐 相关的参数；以及通过将视觉效果应用到显示在所述电子装置的显示器
3上的可视内容，来使所述可视内容符合所述音乐的所述参数，所述视觉
效果与所述参数相关联。
根据所述方法的一个实施方式，通过分析所述音乐来确定所述参数。 根据所述方法的一个实施方式，通过对与对应于所述音乐的音频数
据一起存储的或一起发送的数据进行读取，来确定所述参数。
根据所述方法的一个实施方式，所述参数是音乐回放的音量。 根据所述方法的一个实施方式，所述视觉效果是对至少一个所显示
对象的亮度或颜色中的至少一个进行调节。
根据所述方法的一个实施方式，所述参数与所述音乐的节奏相关。 根据所述方法的一个实施方式，所述视觉效果是调节所述显示器上
的移动对象。
根据所述方法的一个实施方式，根据所述音乐的节拍的出现来移动 所述移动对象。
根据所述方法的一个实施方式，所述视觉效果是调节所述显示器上 的闪烁对象。
根据所述方法的一个实施方式，根据所述音乐的节拍的出现来使所 述闪烁对象闪烁。
根据所述方法的一个实施方式，所述视觉效果是对显示在所述显示 器上的内容的画面转变进行调节。
根据所述方法的一个实施方式，根据所述音乐的节拍来逐步进行所 述画面转变。
根据所述方法的一个实施方式，所述视觉效果是对显示在所述显示 器上的至少一个对象进行调节，使之与所述音乐的节拍相关。
根据所述方法的一个实施方式，所述电子装置是移动电话。 根据本发明的另一方面， 一种存储在机器可读介质上的程序被设置 用于生成多媒体用户界面。所述程序包括可执行逻辑以执行以下步骤 确定与由电子装置播放的音乐相关的参数；以及通过将视觉效果应用到 显示在所述电子装置的显示器上的可视内容，来使所述可视内容符合所 述音乐的所述参数，所述视觉效果与所述参数相关联。
4根据所述程序的一个实施方式，通过分析所述音乐或通过对与对应 于所述音乐的音频数据一起存储的或一起发送的数据进行读取这两种方 式中的一种，来确定所述参数。
根据所述程序的一个实施方式，所述参数是音乐回放的音量，而所 述视觉效果是对至少一个所显示对象的亮度或颜色中的至少一个进行调 节。
根据所述程序的一个实施方式，所述参数与所述音乐的节奏相关， 而所述视觉效果是从以下视觉效果及它们的组合中所选择的一种调节 所述显示器上的移动对象；调节所述显示器上的闪烁对象；对显示在所 述显示器上的内容的画面转变进行调节；对显示在所述显示器上的至少 一个对象进行调节。
根据所述程序的一个实施方式，所述视觉效果与所述音乐的节拍的 出现相关。
根据所述程序的一个实施方式，所述电子装置是移动电话。
根据本发明的另一方面，公开了一种电子装置，该电子装置包括 显示器；以及控制电路，该控制电路通过执行逻辑以执行以下步骤，来 生成多媒体用户界面确定与由所述电子装置回放的音乐相关的参数； 以及通过将视觉效果应用到显示在所述显示器上的可视内容来使所述可 视内容符合所述音乐的所述参数，所述视觉效果与所述参数相关联。
根据所述电子装置的一个实施方式，通过分析所述音乐或通过对与 对应于所述音乐的音频数据一起存储的或一起发送的数据进行读取这两 种方式中的一种，来确定所述参数。
根据所述电子装置的一个实施方式，所述参数是音乐回放的音量， 而所述视觉效果是对至少一个所显示对象的亮度或颜色中的至少一个进 行调节。
根据所述电子装置的一个实施方式，所述参数与所述音乐的节奏相 关，而所述视觉效果是从以下视觉效果及它们的组合中所选择的一种 调节所述显示器上的移动对象；调节所述显示器上的闪烁对象；对显示 在所述显示器上的内容的画面转变进行调节；对显示在所述显示器上的至少一个对象进行调节。
根据所述电子装置的一个实施方式，所述视觉效果与所述音乐的节 拍的出现相关。
根据所述电子装置的一个实施方式，所述电子装置是移动电话。
根据以下说明并参照附图将使得本发明的这些及其它特征更加清 楚。在说明和附图中，详细描述了本发明的具体实施方式
，作为对可以 实施本发明的原理的一些方式的指示，但是可以理解的是，本发明在范 围上并不受相应限制。相反，本发明涵盖落入所附权利要求的精神和条 款内的全部变化例、修改例和等同物。
根据一个实施方式所描述和/或例示的多种特征，可以通过相同方式 或者类似方式而被用于一个或更多个其它实施方式中，和/或与其它实施 方式的特征相组合而使用，或代替其它实施方式的特征而使用。
应该强调的是，在本说明书中使用的用语"包括
(comprises/comprising)"用于表明所陈述的特征、整体、步骤或组件的 存在，但是不排除一个或更多个其它特征、整体、步骤、部件或它们的 组的存在或增加。
图1是示出根据本发明的一个实施方式的作为示例性电子设备的移 动电话的示意图2是示出图1的移动电话的根据本发明的一个实施方式的相关部
分的示意性框图3是示出图1的移动电话可工作于其中的通信系统的示意图4是示出在回放给电子设备的用户的音乐与显示给该用户的可视
内容之间生成交互的示例性方法的流程图5是示出在音乐与可视内容之间的示例性关联的示意图6是示出在回放给电子设备的用户的音乐与显示给该用户的可视
内容之间生成交互的另一示例性方法的流程图；以及
图7是示出在回放给电子设备的用户的音乐与显示给该用户的可视内容之间生成交互的另 一示例性方法的流程图。
具体实施例方式
现在将参照附图来描述本发明，在附图中，相同的附图标记始终用 于表示相同的单元。可以理解的是，附图不一定是按照比例描绘。
可互换的术语"电子设备"和"电子装置"包括便携式无线通信设备。 术语"便携式无线通信设备"(此后称作"移动无线终端")包括诸如移动电 话、寻呼机、通信装置、电子记事本、个人数字助理(PDA)、智能手机、 便携式通信装置等的全部设备。
在本申请中，主要就移动电话来描述本发明。然而，可以理解的是， 本发明并不限于移动电话，而可以是任何类型的合适的电子设备。可以 应用本发明的其它电子设备例如包括便携式媒体播放器、游戏机和计算 机。
首先参照图1和图2，图l和图2示出了电子设备10。电子设备IO 包括用户界面增强功能12，用户界面增强功能12被设置为在按照可听到 的方式而回放给用户的音乐与显示给用户的可视内容之间建立关联。将 这种关联作为视觉效果呈现给用户，并旨在提高用户对电子设备10的体 验。稍后将详细描述各种视觉效果。此外，稍后将详细描述用户界面增 强功能12的操作。可以理解的是，可以将用户界面增强功能12实现为 驻留在电子设备10中并由电子设备IO执行的可执行代码。例如，用户 界面增强功能12可以是存储在计算机可读介质或机器可读介质上的程 序。
所例示的实施方式的电子设备是移动电话，并被称为移动电话10。 如图所示，移动电话IO具有"砖形"或"块形"设计的外壳，但是可以理解 的是，也可以利用其它类型外壳(诸如翻盖式外壳或滑盖式外壳)。
移动电话IO包括显示器14和键区16。显示器14向用户显示信息、 图形对象(例如，鼠标指针、图标、菜单选项等)、字母数字数据以及图 像，这使得用户能够利用移动电话10的各种功能。显示器14还可用于 可视地显示由移动电话10接收到的和/或从移动电话10的存储器18获取
7的视频内容和/或图像。
键区16提供了各种用户输入操作。例如，键区16通常包括用于输 入字母数字信息(诸如电话号码、电话列表、联系人信息、注释等)的
字母数字键20。此外，键区16通常包括特殊功能键，诸如用于发起或应
答呼叫的"呼叫发送"键及用于结束或"挂断"呼叫的"通话结束"键。如传统 的那样，特殊功能键例如还包括菜单导航键，菜单导航键用于浏览显示
在显示器14上的菜单以选择不同电话功能、方案、设置等。与移动电话 相关的其它键可以包括音量键、静音键、电源开/关键、web浏览器启动 键、相机键等。还可以将键或类似键的功能实现为与显示器14相关的触摸屏。
移动电话IO包括呼叫电路，呼叫电路使得移动电话10能够与被叫/ 主叫装置(通常是另一移动电话或固定电话(landline telephone))建立呼 叫和/或交换信号。然而，被叫/主叫装置不一定是另一电话，而可以是诸 如互联网web服务器、内容提供服务器等的一些其它装置。
图2示出了移动电话10的功能性框图。为了简洁，这里未对移动电 话10的一般传统特征进行详细描述。移动电话10包括主控制电路24， 主控制电路24被设置为执行对移动电话10的功能和操作的总体控制。 控制电路24可以包括处理装置26,诸如CPU、微控制器或微处理器。 处理装置26执行存储在控制电路24内的存储器(未示出)中和/或存储 在独立存储器(诸如存储器18)中的代码，以执行移动电话10的操作。 存储器18例如可以是缓存、闪存、硬盘驱动器、可移除介质、易失性存 储器、非易失性存储器或其它合适装置中的一个或更多个。
此外，处理装置26执行代码以执行用户界面增强功能12。如何对 移动电话IO进行编程以使其工作并执行这里所描述的功能，这对于计算 机编程领域、尤其是对于移动电话或其它电子装置的应用编程领域的普 通技术人员是明显的。因此，为了简洁，省略了关于具体的编程代码的 细节。此外，虽然根据本发明的优选实施方式，由处理装置26来执行用 户界面增强功能12，但是也可以通过专用硬件、固件、软件或它们的组 合来执行这种功能，而不脱离本发明的范围。继续参照图1和图2，移动电话10包括连接到无线电电路30的天 线28。如传统的那样，无线电电路30包括用于通过天线28来发射和接 收信号的射频发射机和接收机。无线电电路30被设置为在移动通信系统 中工作，并可用于发送和接收数据和/或视听内容。与移动无线网络和/ 或广播网络进行交互的无线电电路30包括但不限于GSM、 CDMA、 WCDMA、 GPRS、 MBMS、 WiFi、 WiMax、 DVB-H、 ISDB-T等以及这 些标准的高级版本。
移动电话10还包括用于对由无线电电路30发送的/从无线电电路30 接收的音频信号进行处理的声音信号处理电路32。如传统的那样，声音 处理电路32连接有扬声器34和麦克风36，扬声器34和麦克风36使用 户能够通过移动电话10进行收听和讲话。无线电电路30和声音处理电 路32分别连接到控制电路24，以执行总体操作。可以将音频数据(包括 来自由存储器18所存储并由控制电路24或移动无线服务所获取的音频 文件的音乐)从控制电路24传送到声音信号处理电路32，以向用户进行 回放。声音处理电路32可以包括任何合适的缓存、解码器、放大器等。
移动电话10还包括连接到控制电路24的上述显示器14和键区16。 显示器14可通过视频处理电路38连接到控制电路24，视频处理电路38 将视频数据转换成用于驱动显示器14的视频信号。视频数据可由控制电 路24生成、从存储在存储器18中的视频文件获取、从由无线电电路30 接收的入向视频数据流中得到或通过任何其它合适方法获得。视频处理 电路38可包括任何合适的缓存、解码器、视频数据信号处理器等。
移动电话10还包括一个或更多个I/O接口 42。1/0接口 42可以是典 型的移动电话i/o接口形式，并可以包括一个或更多个电连接器。如典型 的那样，1/O接口42可用于将移动电话10连接到电池充电器，以对移动 电话10内的电源单元(PSU) 44的电池进行充电。此外，或者作为替换 方式，1/O接口42可用于将移动电话10连接到有线个人免提适配器(未 示出)，诸如耳机(有时称作耳塞)，该耳机根据由声音处理电路34输出 的信号以可听见的方式输出声音。此外，1/0接口 42可用于通过数据线 缆将移动电话10连接到个人计算机或其它装置。移动电话10可以在连
9接到车载电源适配器或电源插座适配器时通过I/O接口 42来接收工作电 力。
移动电话10还可包括用于执行定时功能的定时器46。这些功能包
括对通话持续时长计时、生成时间和日期戳内容等。移动电话io可以包
括用于拍摄数字照片和/或电影的相机48。与这些照片和/或电影相对应的 图像文件和/或视频文件可以存储在存储器18中。移动电话10还可以包 括位置数据接收机50，诸如全球定位系统(GPS)接收机、伽里略卫星 系统接收机等。移动电话IO还可以包括本机无线接口 52，诸如红外收发 机和/或RF适配器(例如，蓝牙适配器)，本机无线接口 52用于与配件、 免提适配器(例如，可以按可听见的方式输出与从移动电话IO传送给耳 机的音频数据相对应的声音的耳机)、另一移动无线终端、计算机或者 其它装置建立通信。
移动电话10可以被设置为发送、接收和处理数据，诸如文本消息(例 如，俗称为"SMS")、电子邮件消息、多媒体消息(例如，俗称为"MMS")、 图像文件、视频文件、音频文件、铃声、流音频、流视频、数据馈送(包 括播客)等。对这些数据的处理可以包括将数据存储在存储器18中、执 行允许用户与数据进行交互的应用、显示与数据相关的视频和/或图像内 容、输出与数据相关的音频声音等。
另外参照图3，移动电话10可以被设置为作为通信系统54的一部 分进行操作。系统54可以包括具有服务器58 (或多个服务器)的通信网 络56，服务器58用于对由移动电话IO发起的呼叫或目的地为移动电话 10的呼叫进行管理、将数据发送到移动电话10并执行任何其它支持功能。 服务器58通过传输介质与移动电话IO通信。可以理解的是，服务器58 可被设置为用于执行服务器功能的典型的计算机系统，并可包括处理器， 该处理器可被设置为执行包含实现服务器58的功能的逻辑指令的软件。 传输介质可以是任何合适的装置或组件，例如包括通信塔(例如，蜂窝 塔)、另一移动电话、无线接入点、卫星等。网络的一部分可以包括无线 传输路径。虽然在图3中只示出了一个移动电话IO，但是网络56可以支 持多个移动电话IO和其它类型终端用户装置的通信活动。
10如上所述，可以执行用户界面增强功能12，以在按照可听见的方式 回放给用户的音乐与显示给用户的可视内容之间建立关联。可以将这种 关联作为图形视觉效果呈现给用户，以提高用户对移动电话10的体验。 这种视觉效果可以涉及对所显示内容的任何操纵。 一个示例性视觉效果 可以是对所显示的对象或多个对象(这些对象包括文本、图标、背景颜 色或图形、符号、整个显示器等)的颜色、色调、亮度、对比度、清晰 度或其它属性进行改变。另一示例性视觉效果可以是当该对象移动通过 显示器(14)时对该对象的动作进行改变，诸如通过使该对象的移动按
照音乐的节奏、曲速(tempo)或拍速(pace)而暂停、减慢或加快。另 一示例性视觉效果可以是对光标闪烁的方式进行改变，诸如将闪烁调节 为适合于音乐的节奏。另一示例性视觉效果是对进行画面转变的方式进 行修改，诸如将画面转变调节为适合于音乐的节奏。其它示例性视觉效 果包括使所显示对象跳动(pulse)、使对象外表发光、以及在对象后面发 光或呈现光环。可以理解的是，这里所述的视觉效果仅是示例，而且由 所附权利要求所限定的本发明并不限于用于在所播放的音频与所显示的 视觉内容之间建立关联的这些视觉效果的几个示例。此外，可以对两个 或更多个效果进行组合来创建另一视觉效果。
本发明的各个方面致力于将视觉效果应用于可视用户界面，以将可 视界面调节为适合于音乐属性。音乐属性可以与音乐的节奏、曲速或拍 速相关，这例如可以按照节拍的频率来测得。另一属性可以是音乐的音 调，诸如低音(bass)的量相对于高音(treble)的量。另一属性可以是 用户回放音乐的音量。可通过分析音乐来确定这些属性。例如，用户界 面增强功能12的软件组件可以对与所播放的音乐相对应的音频数据进行 分析，以检测该音乐的节拍和/或频率响应。在另一实施方式中，音乐文 件和/或流音频可以包括元数据(例如，头信息)，用户界面增强功能12 可以读取该元数据以确定参数。
在用户与移动电话10的其它功能进行交互的同时，当以背景的方式 回放音乐或其它音频内容时，可以应用视觉效果的应用。此外，当将音 频输出与所显示的视频内容进行同步时(诸如在玩游戏或回放视听内容(例如，音乐视频、移动电视频道、视频文件等)期间)，可以应用视觉 效果的应用。
将视觉效果划分为三个大类，以便讨论。虽然有可能会有一种视觉 效果并不属于这三个大类中的一个，但是这种视觉效果仍然落入由所附 权利要求所记载的本发明的合理范围之内。第一类视觉效果包括基于与 音乐相关的参数来调节非静态对象(例如，移动或闪烁的光标、鼠标指 针、图标、图形、文本等)，并且将参照图4和图5来描述第一类视觉效 果。第二类视觉效果包括基于与音乐相关的参数来调节画面转变，并且 将参照图6来描述第二类视觉效果。第三类视觉效果包括基于与音乐相 关的参数来调节整个所显示的内容或一部分所显示的内容。
参照图4，图4示出了当执行用户界面增强功能12时由移动电话10 所执行的示例性逻辑操作的流程图。图4可被理解为描述了由移动电话 10所执行的方法的各个步骤。虽然图4示出了执行功能逻辑块的特定次 序，但是可相对于所示的次序改变这些块的执行次序。此外，可以并行 或者部分并行地执行连续示出的两个或更多个块。还可以省略某些块。 此外，为了增强实用性、计费、性能、测量、故障诊断等目的，可以将 任意数量的指令、状态变量、信号量(semaphore)或消息增加到该逻辑 流中。可以理解的是，全部这些变化都落入本发明的范围内。
逻辑流从块60开始，其中对显示器14上的对象(例如，光标、鼠 标指针、图标、图形、文本等)是否正在移动进行判断或对显示器14上 的对象(例如，光标)是否正在闪烁以吸引用户的注意进行判断。该对 象可以基于用户输入或基于由移动电话10执行的处理的操作而移动或闪 烁。如果没有对象正在闪烁或移动，则在块60中作出否定判断，并且逻 辑流会等待直至作出肯定判断为止。如果对象正在移动或闪烁，则在块 60中作出肯定判断，并且逻辑流前进到块62。
在块62中，对是否向用户回放音乐或其它音频内容进行判断。如果 没有回放音乐，则在块62中作出否定判断，并且逻辑流前进到块64。在 块64中，可以利用默认设置来移动对象或使对象闪烁。例如，鼠标指针 的默认运动包括以均匀速率来将指针从开始点到结束点移动通过显示器
1214。光标的默认闪烁包括光标的循环显示，其中在各个循环期间光标显 示的时间长度和循环周期都是恒定的。
如果在块62中确定播放音乐，则作出肯定判断，并且逻辑流前进到
块66。在块66中，确定与音乐相关的并可适用于要应用到移动或闪烁对
象的参数。通过检测参数(例如，通过分析音乐或通过与音乐回放相关 的用户设置)或通过确定参数(例如，通过读取与音乐相关的元数据或
头数据)，来确定参数。可以连续地(ongoing)确定参数(诸如识别一系 列节拍的出现)。所确定的具体参数可取决于要应用的视觉效果。示例参 数包括但不限于音乐节拍的出现或频率、有节奏的低音成份、音调、回 放音量、歌词(lyrics)的有无等。
接下来，在块68中，将该参数应用到对象的移动或对象的闪烁，以 产生视觉效果。例如，如果对象移动通过显示器14，则按照音乐的拍速 来停止、加快和/或减慢移动。
另外参照图5，图5示出了将参数应用到移动对象上的示例。在图5 中，参数是节拍的出现。由沿时间线72的散列标志70来表示节拍的出 现。移动对象为指针74，将其描绘为从左向右移动。针对各个节拍70， 将指针74瞬间显示为在相应的节拍70的时刻在其位置处停止或减慢。 因此，在节拍70a处，指针74定位于位置76a并在该位置处暂停或减慢。 在下一节拍70b处，指针定位于位置76b并在该位置处暂停或减慢，以 此类推，经过随后的节拍及位置对70c/76c、 70d/76d等，直到指针74到 达结束位置为止。在各个位置76之间，指针74被显示为按照恒定的速 率移动或不显示指针74。可以将指针74的停止或减慢设置成对于各个节 拍持续大约十分之一秒或设置成持续该节拍的持续时长。
在本示例的变型例中，可以将指针74 (或该视觉效果所应用到的其 它对象)表示为对于各个节拍70变得更大或更小、表示为对于各个节拍 70而具有不同颜色、表示为对于各个节拍70变得更亮或更暗、在各个节 拍70处振动等。
本领域普通技术人员可以理解的是，图5的示例可应用于闪烁对象。 例如，可在各个节拍的出现处显示闪烁对象(例如，光标)，或针对节拍70的出现而作出任何其它视觉效果。此外，图5的示例可应用于其它静 态地显示的对象。例如，可以使图标、图形、指针、所选择或高亮的项 目或其它对象按照节拍70而闪烁、消失、改变颜色、改变尺寸、跳跃、 振动、跳动或按照其它方式而作出视觉外观的改变。
可以理解的是，图5的例示仅是将特定的音乐参数(节拍的出现) 应用到特定对象(移动指针74)上的示例。对移动、静态和/或闪烁对象 迸行这种参数或其它参数的类似调节，这对于本领域普通技术人员是明 显的。
在块64和块68之后，逻辑流返回到块60以重复该处理，或者可以 结束该处理。
参照图6，图6示出了当执行用户界面增强功能12时由移动电话10 所执行的示例性逻辑操作的流程图。图6可被理解为描述了由移动电话 10所执行的方法的各个步骤。虽然图6示出了执行功能逻辑块的特定次 序，但是可相对于所示的次序改变这些块的执行次序。此外，可以并行 或者部分并行地执行连续示出的两个或更多个块。还可以省略某些块。 此外，为了增强实用性、计费、性能、测量、故障诊断等目的，可以将 任意数量的指令、状态变量、信号量或消息增加到该逻辑流中。可以理 解的是，全部这些变化都落入本发明的范围内。
图6所示的逻辑流与图4所示的逻辑流相类似。为了简洁，仅对就 图4的逻辑操作而描述的并可应用于图6所示的逻辑操作的处理进行简 要的描述。
图6的逻辑流从块78开始，其中对是否要求进行画面转变进行判断。 画面转变是从显示一个内容设置变化到显示另一内容设置。当改变应用 或在应用内发生变化时，会发生画面转变。如果没有要求进行画面转变 则在块78中作出否定判断，并且逻辑流会等待直至作出肯定判断为止。 如果要求进行画面转变，则在块78中作出肯定判断，并且逻辑流前进到 块80。
在块80中，对是否向用户回放音乐或其它音频内容进行判断。如果 没有回放音乐，则在块80中作出否定判断，并且逻辑流前进到块82。在块82中，利用默认设置来进行画面转变(例如，即刻转变或在设定的时 间段内进行平滑转变)。
如果在块80中确定播放音乐，则作出肯定判断，并且逻辑流前进到
块84。在块84中，确定与音乐相关的并可适用于要应用到画面转变的视 觉效果的参数。可以按照诸如参照图4的块66所述的方式的任何合适方 式来确定该参数。
接下来，在块86中，将该参数应用到画面转变。例如，在画面转变 期间，按照一系列步骤来改变所显示内容。对于各个步骤，整个画面或 部分画面(例如，从精细的棋盘(checkerboard)设置或随机的像素组中 选择方块)会发生变化。例如，所显示的内容会随着音乐的节奏逐步从 一个画面变形为另一画面。可以将一个步骤的开始和/或一个步骤的结束 定时为音乐的节拍。因此，播放较快的音乐时，会比播放较慢音乐时更 快地完成整个转变。此外，对于较慢音乐或以较低音量播放的音乐，会 以平滑通畅过渡的方式进行画面转变。在一些实施方式中，可以引入中 间画面图形或颜色作为转变期间的步骤或多个步骤。
在块82和块86之后，逻辑流可以返回到块78以重复该处理，或者 可以结束该处理。
参照图7，图7示出了在执行用户界面增强功能12时由移动电话10 所执行的示例性逻辑操作的流程图。图7可被理解为描述了由移动电话 10所执行的方法的各个步骤。虽然图7示出了执行功能逻辑块的特定次 序，但是可相对于所示的次序改变这些块的执行次序。此外，可以并行 或者部分并行地执行连续示出的两个或更多个块。还可以省略某些块。 此外，为了增强实用性、计费、性能、测量、故障诊断等目的，可以将 任意数量的指令、状态变量、信号量或消息增加到该逻辑流中。可以理 解的是，全部这些变化都落入本发明的范围内。
图7所示的逻辑流与图4及图6所示的逻辑流相类似。为了简洁， 仅对就图4及图6的逻辑操作而描述的并可应用于图7所示的逻辑操作 的处理进行简要的描述。
图7的逻辑流从块88开始，其中对是否向用户回放音乐或其它音频
15内容进行判断。如果没有回放音乐，则在块88中作出否定判断，并且逻
辑流前进到块90。在块90中，利用默认设置(例如，正常亮度、色彩饱 和度和清晰度设置)来在显示器14上显示内容。
如果在块88中确定播放音乐，则作出肯定判断，并且逻辑流前进到 块92。在块92中，确定与音乐相关的并可适用于要应用到所显示内容的 视觉效果的参数。可以按照诸如参照图4的块66所描述的方式的任何合 适方式来确定该参数。
接下来，在块94中，将该参数应用到显示器。例如，该参数可以是 音乐回放的音量，并且响应于回放音量可以调节显示器的亮度 (intensity)。如果将音量设置为相对高的设置，则可以增大显示器的亮 度、呈现在显示器上的颜色的强度、和/或清晰度。因此，按照与同更高 音量的音乐回放相关联的经过强化并且更强烈的音乐体验相对应的方式 来调节显示器。如果音量相对低，则利用默认设置或简化的(reduced) 显示器设置(例如，亮度、对比度等)来呈现所显示内容。此外，可基 于音量或其它音乐参数(例如，音乐曲速)来选择颜色(例如，背景色、 菜单和画面主题颜色等)。可对整个显示器14或显示器14的一部分进行 所显示内容的调节。在音乐回放期间对显示器的调节可以是持续的，或 可以与音乐的节奏相关(例如，可以与音乐的节拍相对应地加强亮度或 清晰度或改变颜色)。显示器14的一部分可以包括所选择项目(例如， 图标或联系人列表条目)、背景、菜单选项等。
在块90和块94之后，可以结束该逻辑流，或者可以返回到块88以 重复该处理。
在上述说明中，提供了用于调节显示器特征的各种示例性参数。而 且还提供了各种示例性视觉效果。可以理解的是，针对一个实施方式描 述和/或例示的参数和视觉效果可以按照相同或相似的方式用于一个或更 多个其它实施方式中，和/或结合所述参数和/或视觉效果而用于一个或更 多个其它实施方式中，或替代所述参数和/或视觉效果而用于一个或更多 个其它实施方式中。
用户界面增强功能12可以向用户产生视觉反馈，该视觉反馈对通过
16扬声器34或耳机(未示出)而播放给用户的音乐进行补充。因此，这里 所述的增强功能在允许用户进行各种其它任务(例如，阅读或编写文本 消息、观看视频，对数据进行分类、阅读或编写电子邮件消息、浏览互 联网等)的同时，提髙了用户的音乐体验。通过将与背景音乐相关的(多 个)参数应用到电子装置的导航及其它基于可视的操作，用户与电子装 置的交互体验可以更加鲁棒。此外，作为公知现象，个人的运动模式会 随着该用户正在收听的音乐的速度而发生变化。视觉效果通过向用户提 供与音乐相协调的附加感受反馈，可以强化这种公知现象。
虽然参照特定优选实施方式示出并描述了本发明，但是可以理解的 是，本领域技术人员通过阅读并理解本说明书，将能够想到本发明的等 同物和修改例。本发明包括全部这些等同物和修改例，并且仅由所附权 利要求的范围限定。
相关申请
本申请要求于2006年7月31日提交的、申请号为No. 60/820,813 的美国临时申请的优先权，这里通过引用并入其全部内容。
权利要求
1、一种用于生成多媒体用户界面的方法，该方法包括以下步骤使用电子装置(10)来播放音乐；确定与所述音乐相关的参数；以及通过将视觉效果应用到显示在所述电子装置的显示器(14)上的可视内容，来使所述可视内容符合所述音乐的所述参数，所述视觉效果与所述参数相关联。
2、 根据权利要求1所述的方法，其中，通过分析所述音乐来确定所述参数。
3、 根据权利要求1所述的方法，其中，通过对与对应于所述音乐的音频数据一起存储的或一起发送的数据进行读取，来确定所述参数。
4、 根据权利要求1所述的方法，其中，所述参数是音乐回放的音量。
5、 根据权利要求4所述的方法，其中，所述视觉效果是对至少一个 所显示对象的亮度或颜色中的至少一个进行调节。
6、 根据权利要求1所述的方法，其中，所述参数与所述音乐的节奏相关。
7、 根据权利要求6所述的方法，其中，所述视觉效果是以下视觉效 果中的一种根据所述音乐的节拍的出现来移动所述显示器上的对象；根据所述音乐的节拍的出现来使所述显示器上的对象闪烁；或根据所述 音乐的节拍来逐步进行画面转变。
8、 根据权利要求6所述的方法，其中，所述视觉效果是对显示在所 述显示器上的至少一个对象进行调节，使之与所述音乐的节拍相关。
9、 根据权利要求1所述的方法，其中，所述电子装置是移动电话。
10、 一种电子装置(10)，该电子装置(10)包括显示器(14);以及控制电路(24)，该控制电路(24)通过执行逻辑以执行以下步骤，来生成多媒体用户界面确定与由所述电子装置回放的音乐相关的参数；以及 通过将视觉效果应用到显示在所述显示器上的可视内容来使所述可视内容符合所述音乐的所述参数，所述视觉效果与所述参数相关联。
全文摘要
一种用于生成多媒体用户界面的方法，该方法包括以下步骤使用电子装置(10)来播放音乐；确定与所述音乐相关的参数；以及通过将视觉效果应用到显示在所述电子装置的显示器(14)上的可视内容，来使所述可视内容符合所述音乐的所述参数，所述视觉效果与所述参数相关联。
文档编号H04M1/725GK101496389SQ200780028252
公开日2009年7月29日 申请日期2007年1月26日 优先权日2006年7月31日
发明者艾拉尔·D·福克斯恩兰德 申请人:索尼爱立信移动通讯有限公司