TPU的数据处理方法、装置、电子设备及存储介质与流程

tpu的数据处理方法、装置、电子设备及存储介质
技术领域
1.本公开涉及移动张量处理单元(tpu，tensor processing unit)技术领域，尤其涉及一种张量处理单元tpu的数据处理方法、装置、电子设备及存储介质。


背景技术：

2.张量处理单元即tpu，是一款为机器学习而定制的芯片，经过了专门深度机器学习方面的训练，它有更高效能(每瓦计算能力)。tpu包括多个内部器件单元，其中，部分器件单元会不断地产生大量运算数据，而这些数据需要被用于各种分析。相关技术中，这些数据相对零散，相互之间的关联关系复杂，甚至杂乱无章，在进行数据分析时，分析效率低下且分析的结果准确性低。


技术实现要素：

3.根据本公开实施例的第一方面，提供一种张量处理单元tpu的数据处理方法，所述方法包括：
4.获取张量处理单元tpu内第一功能单元执行预定操作的时间；
5.根据所述第一功能单元执行所述预定操作的时间，确定所述张量处理单元tpu内所述第一功能单元和/或第二功能单元运行的参考时间，其中，所述参考时间包括数据处理的起始时间和/或结束时间；
6.基于所述参考时间关联所述第一功能单元和/或所述第二功能单元处理的数据。
7.在一个实施例中，所述方法还包括：
8.基于所述参考时间，显示关联后的所述数据。
9.在一个实施例中，所述第一功能单元为微型控制器mcu；所述第二功能单元为全局直接内存存取单元gdma；所述根据所述第一功能单元执行所述预定操作的时间，确定所述张量处理单元tpu内所述第一功能单元和/或第二功能单元运行的参考时间，包括：
10.确定所述gdma运行的起始时间为所述mcu首次配置gdma参数的结束时间，其中，所述参考时间为所述gdma运行的起始时间。
11.在一个实施例中，所述第一功能单元为mcu；所述第二功能单元为tiu；所述根据所述第一功能单元执行所述预定操作的时间，确定所述张量处理单元tpu内所述第一功能单元和/或第二功能单元运行的参考时间信息，包括：
12.确定所述tiu运行的起始时间为所述mcu首次配置tiu参数的结束时间；
13.和/或，
14.确定所述tiu运行的起始时间为所述mcu首次记录gdma的结束时间，其中，所述参考时间为所述tiu运行的起始时间。
15.在一个实施例中，所述方法还包括：
16.响应于mcu的运行时间与上位机的运行时间对齐，确定所述mcu运行的起始时间为所述上位机发送第一条指令的结束时间。
17.在一个实施例中，所述方法还包括：
18.根据算子与tiu和gdma之间的关联关系，将算子运行的起始时间确定为所述mcu最早记录gdma和tiu的起始时间；
19.或者，
20.根据算子与tiu和gdma之间的关联关系，将算子运行的结束时间确定为所述mcu最晚记录gdma和tiu的结束时间。
21.在一个实施例中，所述方法还包括：
22.结构化所述第一功能单元和/或所述第二功能单元的处理数据；
23.匹配所述处理数据和所述参考时间信息。
24.在一个实施例中，所述方法还包括：
25.显示所述预定对象的运行时序；
26.其中，所述预定对象包括以下至少之一：
27.gdma；
28.tiu；
29.mcu；
30.上位机；
31.算子。
32.根据本公开实施例的第二方面，提供一种张量处理单元tpu，所述装置包括：
33.获取模块，用于获取张量处理单元tpu内第一功能单元执行预定操作的时间；
34.确定模块，用于根据所述第一功能单元执行所述预定操作的时间，确定所述张量处理单元tpu内所述第一功能单元和/或第二功能单元运行的参考时间信息，其中，所述参考时间包括数据处理的起始时间和/或结束时间。
35.在一实施例中，所述装置还包括：
36.显示模块，用于基于所述参考时间，显示关联后的所述数据。
37.在一个实施例中，所述第一功能单元为微型控制器mcu；所述第二功能单元为全局直接内存存取单元gdma；所述确定模块，用于确定所述gdma运行的起始时间为所述mcu首次配置gdma参数的结束时间，其中，所述参考时间为所述gdma运行的起始时间。
38.在一个实施例中，所述第一功能单元为mcu；所述第二功能单元为tiu；所述确定模块，用于：
39.确定所述tiu运行的起始时间为所述mcu首次配置tiu参数的结束时间；
40.和/或，
41.确定所述tiu运行的起始时间为所述mcu首次记录gdma的结束时间，其中，所述参考时间为所述tiu运行的起始时间。
42.在一个实施例中，所述确定模块，用于：
43.响应于mcu的运行时间与上位机的运行时间对齐，确定所述mcu运行的起始时间为所述上位机发送第一条指令的结束时间。
44.在一个实施例中，所述确定模块，用于：
45.根据算子与tiu和gdma之间的关联关系，将算子运行的起始时间确定为所述mcu最早记录gdma和tiu的起始时间；
46.或者，
47.根据算子与tiu和gdma之间的关联关系，将算子运行的结束时间确定为所述mcu最晚记录gdma和tiu的结束时间。
48.在一个实施例中，所述装置还包括：
49.结构化模块，用于结构化所述第一功能单元和/或所述第二功能单元的处理数据；
50.匹配模块，用于匹配所述处理数据和所述参考时间信息。
51.在一个实施例中，所述装置还包括：
52.显示模块，用于显示所述预定对象的运行时序；
53.其中，所述预定对象包括以下至少之一：
54.gdma；
55.tiu；
56.mcu；
57.上位机；
58.算子。
59.根据本公开实施例的第三方面，提供一种电子设备，包括：
60.处理器；
61.用于存储处理器可执行指令的存储器；
62.其中，所述处理器用于，执行时实现上述任一所述方法中的步骤。
63.根据本公开实施例的第四方面，提供一种非临时性计算机可读存储介质，其上存储有计算机程序，所述程序被处理器执行上述任意所述方法的步骤。
64.本公开的实施例提供的技术方案可以包括以下有益效果：
65.本公开实施例中，获取张量处理单元tpu内第一功能单元执行预定操作的时间；根据所述第一功能单元执行所述预定操作的时间，确定所述张量处理单元tpu内所述第一功能单元和/或第二功能单元运行的参考时间，其中，所述参考时间包括数据处理的起始时间和/或结束时间；基于所述参考时间关联所述第一功能单元和/或所述第二功能单元处理的数据。这里，由于所述tpu内所述第一功能单元和/或所述第二功能单元运行的参考时间都是基于所述第一功能单元执行预定操作的时间确定的，所述参考时间用于关联所述第一功能单元和/或所述第二功能单元处理的数据，如此，可以通过参考时间建立了不同功能单元之间处理的数据的关联关系，对数据进行了关联整合，相较于基于人工关联数据的方式寻找相关性的方式，提升了数据分析的效率和准确性。
66.应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。
附图说明
67.此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本发明的实施例，并与说明书一起用于解释本发明的原理。
68.图1是根据一示例性实施例示出的一种张量处理单元tpu的数据处理方法的示意图；
69.图2是根据一示例性实施例示出的一种张量处理单元tpu的数据处理方法的示意
图；
70.图3是根据一示例性实施例示出的一种张量处理单元tpu的数据处理方法的示意图；
71.图4是根据一示例性实施例示出的一种显示界面的布局示意图；
72.图5是根据一示例性实施例示出的一种张量处理单元tpu的数据处理装置的框图；
73.图6是根据一示例性实施例示出的一种电子设备的框图。
具体实施方式
74.这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本发明相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本发明的一些方面相一致的方法和装置的例子。
75.为了便于本领域内技术人员理解，本公开实施例列举了多个实施方式以对本公开实施例的技术方案进行清晰地说明。当然，本领域内技术人员可以理解，本公开实施例提供的多个实施例，可以被单独执行，也可以与本公开实施例中其他实施例的方法结合后一起被执行，还可以单独或结合后与其他相关技术中的一些方法一起被执行；本公开实施例并不对此作出限定。
76.图1是根据一示例性实施例示出的一种张量处理单元tpu的数据处理方法，所述方法包括：
77.步骤11、获取张量处理单元tpu内第一功能单元执行预定操作的时间；
78.步骤12、根据所述第一功能单元执行所述预定操作的时间，确定所述张量处理单元tpu内所述第一功能单元和/或第二功能单元运行的参考时间，其中，所述参考时间包括数据处理的起始时间和/或结束时间；
79.步骤13、基于所述参考时间关联所述第一功能单元和/或所述第二功能单元处理的数据。
80.这里，所述tpu可以是云端人工智能(ai，artificial intelligence)芯片或者与所述芯片的架构类似的芯片。所述tpu可以包括性能测量单元(pmu，performance monitoring unit)、微型控制器(mcu，microcontroller unit)、全局直接内存存取单元(gdma，global direct memory access)和张量指令单元(tiu，tensor instruction unit)等。
81.在一个实施例中，所述第一功能单元为微型控制器mcu；所述第二功能单元为全局直接内存存取单元gdma或者tiu。
82.需要说明的是，在tpu的运行过程中会产生一序列性能信息，该性能信息包括以下之一：
83.pmu记录的gdma的传输字节、传输的起始时间和结束时间；
84.pmu记录的tiu执行原子操作的起始时间和结束时间；
85.mcu记录的每个器件(例如，gdma和tiu等)操作的配置时间点和等待结束时间；
86.上位机上记录的关键函数运行的起始时间和结束时间；
87.底层原子操作和上层算子的匹配关系；
88.当前主频信息；
89.内存申请信息；以及
90.静态指令信息。
91.在一个实施例中，获取张量处理单元tpu内第一功能单元执行预定操作的时间；根据所述第一功能单元执行所述预定操作的时间，确定所述张量处理单元tpu内所述第一功能单元和/或第二功能单元运行的参考时间，其中，所述参考时间包括数据处理的起始时间和/或结束时间；基于所述参考时间关联所述第一功能单元和/或所述第二功能单元处理的数据。基于所述参考时间，显示关联后的所述数据。
92.在一个实施例中，获取张量处理单元tpu内mcu执行预定操作的时间；根据所述mcu执行所述预定操作的时间，确定所述张量处理单元tpu内所述mcu和/或gdma运行的参考时间，其中，所述参考时间包括数据处理的起始时间和/或结束时间；基于所述参考时间关联所述mcu和/或所述gdma处理的数据。
93.在一个实施例中，所述第一功能单元为微型控制器mcu；所述第二功能单元为全局直接内存存取单元gdma。获取张量处理单元tpu内mcu执行配置gdma参数的时间；确定所述gdma运行的起始时间为所述mcu首次配置gdma参数的结束时间；基于所述参考时间关联所述mcu和/或所述gdma处理的数据；其中，所述参考时间为所述gdma运行的起始时间。
94.在一个实施例中，所述第一功能单元为mcu；所述第二功能单元为tiu。获取张量处理单元tpu内mcu执行配置tiu参数的时间；确定所述gdma运行的起始时间为所述mcu首次配置gdma参数的结束时间；基于所述参考时间关联所述mcu和/或所述gdma处理的数据；其中，所述参考时间为所述tiu运行的起始时间。
95.本公开实施例中，获取张量处理单元tpu内第一功能单元执行预定操作的时间；根据所述第一功能单元执行所述预定操作的时间，确定所述张量处理单元tpu内所述第一功能单元和/或第二功能单元运行的参考时间，其中，所述参考时间包括数据处理的起始时间和/或结束时间；基于所述参考时间关联所述第一功能单元和/或所述第二功能单元处理的数据。这里，由于所述tpu内所述第一功能单元和/或所述第二功能单元运行的参考时间都是基于所述第一功能单元执行预定操作的时间确定的，所述参考时间用于关联所述第一功能单元和/或所述第二功能单元处理的数据，如此，可以通过参考时间建立了不同功能单元之间处理的数据的关联关系，对数据进行了关联整合，相较于基于人工关联数据方式寻找相关性的方式，提升了数据分析的效率和准确性。
96.图2是根据一示例性实施例示出的一种张量处理单元tpu的数据处理方法，所述方法包括：
97.步骤21、获取张量处理单元tpu内mcu执行预定操作的时间；
98.步骤22、根据所述mcu执行所述预定操作的时间，确定所述张量处理单元tpu内所述mcu和/或tiu运行的参考时间，其中，所述参考时间包括数据处理的起始时间和/或结束时间；
99.步骤23、基于所述参考时间关联所述mcu和/或所述tiu(或者gdma)处理的数据；
100.步骤24、基于所述参考时间，显示关联后的所述数据。
101.在一个实施例中，获取张量处理单元tpu内第一功能单元执行预定操作的时间；根据所述第一功能单元执行所述预定操作的时间，确定所述张量处理单元tpu内所述第一功
能单元和/或第二功能单元运行的参考时间，其中，所述参考时间包括数据处理的起始时间和/或结束时间；基于所述参考时间关联所述第一功能单元和/或所述第二功能单元处理的数据。响应于mcu的运行时间与上位机的运行时间对齐，确定所述mcu运行的起始时间为所述上位机发送第一条指令的结束时间。
102.在一个实施例中，获取张量处理单元tpu内第一功能单元执行预定操作的时间；根据所述第一功能单元执行所述预定操作的时间，确定所述张量处理单元tpu内所述第一功能单元和/或第二功能单元运行的参考时间，其中，所述参考时间包括数据处理的起始时间和/或结束时间；基于所述参考时间关联所述第一功能单元和/或所述第二功能单元处理的数据。根据算子与tiu和gdma之间的关联关系，将算子运行的起始时间设置为所述mcu最早记录gdma和tiu的起始时间。
103.在一个实施例中，获取张量处理单元tpu内第一功能单元执行预定操作的时间；根据所述第一功能单元执行所述预定操作的时间，确定所述张量处理单元tpu内所述第一功能单元和/或第二功能单元运行的参考时间，其中，所述参考时间包括数据处理的起始时间和/或结束时间；基于所述参考时间关联所述第一功能单元和/或所述第二功能单元处理的数据。根据算子与tiu和gdma之间的关联关系，将算子运行的结束时间设置为所述mcu最晚记录gdma和tiu的结束时间。
104.在一个实施例中，获取张量处理单元tpu内第一功能单元执行预定操作的时间；根据所述第一功能单元执行所述预定操作的时间，确定所述张量处理单元tpu内所述第一功能单元和/或第二功能单元运行的参考时间，其中，所述参考时间包括数据处理的起始时间和/或结束时间；基于所述参考时间关联所述第一功能单元和/或所述第二功能单元处理的数据。结构化所述第一功能单元和/或所述第二功能单元的处理数据；匹配所述处理数据和所述参考时间信息。示例性地，可以是结构化所述处理数据，并转换成可读文本信息：解析静态指令，分析出指令参数与内存占用，并根据gdma或tiu的id匹配相关的时间记录。
105.在一个实施例中，获取张量处理单元tpu内第一功能单元执行预定操作的时间；根据所述第一功能单元执行所述预定操作的时间，确定所述张量处理单元tpu内所述第一功能单元和/或第二功能单元运行的参考时间，其中，所述参考时间包括数据处理的起始时间和/或结束时间；基于所述参考时间关联所述第一功能单元和/或所述第二功能单元处理的数据。显示所述预定对象的运行时序；其中，所述预定对象包括以下至少之一：gdma；tiu；mcu；上位机；算子。
106.图3是根据一示例性实施例示出的一种张量处理单元tpu的数据处理方法，所述方法包括：
107.步骤31、获取张量处理单元tpu内mcu执行预定操作的时间；
108.步骤32、根据所述mcu执行所述预定操作的时间，确定所述张量处理单元tpu内所述mcu和/或tiu运行的参考时间，其中，所述参考时间包括数据处理的起始时间和/或结束时间；
109.步骤33、基于所述参考时间关联所述mcu和/或所述tiu(或者gdma)处理的数据。
110.步骤34、显示所述预定对象的运行时序；其中，所述预定对象包括以下至少之一：gdma；tiu；mcu；上位机；算子。
111.需要说明的是，请参见图4，显示的所述预定对象的运行时序可以包括以下至少之
一：
112.整体运行时序，用于显示上位机上记录的每次数据迭代所占用的整体时间；
113.上位机关键函数时序，用于显示一些底层关键函数的执行时序，包括数据传输、发送指令等；
114.算子运行时序，用于显示每个功能算子占用的时间范围，以及算子的类型及参数信息；利用高度来区分算子类型，满足并行显示的需要；
115.mcu关键函数运行时序，用于显示每次配置操作的时间点，以及等待各单元完成操作的时间段；
116.gdma运行时序，用于精确显示每个gdma操作实际占用时间、传输类型、传输字节数、带宽等信息；以及
117.tiu运行时序，用于精确显示每个tiu操作实际占用时间、计算类型、利用率。
118.在一个实施例中，请再次参见图4，在显示所述预定对象的运行时序时，还可以显示以下至少之一：
119.缩放滑动控制条控件，包括横向控件和纵向控件；用于对数据块进行缩放和滑动，以便查看数据细节；
120.标签与统计信息，不同行的数据显示不同标签，统计信息包括：占用总时间、记录条数等；
121.按空间汇总内存占用曲线，实际上会显示三条曲线，分别对应内存占用记录的总字节数、读取字节数、写入字节数进行横向累加，用于分析内存区域的利用率；
122.按时间汇总内存占用曲线，实际上会显示三条曲线，分别对应内存占用记录的总字节数、读取字节数、写入字节数进行纵向累加，用于分析内存不同时间上的内存占用情况；
123.内存占用时空显示区域，根据内存占用的空间大小及时间范围，以块状显示内存占用记录；
124.内存占用记录，显示内存的起始地址、结束地址、起始时时、结束时间、读写标记以及和操作相关的参数；
125.内存地址块，在实际使用中，内存块可能是不连续的，以块状分段显示，方便高效地显示有效内存部分；
126.记录过滤器，可以根据记录的属性，如操作类型、算子类型、函数类型等，选择一部分数据显示，其他数据记录隐藏掉。
127.在一些实施例中，在显示界面，可以执行以下至少之一的操作：
128.鼠标悬停在每个记录上，可以显示该记录的详细信息；
129.鼠标滚轮可以横向在时间维上缩放，相关记录同步拉伸或收缩；
130.纵向缩放滑动条负责纵向缩放与显示区域设定；
131.可以拖动坐标区域来显示上下左右区域未显示出来的数据；
132.点击相关记录，相关记录居中显示并放大，其他相关联的数据也同步到对应时间点以及
133.内存显示区域显示可选，并且可以折叠；当无内存占用信息，则不显示。
134.在一个实施例中，相关的数据信息还会以可折叠的表格方式显示，表格的显示数
据和上面的记录过滤器一致，请参见表一，这里只展示了基本的信息，具体可根据实际场景来设置；点击表头时，可将每行数据按照对应列的值进行正序、倒序、原序排列，方便查找瓶颈数据；此外，该表格及相关数据可以导出成离线文件，允许用户离线分析。
135.表一：
136.记录类别操作类型上级记录内存占用时间占用参数信息xyzabc
137.图5是根据一示例性实施例示出的一种张量处理单元tpu，所述装置包括：
138.获取模块51，用于获取张量处理单元tpu内第一功能单元执行预定操作的时间；
139.确定模块52，用于根据所述第一功能单元执行所述预定操作的时间，确定所述张量处理单元tpu内所述第一功能单元和/或第二功能单元运行的参考时间信息，其中，所述参考时间包括数据处理的起始时间和/或结束时间。
140.在一实施例中，所述装置还包括：
141.显示模块53，用于基于所述参考时间，显示关联后的所述数据。
142.在一个实施例中，所述第一功能单元为微型控制器mcu；所述第二功能单元为全局直接内存存取单元gdma；所述确定模块52，用于确定所述gdma运行的起始时间为所述mcu首次配置gdma参数的结束时间，其中，所述参考时间为所述gdma运行的起始时间。
143.在一个实施例中，所述第一功能单元为mcu；所述第二功能单元为tiu；所述确定模块52，用于：
144.确定所述tiu运行的起始时间为所述mcu首次配置tiu参数的结束时间；
145.和/或，
146.确定所述tiu运行的起始时间为所述mcu首次记录gdma的结束时间，其中，所述参考时间为所述tiu运行的起始时间。
147.在一个实施例中，所述确定模块52，用于：
148.响应于mcu的运行时间与上位机的运行时间对齐，确定所述mcu运行的起始时间为所述上位机发送第一条指令的结束时间。
149.在一个实施例中，所述确定模块52，用于：
150.根据算子与tiu和gdma之间的关联关系，将算子运行的起始时间确定为所述mcu最早记录gdma和tiu的起始时间；
151.或者，
152.根据算子与tiu和gdma之间的关联关系，将算子运行的结束时间确定为所述mcu最晚记录gdma和tiu的结束时间。
153.在一个实施例中，所述装置还包括：
154.结构化模块54，用于结构化所述第一功能单元和/或所述第二功能单元的处理数据；
155.匹配模块55，用于匹配所述处理数据和所述参考时间信息。
156.在一个实施例中，所述装置还包括：
157.显示模块53，用于显示所述预定对象的运行时序；
158.其中，所述预定对象包括以下至少之一：
159.gdma；
160.tiu；
161.mcu；
162.上位机；
163.算子。
164.关于上述实施例中的装置，其中各个模块执行操作的具体方式已经在有关指纹识别方法的实施例中进行了详细描述，此处将不做详细阐述说明。
165.本公开提供一种电子设备，所述电子设备包括：处理器和用于存储能够在所述处理器上运行计算机服务的存储器，其中，所述处理器用于运行所述计算机服务时，实现本公开任一实施例所述的方法。
166.本公开提供一种存储介质，所述存储介质中有计算机可执行指令，所述计算机可执行指令被处理器执行实现本公开任一实施例所述的方法。
167.图6是根据一示例性实施例示出的一种电子设备700的框图。例如，电子设备700可以是移动电话，计算机，数字广播终端，消息收发设备，游戏控制台，平板设备，医疗设备，健身设备，个人数字助理等。
168.参照图6，电子设备700可以包括以下一个或多个组件：处理组件702，存储组件704，电力组件706，多媒体组件708，音频组件710，输入/输出(i/o)的接口712，传感器组件714，以及通信组件716。
169.处理组件702通常控制电子设备700的整体操作，诸如与显示，电话呼叫，数据通信，相机操作和记录操作相关联的操作。处理组件702可以包括一个或多个处理器720来执行指令，以完成上述的方法的全部或部分步骤。此外，处理组件702可以包括一个或多个模块，便于处理组件702和其他组件之间的交互。例如，处理组件702可以包括多媒体模块，以方便多媒体组件708和处理组件702之间的交互。
170.存储器704被配置为存储各种类型的数据以支持在电子设备700的操作。这些数据的示例包括用于在电子设备700上操作的任何应用程序或方法的指令，联系人数据，电话簿数据，消息，图片，视频等。存储器704可以由任何类型的易失性或非易失性存储设备或者它们的组合实现，如静态随机存取存储器(sram)，电可擦除可编程只读存储器(eeprom)，可擦除可编程只读存储器(eprom)，可编程只读存储器(prom)，只读存储器(rom)，磁存储器，快闪存储器，磁盘或光盘。
171.电力组件706为电子设备700的各种组件提供电力。电力组件706可以包括电源管理系统，一个或多个电源，及其他与为电子设备700生成、管理和分配电力相关联的组件。
172.多媒体组件708包括在所述电子设备700和用户之间的提供一个输出接口的屏幕。在一些实施例中，屏幕可以包括液晶显示器(lcd)和触摸面板(tp)。如果屏幕包括触摸面板，屏幕可以被实现为触摸屏，以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界，而且还检测与所述触摸或滑动操作相关的持续时间和压力。在一些实施例中，多媒体组件708包括一个前置摄像头和/或后置摄像头。当电子设备700处于操作模式，如拍摄模式或视频模式时，前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。
173.音频组件710被配置为输出和/或输入音频信号。例如，音频组件710包括一个麦克
风(mic)，当电子设备700处于操作模式，如呼叫模式、记录模式和语音识别模式时，麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器704或经由通信组件716发送。在一些实施例中，音频组件710还包括一个扬声器，用于输出音频信号。
174.i/o接口712为处理组件702和外围接口模块之间提供接口，上述外围接口模块可以是键盘，点击轮，按钮等。这些按钮可包括但不限于：主页按钮、音量按钮、启动按钮和锁定按钮。
175.传感器组件714包括一个或多个传感器，用于为电子设备700提供各个方面的状态评估。例如，传感器组件714可以检测到电子设备700的打开/关闭状态，组件的相对定位，例如所述组件为电子设备700的显示器和小键盘，传感器组件714还可以检测电子设备700或电子设备700一个组件的位置改变，用户与电子设备700接触的存在或不存在，电子设备700方位或加速/减速和电子设备700的温度变化。传感器组件714可以包括接近传感器，被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件714还可以包括光传感器，如cmos或ccd图像传感器，用于在成像应用中使用。在一些实施例中，该传感器组件714还可以包括加速度传感器，陀螺仪传感器，磁传感器，压力传感器或温度传感器。
176.通信组件716被配置为便于中的电子设备700和其他设备之间有线或无线方式的通信。电子设备700可以接入基于通信标准的无线网络，如wifi，2g或3g，或它们的组合。在一个示例性实施例中，通信组件716经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中，所述通信组件716还包括近场通信(nfc)模块，以促进短程通信。例如，在nfc模块可基于射频识别(rfid)技术，红外数据协会(irda)技术，超宽带(uwb)技术，蓝牙(bt)技术和其他技术来实现。
177.在示例性实施例中，电子设备700可以被一个或多个应用专用集成电路(asic)、数字信号处理器(dsp)、数字信号处理设备(dspd)、可编程逻辑器件(pld)、现场可编程门阵列(fpga)、控制器、微控制器、微处理器或其他电子元件实现，用于执行上述方法。
178.在示例性实施例中，还提供了一种包括指令的非临时性计算机可读存储介质，例如包括指令的存储器704，上述指令可由电子设备700的处理器720执行以完成上述方法。例如，所述非临时性计算机可读存储介质可以是rom、随机存取存储器(ram)、cd-rom、磁带、软盘和光数据存储设备等。
179.本领域技术人员在考虑说明书及实践这里公开的发明后，将容易想到本发明的其它实施方案。本技术旨在涵盖本发明的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本发明的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本发明的真正范围和精神由下面的权利要求指出。
180.应当理解的是，本发明并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本发明的范围仅由所附的权利要求来限制。