经由动态更新自然语言处理与应用交互
背景技术：
：：1.计算设备可以执行应用。应用可以提供可以接收输入信息、执行功能和输出信息的用户接口。技术实现要素：2.该技术解决方案通常涉及经由动态更新自然语言处理(“nlp”)或自然语言理解来与诸如第三方(3p)应用的应用交互。通过动态地更新nlp，该技术解决方案可以促进经由数字助理与应用(包括3p应用)的基于语音的交互。3.与应用交互以在具有有限接口或使用有限接口的计算设备上执行动作可能是具有挑战性的。使用附加接口来与应用通信可以增加计算资源消耗、需要使用过多的接口，或者延迟或以其他方式将时延引入到应用的动作的执行和完成中。4.因此，该技术解决方案可以利用协议来从应用接收声明。技术解决方案可以使用声明来实时地(例如，响应于应用的调用和声明的接收)更新用于解析或处理语音输入的自然语言理解或处理技术。技术解决方案可以使用更新的nlp技术来处理后续语音输入，以便提高检测由应用用于执行动作的输入参数的准确性、可靠性和可能性。5.本技术解决方案的至少一个方面涉及一种与应用交互的系统。该系统可以包括由客户端计算设备执行的数字助理组件。该数字助理组件可以包括一个或多个处理器和存储器。该数字助理组件可以执行自然语言处理器组件、应用管理器组件和直接动作应用编程接口(“api”)。nlp组件可以接收由客户端计算设备的麦克风检测到的第一输入音频信号。nlp组件可以经由自然语言处理技术处理第一输入音频信号以识别对应用的指示。应用管理器组件可以响应于指示来激活应用以在客户端计算设备上执行。该应用可以经由协议向数字助理声明应用被配置为执行的功能。nlp组件可以响应于由应用声明的功能，修改自然语言处理技术。nlp组件可以接收由客户端计算设备的麦克风检测到的第二输入音频信号。nlp组件可以经由所修改的自然语言处理技术处理第二输入音频信号以检测一个或多个参数。nlp组件可以基于一个或多个参数与由应用声明的功能之间的比较，确定一个或多个参数对于到由客户端计算设备上的数字助理激活的应用的输入字段的输入是兼容的。直接动作api可以响应于兼容性的确定并且基于一个或多个参数，生成用于应用的动作数据结构。直接动作api可以经由协议将动作数据结构输入到应用中，以使得应用执行动作数据结构并更新应用的用户接口元件。6.本技术解决方案的至少一个方面涉及一种与应用动态交互的方法。该方法可以由客户端计算设备执行的一个或多个数字助理组件执行。该方法可以包括数字助理组件接收由客户端计算设备的麦克风检测到的第一输入音频信号。该方法可以包括数字助理组件经由自然语言处理技术来处理第一输入音频信号以识别应用的指示。该方法可以包括数字助理组件响应于指示，激活应用以在客户端计算设备上执行。应用经由协议向数字助理声明应用被配置为执行的功能。该方法可以包括数字助理组件响应于由应用声明的功能，修改自然语言处理技术。该方法可以包括数字助理组件接收由客户端计算设备的麦克风检测到的第二输入音频信号。该方法可以包括数字助理组件经由所修改的自然语言处理技术处理第二输入音频信号以检测一个或多个参数。该方法可以包括数字助理组件基于一个或多个参数与由应用声明的功能之间的比较，确定一个或多个参数对于到由客户端计算设备上的数字助理激活的应用的输入字段的输入是兼容的。该方法可以包括数字助理组件响应于兼容性的确定并且基于一个或多个参数，生成用于应用的动作数据结构。该方法可以包括数字助理组件经由协议将动作数据结构输入到应用中，以使得应用执行动作数据结构并更新应用的用户接口元件。7.至少一个方面涉及一种与应用动态交互的系统。该系统可以包括一个或多个处理器和存储器。例如，系统可以包括由客户端计算设备执行的数据处理系统。该系统可以包括由一个或多个处理器和存储器执行的数字助理组件。该数字助理组件可以响应于第一输入音频，激活用于在客户端计算设备上执行的应用。应用的激活可以使得应用经由协议向数字助理组件声明应用被配置以执行的功能。数字助理组件可以响应于由应用声明的功能，修改自然语言处理技术。数字助理组件可以接收由客户端计算设备的麦克风检测到的第二输入音频信号。数字助理组件可以经由所修改的自然语言处理技术处理第二输入音频信号以检测一个或多个参数。数字助理组件可以基于一个或多个参数与由应用声明的功能之间的比较，确定一个或多个参数对于到由客户端计算设备上的数字助理激活的应用的输入字段的输入是兼容的。数字助理组件可以响应于兼容性的确定并且基于一个或多个参数，生成用于应用的动作数据结构。数字助理组件可以经由协议将动作数据结构输入到应用中，以使得应用执行动作数据结构并更新应用的用户接口元件。数字助理组件可以向远程数据处理系统传送对内容的请求。数字助理组件可以响应于从远程数据处理系统接收到内容项，呈现由远程数据处理系统选择的内容项。8.至少一个方面涉及一种与应用动态交互的方法。该方法可以由一个或多个处理器和存储器执行。例如，该方法可以由客户端计算设备执行的数据处理系统执行。该方法可以由一个或多个处理器和存储器执行的数字助理组件执行。该方法可以包括数字助理组件响应于第一输入音频，激活用于在客户端计算设备上执行的应用。应用的激活可以使得应用经由协议向数字助理组件声明应用被配置以执行的功能。该方法可以包括数字助理组件响应于由应用声明的功能，修改自然语言处理技术。该方法可以包括数字助理组件接收由客户端计算设备的麦克风检测到的第二输入音频信号。该方法可以包括数字助理组件经由所修改的自然语言处理技术处理第二输入音频信号以检测一个或多个参数。该方法可以包括数字助理组件基于一个或多个参数与由应用声明的功能之间的比较，确定一个或多个参数对于到由客户端计算设备上的数字助理激活的应用的输入字段的输入是兼容的。该方法可以包括数字助理组件响应于兼容性的确定并且基于一个或多个参数，生成用于应用的动作数据结构。该方法可以包括数字助理组件经由协议将动作数据结构输入到应用中，以使得应用执行动作数据结构并更新应用的用户接口元件。该方法可以包括数字助理组件向远程数据处理系统传送对内容的请求。该方法可以包括数字助理组件响应于从远程数据处理系统接收到内容项，呈现由远程数据处理系统选择的内容项。9.下面详细讨论这些和其他方面和实施方式。前述信息和以下详细描述包括各个方面和实施方式的说明性示例，并且提供了用于理解所要求保护的方面和实施方式的性质和特性的概述或框架。附图提供了对各个方面和实施方式的图示和进一步理解，并且被并入本说明书中并构成本说明书的一部分。附图说明10.附图不旨在按比例绘制。各个附图中相同的附图标记和名称指示相同的元件。为了清楚起见，并非每个组件都可以在每个附图中标记。在附图中：11.图1是根据实施方式的用于与应用动态交互的系统的图示。12.图2是根据实施方式的用于与应用动态交互的系统的操作的图示。13.图3是根据实施方式的与应用动态交互的方法的图示。14.图4是图示可用于实现图1和图2中描绘的系统的元件以及图3中描绘的方法的计算机系统的一般架构的框图。具体实施方式15.以下是与应用动态交互的方法、装置和系统相关的各种概念及其实施方式的更详细描述。上面介绍并在下面更详细讨论的各种概念可以以多种方式中的任何一种来实现。16.该技术解决方案通常涉及与第三方应用交互。该技术解决方案的系统和方法可以通过动态地更新自然语言处理技术(或自然语言理解)来与(3p)应用交互。在基于语音的计算环境中，诸如当输入模式基于语音输入(例如，由计算设备的麦克风检测到的音频输入信号)时，与3p应用交互以执行动作可能是具有挑战性的。例如，在移动计算设备(例如，智能电话)上执行的数字助理可以接收语音输入。数字助理可以调用或启动用于在智能电话上执行(或至少部分地在智能电话上执行)的应用。然而，应用可以不配置有语音接口(例如，允许语音输入或自然语言处理的用户接口)以允许经由语音输入接收输入参数。在没有输入参数的情况下，应用可能无法执行动作，或者无法准确且可靠地执行动作。利用输入参数的部分集合，应用可能错误地执行动作(例如，输出错误或不期望的结果)，或者不正确地执行动作(例如，执行错误的动作)。在一些情况下，应用可以请求附加参数，以便使用非基于语音的接口(例如，显示设备、触摸输入接口、手势接口、图标、按钮、下拉菜单、键盘或鼠标)来执行动作。因此，在没有输入参数的完整集合的情况下，应用可能执行错误的动作，或者激活附加接口，这可能导致浪费的计算资源利用(例如，附加的功耗、计算处理)并且引入由应用执行或完成动作的延迟(例如，用于获得输入参数的附加请求、提示、远程过程调用)。17.因此，该技术解决方案的系统和方法通常涉及经由动态更新自然语言处理(“nlp”)或自然语言理解来与第三方(“3p”)应用交互。通过动态地更新nlp，该技术解决方案可以促进经由数字助理与3p应用的基于语音的交互。通过提供基于语音的交互，可以针对3p应用克服与替代交互方法(例如，触摸)相关联的技术限制：例如，可能由于物理约束而艰难处理触摸接口的用户可能受益。该技术解决方案的系统和方法可以利用协议来从应用接收声明。该技术解决方案可以使用声明来实时地(例如，响应于应用的调用和声明的接收)更新用于解析或处理语音输入的自然语言理解或处理技术。该技术解决方案可以使用更新的nlp技术来处理后续语音输入，以便提高检测由应用使用以执行动作的输入参数的准确性、可靠性和可能性。18.例如，对智能电话的语音输入可以包括“bookatableatrestaurant_booking_app(在餐馆_预订_app处预订桌子)”。数字助理可以识别语音输入中的移动应用restaurant_booking_app(餐馆_预订_app)，然后在智能电话上启动restaurant_booking_app移动应用。restaurant_booking_app移动应用可以经由协议向数字助理声明该应用可以执行什么功能或应用的用户接口的状态。使用该信息，数字助理可以更好地理解与restaurant_booking_app应用相关的后续语音输入或语音查询。例如，如果后续语音输入是“atexample_italian_restaurant(在示例_意大利_餐馆)”，则数字助理可以确定语音输入是经由restaurant_booking_app应用的预留的继续。然后，数字助理可以生成具有信息或参数的动作数据结构以进行预留，并且经由协议将动作数据结构传送到restaurant_booking_app应用。19.该技术解决方案可以基于应用的当前状态来确定应用的场境(context)，修改nlp技术以提高数字助理的能力以检测后续语音输入中与应用的当前状态或场境兼容的输入参数，然后将这些参数输入到应用中以允许应用高效、准确和可靠地执行动作。通过提供由应用使用以执行动作的输入参数，该技术解决方案可以减少或消除由应用进行的针对输入的提示或请求的数量，同时限制或消除对不同用户接口(例如，显示设备、触摸屏、手势、键盘或鼠标)的使用。因此，该技术解决方案的系统和方法可以提供使用语音输入来启动应用并由应用执行动作的无缝过程。以这种方式，可以向应用提供语音接口的有益方面。20.图1图示了与应用动态地交互的示例性系统100。系统100可以包括内容选择基础设施。系统100可以包括数据处理系统102。数据处理系统102可以包括计算设备128或在计算设备128上执行。数据处理系统102可以经由网络105与3p内容提供者设备140、远程数据处理系统142或3p应用服务器148中的一个或多个通信。网络105可以包括计算机网络，诸如互联网、局域网、广域网、城域网或其他区域网络、内联网、卫星网络和其他通信网络，诸如语音或数据移动电话网络。网络105可以用于访问可以在至少一个计算设备128(诸如膝上型计算机、台式计算机、平板计算机、个人数字助理、智能电话、便携式计算机或扬声器)上呈现、输出、渲染或显示的信息资源，诸如网页、网站、域名或统一资源定位符。例如，经由网络105，计算设备128的用户可以访问由3p内容提供者设备140提供的信息或数据。计算设备128可以包括或可以不包括显示器；例如，计算设备可以包括有限类型的用户接口，诸如麦克风和扬声器。在一些情况下，计算设备128的主用户接口可以是麦克风和扬声器。计算设备128可以与基于语音的计算环境对接或被包括在基于语音的计算环境中。21.网络105可以由数据处理系统102使用来访问可以由客户端计算设备128呈现、输出、渲染或显示的信息资源，诸如应用、网页、网站、域名或统一资源定位符。例如，经由网络105，客户端计算设备128的用户可以访问由3p内容提供者设备140提供的信息或数据。网络105可以包括或构成互联网上可用的信息资源的子网络，其与内容放置或搜索引擎结果系统相关联，或者有资格包括第三方数字组成部分作为数字组成部分放置活动的一部分。22.网络105可以是任何类型或形式的网络，并且可以包括以下任何一种：点对点网络、广播网络、广域网、局域网、电信网络、数据通信网络、计算机网络、atm(异步传输模式)网络、sonet(同步光网络)网络、sdh(同步数字体系)网络、无线网络和有线网络。网络105可以包括无线链路，诸如红外信道或卫星频带。网络105的拓扑可以包括总线、星形或环形网络拓扑。网络可以包括使用用于在移动设备之间进行通信的任何一种或多种协议的移动电话网络，包括高级移动电话协议(“amps”)、时分多址(“tdma”)、码分多址(“cdma”)、全球移动通信系统(“gsm”)、通用分组无线电服务(“gprs”)或通用移动电信系统(“umts”)。可以经由不同的协议传送不同类型的数据，或者可以经由不同的协议传送相同类型的数据。23.系统100可以包括3p应用服务器148、与3p应用服务器148对接、通信或以其他方式访问3p应用服务器148。数据处理系统102可以经由网络105与3p应用服务器148通信。3p应用服务器148可以远离并且不同于数据处理系统102、远程数据处理系统142、3p数字内容提供者设备140和计算设备128。3p应用服务器148可以与应用118的开发者相关联。3p应用服务器148可以促进应用118的执行。例如，3p应用服务器148可以为应用118执行后端处理。在计算设备128上执行的应用118可以执行应用118的前端组件，并且3p应用服务器148可以执行应用118的后端组件。在计算设备128上执行的应用118可以将远程过程调用或其他请求或数据传送到3p应用服务器148。3p应用服务器148可以向应用118传送数据、信息或请求以执行功能或执行动作。3p应用服务器148可以修改或改变应用118的状态，这可以导致应用声明应用的功能性或数字助理组件106的调用。24.系统100可以包括至少一个远程数据处理系统142。远程数据处理系统142可以包括至少一个逻辑设备，诸如具有经由网络105与例如数据处理系统102、3p内容提供者设备140(例如，内容提供者)通信的处理器的计算设备。远程数据处理系统142可以包括至少一个计算资源、服务器、处理器或存储器。例如，远程数据处理系统142可以包括位于至少一个数据中心中的多个计算资源或服务器。远程数据处理系统142可以包括多个逻辑分组的服务器并且促进分布式计算技术。服务器的逻辑组可以被称为数据中心、服务器场或机器场。服务器也可以在地理上分散。数据中心或机器场可以作为单个实体管理，或者机器场可以包括多个机器场。每个机器场内的服务器可以是异构的——服务器或机器中的一个或多个可以根据一种或多种类型的操作系统平台进行操作。25.机器场中的服务器可以连同相关联的存储系统一起存储在高密度机架系统中，并且位于企业数据中心中。例如，以这种方式整合服务器可以通过将服务器和高性能存储系统定位在本地化高性能网络上来改善系统可管理性、数据安全性、系统的物理安全性以及系统性能。包括服务器和存储系统的所有或一些远程数据处理系统142组件的集中化以及将它们与高级系统管理工具耦合允许更有效地使用服务器资源，这节省了功率和处理要求并减少了带宽使用。26.远程数据处理系统142可以包括数字助理服务器144和内容选择器组件146。数字助理服务器144可以被设计、构造和操作以执行与计算设备128的数字助理组件106通信的一个或多个功能。内容选择器组件146可以被设计、构造和操作以选择由3p数字内容提供者设备140提供的数字组成部分项(例如，内容项)。内容选择器组件146可以响应于对来自计算设备128的内容的请求而选择内容项。内容选择器组件146可以将所选择的内容项传送到计算设备128以呈现(例如，音频输出、视觉输出或视听输出)。27.系统100可以包括、访问或以其他方式与至少一个3p内容提供者设备140交互。3p内容提供者设备140可以包括诸如具有处理器的计算设备的至少一个逻辑设备，以经由网络105与例如计算设备128、数据处理系统102或远程数据处理系统142通信。3p内容提供者设备140可以包括至少一个计算资源、服务器、处理器或存储器。例如，3p内容提供者设备140可以包括位于至少一个数据中心中的多个计算资源或服务器。3p内容提供者设备140可以包括或指代服务提供者设备或商品提供者设备。28.3p数字内容提供者设备140可以提供基于音频的数字组成部分，以由计算设备128呈现为音频输出数字组成部分。数字组成部分可以包括对搜索查询或请求的响应。数字组成部分可以包括来自数据库、搜索引擎或联网资源的信息。例如，数字组成部分可以包括新闻信息、天气信息、体育信息、百科全书条目、字典条目或来自数字教科书的信息。数字组成部分可以包括对商品或服务的报价，诸如基于语音的消息，其陈述：“wouldyoulikemetoorderyouataxi？(您想我为你叫预订租车吗？)”3p内容提供者设备140可以包括存储器以存储可以响应于基于语音的查询而提供的一系列音频数字组成部分。3p内容提供者设备140还可以向数据处理系统102提供基于音频的数字组成部分(或其他数字组成部分)，其中，它们可以被存储在数据储存库122中。数据处理系统102可以选择音频数字组成部分并向客户端计算设备128提供(或指令内容提供者计算设备140提供)音频数字组成部分。基于音频的数字组成部分可以排他地是音频，或者可以与文本、图像或视频数据组合。数字组成部分或内容项可以包括图像、文本、视频、多媒体或一种或多种格式的其他类型的内容。29.远程数据处理系统142可以包括具有至少一个计算资源或服务器的内容放置系统。远程数据处理系统142可以包括至少一个内容选择器组件146、与至少一个内容选择器组件146对接或以其他方式与至少一个内容选择器组件146通信。远程数据处理系统142可以包括至少一个数字助理服务器144、与至少一个数字助理服务器144对接或以其他方式与至少一个数字助理服务器144通信。30.内容选择器组件146和数字助理服务器144可以每一个包括至少一个处理单元或其他逻辑设备，诸如可编程逻辑阵列引擎，或被配置为彼此通信或与其他资源或数据库通信的模块。内容选择器组件146和数字助理服务器144可以是单独的组件、单个组件或远程数据处理系统142的一部分。系统100及其组件(诸如远程数据处理系统142)可以包括硬件元件，诸如一个或多个处理器、逻辑设备或电路。31.远程数据处理系统142可以获得与多个计算设备128相关联的匿名计算机网络活动信息。计算设备128的用户可以肯定地授权远程数据处理系统142获得与用户的计算设备128相对应的网络活动信息。例如，远程数据处理系统142可以提示计算设备128的用户同意获得一种或多种类型的网络活动信息。计算设备128的用户的身份可以保持匿名，并且计算设备128可以与唯一标识符(例如，由数据处理系统或计算设备的用户提供的用户或计算设备的唯一标识符)相关联。远程数据处理系统142可以将每个观察与对应的唯一标识符相关联。32.3p数字内容提供者设备140可以建立电子内容活动。电子内容活动可以作为内容数据存储在内容选择器组件146的数据储存库中。电子内容活动可以指代与共同主题相对应的一个或多个内容组。内容活动可以包括分层数据结构，该分层数据结构包括内容组、数字组成部分数据对象和内容选择标准。为了创建内容活动，3p数字内容提供者设备140可以指定内容活动的活动级别参数的值。活动级别参数可以包括例如活动名称、用于放置数字组成部分对象的优选内容网络、要用于内容活动的资源的值、内容活动的开始和结束日期、内容活动的持续时间、数字组成部分对象放置的时间表、语言、地理位置、在其上提供数字组成部分对象的计算设备的类型。在一些情况下，闪现(impression)可以指代何时从其源(例如，远程数据处理系统142或3p数字内容提供者设备140)获取数字组成部分对象，并且是可计数的。在一些情况下，由于点击欺诈的可能性，可以过滤和排除机器人活动作为闪现。因此，在一些情况下，闪现可以指来自web服务器的对来自浏览器的页面请求的响应的测量，其从机器人活动和错误代码中被过滤，并且在尽可能接近渲染数字组成部分对象以在计算设备128上显示的机会的点处被记录。在一些情况下，闪现可以指可视或可听闪现；例如，数字组成部分对象至少部分地(例如，20％、30％、30％、40％、50％、60％、70％或更多)在客户端计算设备128的显示设备上可查看，或者经由计算设备128的扬声器136可听。点击或选择可以指与数字组成部分对象的用户交互，诸如对可听闪现的语音响应、鼠标点击、触摸交互、手势、摇动、音频交互或键盘点击。转化可以指用户参考数字组成部分对象采取期望的动作；例如，购买产品或服务、完成调查、访问与数字组成部分相对应的实体商店、或完成电子交易。33.3p数字内容提供者设备140还可以为内容活动建立一个或多个内容组。内容组包括一个或多个数字组成部分对象和对应的内容选择标准，诸如关键字、词、词项、短语、地理位置、计算设备的类型、一天中的时间、兴趣、主题或垂直。相同内容活动下的内容组可以共享相同的活动级别参数，但是可能已经定制了特定内容组级别参数的规范，诸如关键字、否定关键字(例如，在主要内容上存在否定关键字的情况下阻止数字组成部分的放置)、关键字的竞价或与竞价或内容活动相关联的参数。34.为了创建新的内容组，3p数字内容提供者设备140可以提供内容组的内容组级别参数的值。内容组级别参数包括例如内容组名称或内容组主题，以及对不同内容放置机会(例如，自动放置或管理放置)的竞价或结果(例如，点击、闪现或转化)。内容组名称或内容组主题可以是一个或多个词项，3p数字内容提供者设备140可以使用所述一个或多个词项来捕获要为其选择内容组的数字组成部分对象以供显示的话题或主题。例如，汽车经销商可以为其出售的每个品牌的车辆创建不同的内容组，并且还可以为其出售的每个型号的车辆创建不同的内容组。汽车经销商可以使用的内容组主题的示例包括例如“makeasportscar(型号a跑车)”、“makebsportscar(型号b跑车)”、“makecsedan(型号c轿车)”、“makectruck(型号c卡车)”、“makechybrid(型号c混合动力车)”或“makedhybrid(型号d混合动力车)”。示例性内容活动主题可以是“hybrid(混合动力车)”，并且包括用于例如“makechybrid”和“makedhybrid”两者的内容组。35.3p数字内容提供者设备140可以向每个内容组提供一个或多个关键字和数字组成部分对象。关键字可以包括与数字组成部分对象相关联或由数字组成部分对象识别的产品或服务相关的词项。关键字可以包括一个或多个词项或短语。例如，汽车经销商可以包括“sportscar(跑车)”、“v-6engine(v-6发动机)”、“four-wheeldrive(四轮驱动)”、“fuelefficiency(燃料效率)”作为内容组或内容活动的关键字。在一些情况下，否定关键字可以由内容提供者指定，以避免、防止、阻止或禁用对某些词项或关键字的内容放置。内容提供者可以指定用于选择数字组成部分对象的匹配类型，诸如精确匹配、短语匹配或广泛匹配。36.3p数字内容提供者设备140可以提供要由远程数据处理系统142使用的一个或多个关键字，以选择由3p数字内容提供者设备140提供的数字组成部分对象。3p数字内容提供者设备140可以识别要竞价的一个或多个关键字，并进一步提供各种关键字的竞价金额。3p数字内容提供者设备140可以提供要由远程数据处理系统142使用来选择数字组成部分对象的附加内容选择标准。多个3p数字内容提供者设备140可以对相同或不同的关键字竞价，并且远程数据处理系统142可以响应于接收到电子消息的关键字的指示而运行内容选择过程或广告拍卖。37.3p数字内容提供者设备140可以提供一个或多个数字组成部分对象以供远程数据处理系统142选择。远程数据处理系统142(例如，经由内容选择器组件146)在内容放置机会变得可用时可以选择与为内容组指定的资源分配、内容调度、最大竞价、关键字和其他选择标准匹配的数字组成部分对象。不同类型的数字组成部分对象可以被包括在内容组中，诸如语音数字组成部分、音频数字组成部分、文本数字组成部分、图像数字组成部分、视频数字组成部分、多媒体数字组成部分或数字组成部分链接。在选择数字组成部分时，数据处理系统102可以传送数字组成部分对象以用于经由计算设备128呈现、在计算设备128或计算设备128的显示设备上渲染。渲染可以包括在显示设备上显示数字组成部分，或者经由计算设备128的扬声器播放数字组成部分。远程数据处理系统142可以向计算设备128提供指令以渲染数字组成部分对象。远程数据处理系统142可以指令计算设备128的数字助理组件106或计算设备128的音频驱动器138生成音频信号或声波。远程数据处理系统142可以指令由计算设备128执行的应用118呈现所选择的数字组成部分对象。例如，应用118可以包括可以呈现数字组成部分对象的槽(例如，内容槽)(例如，音频槽或视觉槽)。38.数据处理系统102可以包括、执行或以其他方式与内容选择器组件146通信，以接收由自然语言处理器识别的查询、关键字或触发关键字，并基于触发关键字选择数字组成部分。内容选择器组件146可以经由实时内容选择过程来选择数字组成部分。内容选择过程可以包括例如经由搜索引擎执行搜索，或者访问存储在诸如3p内容提供者设备140的远程服务器或设备上的数据库。内容选择过程可以指或包括选择由第三方内容提供者140提供的赞助数字组成部分对象。实时内容选择过程可以包括由多个内容提供者提供的数字组成部分在其中被解析、处理、加权或匹配以便选择一个或多个数字组成部分以提供给计算设备128的服务。内容选择器组件146可以实时执行内容选择过程。实时执行内容选择过程可以指响应于经由客户端计算设备128接收的对内容的请求来执行内容选择过程。可以在接收到请求的时间间隔(例如，1秒、2秒、5秒、10秒、20秒、30秒、1分钟、2分钟、3分钟、5分钟、10分钟或20分钟)内执行(例如，发起或完成)实时内容选择过程。实时内容选择过程可以在与客户端计算设备128的通信会话期间执行，或者在通信会话终止之后的时间间隔内执行。数据处理系统102可以在完成数字组成部分选择过程或其他数字任务之后选择要提供的音频铃声。39.例如，数据处理系统102可以包括被设计、构造、配置或操作以选择数字组成部分对象的内容选择器组件146。为了选择用于在基于语音的环境中显示的数字组成部分，数据处理系统102(例如，经由nlp组件108)可以解析输入音频信号以识别查询、关键字(例如，触发关键字)，并使用关键字来选择匹配的数字组成部分。数据处理系统102可以基于广泛匹配、精确匹配或短语匹配来选择匹配的数字组成部分。例如，内容选择器组件146可以分析、解析或以其他方式处理候选数字组成部分的主题，以确定候选数字组成部分的主题是否对应于由客户端计算设备128的麦克风检测到的输入音频信号的关键字或短语的主题。内容选择器组件146可以使用图像处理技术、字符辨识技术、自然语言处理技术或数据库查找来识别、分析或辨识候选数字组成部分的语音、音频、词项、字符、文本、符号或图像。候选数字组成部分可以包括指示候选数字组成部分的主题的元数据，在这种情况下，内容选择器组件146可以处理元数据以确定候选数字组成部分的主题是否对应于输入音频信号。40.3p数字内容提供者140可以在设置包括数字组成部分的内容活动时提供附加指示符。内容提供者可以在内容活动或内容组级别提供内容选择器组件146可以通过使用关于候选数字组成部分的信息执行查找来识别的信息。例如，候选数字组成部分可以包括唯一标识符，其可以映射到内容组、内容活动或内容提供者。内容选择器组件146可以基于存储在数据储存库122中的内容活动数据结构中的信息来确定关于3p数字内容提供者设备140的信息。41.远程数据处理系统142可以经由计算机网络接收对用于在计算设备128上呈现的内容的请求。数据处理系统102可以通过处理由客户端计算设备128的麦克风检测到的输入音频信号来识别请求。请求可以包括请求的选择标准，诸如与请求相关联的设备类型、位置和关键字。42.响应于该请求，远程数据处理系统142可以从与3p数字内容提供者设备140相关联的数据储存库或数据库中选择数字组成部分对象，并经由网络105提供数字组成部分以经由计算设备128呈现。计算设备128可以与数字组成部分对象交互。计算设备128可以接收对数字组成部分的音频响应。计算设备128可以接收选择与数字组成部分对象相关联的超链接或其他按钮的指示，该指示使得或允许计算设备128识别服务提供者、从服务提供者请求服务、指令服务提供者执行服务、向服务提供者传送信息、或以其他方式查询服务提供者设备。43.计算设备128(或客户端计算设备或客户端设备)可以包括或执行数据处理系统102。数据处理系统102可以包括至少一个接口104、与至少一个接口104对接或以其他方式与至少一个接口104通信。数据处理系统102可以包括至少一个数字助理组件106、与至少一个数字助理组件106对接或以其他方式与至少一个数字助理组件106通信。数据处理系统102可以包括至少一个自然语言处理器(“nlp”)组件108、与至少一个自然语言处理器(“nlp”)组件108对接或以其他方式与至少一个自然语言处理器(“nlp”)组件108通信。数据处理系统102可以包括至少一个模型110、与至少一个模型110对接或以其他方式与至少一个模型110通信。数据处理系统102可以包括至少一种技术112、与至少一种技术112对接或以其他方式与至少一种技术112通信。数据处理系统102可以包括至少一个应用管理器组件114、与至少一个应用管理器组件114对接或以其他方式与至少一个应用管理器组件114通信。数据处理系统102可以包括至少一个直接动作应用编程接口(“api”)116，与至少一个直接动作应用编程接口(“api”)116对接或以其他方式与至少一个直接动作应用编程接口(“api”)116通信。数据处理系统102可以包括至少一个应用118、与至少一个应用118对接、与至少一个应用118通信或执行至少一个应用118。数据处理系统102可以至少部分地执行至少一个应用118(例如，应用可以包括客户端组件和服务器组件)。数据处理系统102可以包括至少一个数据储存库122、与至少一个数据储存库122对接或以其他方式与至少一个数据储存库122通信。44.数据储存库122可以包括一个或多个本地或分布式数据库，并且可以包括数据库管理系统。数据储存库122可以包括计算机数据存储或存储器，并且可以存储应用124、应用数据、简档、索引126、偏好以及其他数据。数据储存库122中的应用124可以指代或包括存储与应用相关联的信息的数据结构或数据文件，诸如声明、输入字段、状态、场境信息、用户接口、输入参数或偏好。应用118可以指代激活的、启动的、调用的或执行的应用118，其可以对应于存储在数据储存库122中的应用数据结构124中的关于应用118的信息。应用124可以包括可执行文件、应用包文件、配置文件或促进应用的执行的其他数据。45.数据储存库122可以包括、存储、管理或维护索引126。索引126可以包括将关键字或词项与应用相关联的映射、关联或链接。索引126可以包括具有与候选应用映射的关键字或词项的表。索引126可以包括安装在计算设备128上的应用的列表。索引126可以包括计算设备128或其账户授权或可访问的应用的列表。索引126可以包括用于访问应用的凭证或认证信息。例如，索引可以包括计算设备128可访问的应用的列表，以及用于获得对应用的访问的账户信息。索引126可以将关键字或词项链接到应用或促进识别应用以响应于输入音频信号或语音输入而调用、激活或启动的其他信息。46.接口104、数字助理组件106、nlp组件108、应用管理器组件114、直接动作api或数据处理系统102的其他组件可以每一个包括至少一个处理单元或其他逻辑设备，诸如可编程逻辑阵列引擎或被配置为彼此通信或与其他资源或数据库通信的模块。接口104、数字助理组件106、nlp组件108、应用管理器组件114、直接动作api或数据处理系统102的其他组件可以是单独的组件、单个组件或数据处理系统142的一部分。系统100及其组件(诸如数据处理系统102)可以包括硬件元件，诸如一个或多个处理器、逻辑设备或电路。47.计算设备128可以包括至少一个传感器136、换能器132、音频驱动器138、预处理器130或显示设备134、与至少一个传感器136、换能器132、音频驱动器138、预处理器130或显示设备134对接或以其他方式与其通信。传感器136可以包括例如环境光传感器、接近传感器、温度传感器、加速度计、陀螺仪、运动检测器、gps传感器、位置传感器、麦克风或触摸传感器。换能器132可以包括扬声器或麦克风。音频驱动器138可以向硬件换能器132提供软件接口。音频驱动器可以执行由数据处理系统102提供的音频文件或其他指令，以控制换能器132生成对应的声波或音波。显示设备134可以包括图4中描绘的显示器435的一个或多个组件或功能性。预处理器130可以被配置为检测触发关键字、预定热词、发起关键字或激活关键字。在一些情况下，触发关键字可以包括执行动作的请求。在一些情况下，触发关键字可以包括预定动作关键字以启用或激活计算设备128，并且请求关键字可以跟随触发关键字或热词。预处理器130可以被配置为检测关键字并基于关键字执行动作。预处理器130可以检测唤醒词或其他关键字或热词，并且响应于该检测，调用由计算设备128执行的数据处理系统102的数字助理组件106。在一些情况下，预处理器130可以在将词项发送到远程数据处理系统142以进行进一步处理之前过滤掉一个或多个词项或修改词项。预处理器130可以将由麦克风检测到的模拟音频信号转化为数字音频信号，并且经由网络105向数据处理系统102或远程数据处理系统142传送或提供携带数字音频信号的一个或多个数据包。在一些情况下，预处理器130可以响应于检测到执行这样的传送的指令，向数字助理组件106或远程数据处理系统142提供携带输入音频信号中的一些或全部的数据包。该指令可以包括例如触发关键字或其他关键字或批准以将包括输入音频信号的数据包传输到数据处理系统102或远程数据处理系统142。48.客户端计算设备128可以与终端用户相关联，该终端用户(经由传感器136)将语音查询作为音频输入录入到客户端计算设备128中，并且接收计算机生成的语音形式的音频输出，该音频输出可以从数据处理系统102(或3p内容提供者设备140)提供给客户端计算设备128，从换能器132(例如，扬声器)输出。计算机生成的语音可以包括来自真实人或计算机生成的语言的记录。49.数据处理系统102可以包括被设计、配置、构造或操作以使用例如数据包来接收和传送信息的接口104。接口104可以使用一个或多个协议(诸如网络协议)来接收和传送信息。接口104可以包括硬件接口、软件接口、有线接口或无线接口。接口104可以促进将数据从一种格式转换或格式化为另一种格式。例如，接口104可以包括应用编程接口，该应用编程接口包括用于在诸如软件组件的各种组件之间进行通信的定义。接口104可以促进系统100的一个或多个组件之间——诸如数字助理组件106、应用118和数据储存库122之间——的通信。50.数据处理系统102可以包括安装在客户端计算设备128处的应用、脚本或程序，诸如用于将输入音频信号通信到数据处理系统102的接口104并驱动客户端计算设备的组件以渲染输出音频信号的应用。数据处理系统102可以接收包括或识别音频输入信号的数据包或其他信号。例如，数据处理系统102可以执行或运行nlp组件108以接收或获得音频信号并解析音频信号。例如，nlp组件108可以提供人和计算机之间的交互。nlp组件108可以配置有用于理解自然语言并允许数据处理系统102从人类或自然语言输入得出含义的技术。nlp组件108可以包括或配置有基于机器学习(诸如统计机器学习)的技术。nlp组件108可以利用决策树、统计模型或概率模型来解析输入音频信号。nlp组件108可以执行例如功能，诸如命名实体辨识(例如，给定文本流，确定文本中的哪些项目映射到适当名称，诸如人或地点，以及每个这样的名称的类型，诸如人、位置或组织)、自然语言生成(例如，将来自计算机数据库或语义意图的信息转换为可理解的人类语言)、自然语言理解(例如，将文本转化为更正式的表示，诸如计算机模块可以操纵的一阶逻辑结构)、机器翻译(例如，将文本从一种人类语言自动地翻译为另一种)、形态分割(例如，将词分成单独的词素并识别词素的类别，这基于所考虑的语言的词的形态或结构的复杂性可能是具有挑战性的)、问答(例如，确定人类语言问题的答案，其可以是特定的或开放式的)、语义处理(例如，可以在识别词并编码其含义之后发生的处理，以便将所识别的词与具有相似含义的其他词相关联)。51.nlp组件108通过将输入信号与存储的代表性音频波形集合进行比较(例如，模型110或技术112)并选择最接近的匹配来将音频输入信号转化为辨识的文本。该音频波形集合可以被存储在模型110或数据处理系统102可访问的其他数据库中。代表性波形是在大的用户集合上生成的，然后可以用来自用户的话音样本来增强。在音频信号被转化成所辨识的文本之后，nlp组件108例如经由使用已经跨用户训练的模型110或通过手动规范将文本与数据处理系统102可以服务的动作相关联的词进行匹配。52.音频输入信号可以由客户端计算设备128的传感器136或换能器132(例如，麦克风)检测。经由换能器132、音频驱动器138或其他组件，客户端计算设备128可以将音频输入信号提供给数据处理系统102，其中，它可以(例如，通过接口104)被接收并提供给nlp组件108或存储在数据储存库122中。53.nlp组件108可以获得输入音频信号。根据输入音频信号，nlp组件108可以识别至少一个请求或与该请求相对应的至少一个触发关键字。该请求可以指示输入音频信号的意图或主题。触发关键字可以指示可能要采取的动作的类型。例如，nlp组件108可以解析输入音频信号以识别调用应用的至少一个请求。nlp组件108可以解析输入音频信号以识别至少一个请求，诸如晚上离开家参加晚餐和电影的请求。关键字可以包括指示要采取的动作的至少一个词、短语、根词或部分词或派生词。例如，来自输入音频信号的关键字“go(去)”或“togoto(要去)”可以指示交通的需求。在该示例中，输入音频信号(或所识别的请求)不直接表达交通的意图，然而关键字指示交通是由请求指示的至少一个其他动作的辅助动作。54.nlp组件108可以解析输入音频信号以识别、确定、检索或以其他方式获得请求和关键字。例如，nlp组件108可以将语义处理技术(例如，技术112)应用于输入音频信号以识别关键字或请求。nlp组件108可以将语义处理技术112应用于输入音频信号以识别包括一个或多个触发关键字(诸如第一触发关键字和第二触发关键字)的触发短语。例如，输入音频信号可以包括语句“ineedsomeonetodomylaundryandmydrycleaning(我需要有人为我洗衣服和为我干洗)。”nlp组件108可以将语义处理技术112或其他自然语言处理技术应用于包括句子的数据包，以识别触发短语“domylaundry(为我洗衣服)”和“mydrycleaning(为我干洗)”。nlp组件108还可以识别多个触发关键字，诸如衣服和干洗。例如，nlp组件108可以确定触发短语包括触发关键字和第二触发关键字。55.nlp组件108可以识别与执行对信息的搜索或其他请求相对应的搜索查询或触发短语。nlp组件108可以确定输入音频信号对应于对关于主题、事件、当前事件、新闻事件、字典定义、历史事件、人、地点或事物的信息的请求。例如，nlp组件108可以确定输入音频信号对应于对关于历史事件的信息的搜索查询，诸如“whendidtheamericanrevolutiontakeplace？(美国革命何时发生？)”。nlp组件108可以确定输入音频信号对应于调用、启动或激活应用118的请求。56.nlp组件108可以过滤输入音频信号以识别关键字、搜索查询或触发关键字。例如，携带输入音频信号的数据包可以包括“itwouldbegreatificouldgetsomeonethatcouldhelpmegototheairport(如果我能找到可以帮助我去机场的人就太好了)”，在这种情况下，nlp组件108可以过滤出如下一个或多个词项：“it”、“would”、“be”、“great”、“if”、“i”、“could”、“get”、“someone”、“that”、“could”或“help”。通过过滤掉这些词项，nlp组件108可以更准确和可靠地识别触发关键字，诸如“gototheairport(去机场)”，并确定这是对出租车或乘车共享服务的请求。57.基于处理或解析输入音频信号，nlp组件108可以识别要调用、启动、打开或以其他方式激活的应用118。nlp组件108可以基于解析输入音频信号以识别词项、关键字、触发关键字或短语来识别应用118。nlp组件108可以使用所识别的词项、关键字、触发关键字或短语在索引126中执行查找以识别应用118。在一些情况下，关键字可以包括应用118的标识符，诸如“application_name_a(应用_名称_a)”或“application_name_b(应用_名称_b)”。在一些情况下，关键字可以指示应用118的类型或类别，诸如乘车共享应用、餐馆预订应用、电影票应用、新闻应用、天气应用、导航应用、流媒体音乐应用、流媒体视频应用、餐馆评论应用或其他类型或类别的应用118。58.如果输入音频信号包括与应用相对应的标识符，诸如字母数字标识符，则nlp组件108可以利用字母数字标识符在索引126中执行查找以识别应用118，并且将指示提供给应用管理器组件114以激活。该指示可以包括应用118的唯一标识符、引用、指针、链接或深度链接。如果输入音频信号包括应用118的类型或类别的指示，则nlp组件108可以利用应用118的类型或类别在索引126中执行查找，以识别是否存在安装在计算设备128上的对应的应用118。例如，如果应用的类别或类型是餐馆预订应用，则索引126可以包括与该类别相关联的应用的引用或标识符，诸如“restaurant_booking_app”。如果输入音频信号包括查询或请求，则nlp组件108可以确定查询或请求的类型，然后在索引126中识别被配置为或能够满足查询或请求的应用118。在一些情况下，nlp组件108可以与远程数据处理系统142通信，以响应于输入音频信号来识别和选择应用。59.即使数字助理组件106使用索引126不能识别安装在计算设备128上的可以满足输入查询或请求的应用118，数字助理组件106也可以生成警报或提示。警报或提示可以指示应用未被安装，并且数字助理组件106不能满足请求或查询。在一些情况下，提示可以包括应用118的指示，该应用118被配置为满足查询或请求，但未被安装在计算设备128上，或者不可由计算设备128以其他方式访问。提示可以包括对可以提供应用118以安装在计算设备128上的资源的引用。60.nlp组件108可以使用一个或多个模型110和技术110来处理输入音频信号。模型110可以指代或包括基于数据训练的机器学习模型110。模型110可以包括各种权重或配置，以便于执行自然语言处理或理解。模型110可以包括例如某些权重、校准或配置，以便于执行自然语言理解。可以校准模型110以更可能检测某种类型的词项。例如，如果nlp组件108检测到输入请求是要激活应用，则nlp组件108可以使用具有安装在计算设备128上的所有应用的列表(例如，索引126)的模型110。nlp组件108可以确定来自应用列表的哪个应用对应于输入请求。通过使用具有安装在计算设备128上的有限应用集合的模型110，与可以由在线应用市场提供的所有应用的集合相比，nlp组件108可以提高准确地检测所请求的应用118的可能性。此外，与所有应用的集合相比，通过使用具有安装在计算设备上的有限的应用118的集合的模型110，nlp组件108可以减少计算资源利用(例如，使用较小的模型110可以占用较少的存储器并使用较少的处理)，同时提高识别应用的准确性和可靠性。61.nlp组件108可以使用一种或多种技术112来解析或处理输入音频信号。技术112可以包括基于规则的技术112或统计技术112。技术112可以利用机器学习或深度学习。示例性技术112可以包括命名实体辨识、情感分析、文本摘要、方面挖掘或主题挖掘。技术112可以包括或基于文本嵌入(例如，字符串的实值向量表示)、机器翻译(例如，语言分析和语言生成)或对话和会话(例如，人工智能使用的模型)。技术112可以包括确定或利用语法技术(例如，基于语法的句子中的词的排列)，诸如词形化、形态分割、词分割、词性标注、解析、句子分解或词干提取。技术112可以包括确定或利用语义技术，诸如命名实体辨识(例如，确定可以被识别并分类到当前组中的文本的部分，诸如应用118的名称、人或地点)、词义消歧或自然语言生成。因此，nlp组件108可以接收由客户端计算设备128的麦克风(传感器136)检测到的第一输入音频信号，并且经由自然语言处理技术112处理第一输入音频信号以识别应用的指示。62.计算设备128(或数字助理组件106)可以包括被设计、构造和操作以激活应用118的应用管理器组件114。应用管理器组件114可以接收由nlp组件108识别的应用118的指示。应用管理器组件114可以接收应用118的字母数字标识符或其他引用或指示。应用管理器组件114可以在索引126中执行查找，以验证应用118对于在计算设备128上的激活是可用的或兼容的。应用管理器组件114可以激活应用118。激活应用118可以指代或包括将应用118带到计算设备128的前台。激活应用118可以指代执行应用。激活应用118可以指代将应用从后台进程带到前台进程。应用管理器组件114可以生成命令、脚本、进程或其他指令以调用、启动或以其他方式激活应用118。63.应用管理器组件114可以在客户端计算设备128的索引126中执行查找，以确定应用118被安装在客户端计算设备128上。应用管理器组件114可以响应于确定应用118被安装在客户端计算设备128上而激活应用118。64.启动应用118可以使得应用向数字助理组件106声明信息。应用118可以声明应用118被配置为执行的功能。声明应用118被配置为执行的功能可以包括提供参数类型的指示或应用118可以作为输入接收的参数类型，以便执行功能或任务。应用118可以声明应用118的状态，诸如当前状态。应用118可以声明应用118的当前场境。应用118可以声明应用118可以执行的功能的类型、用于执行功能的输入的类型、或者促进应用118执行任务或执行动作的其他信息或数据。65.例如，应用118可以包括在餐馆进行预留的应用。第一输入音频信号可以包括进行预留的查询或请求，诸如“makeareservationusingrestaurant_booking_app_1(使用餐馆_预定_app_1进行预留)”。nlp组件108使用nlp技术112和模型110(例如，配置有安装在计算设备128上的应用的模型110)可以识别应用118，并且应用管理器组件114可以激活应用118(例如，restaurant_booking_app_1(餐馆_预定_app_1)。66.应用118可以使用协议150声明信息。协议150可以包括双向通信协议。协议150可以包括例如传输协议、tcp/ip协议、进程间通信协议、消息传递协议或任何其他通信技术。协议150可以包括进程间通信协议，应用118可以通过该协议声明由应用118支持的功能或意图、用于意图或功能的参数类型和支持的参数值。例如，功能“book_a_table”可以具有tabletype参数和bookingtime参数。tabletype参数可以与值windowside或lakeside相关联。bookingtime参数可以与类型“time”相关联。数字助理组件106可以经由协议150接收该信息，以便修改由nlp组件108完成的处理，以改善nlp理解并确定用户查询的履行。该数字助理组件106可以使用相同的协议150(例如，“设置tabletype＝lakeside”)将履行发送回应用118。67.应用118可以使用api(例如直接动作api或软件开发工具包(“sdk”))来声明信息。应用118可以被配置有api或sdk以经由接口104与数字助理组件106对接。应用可以使用接口104来与数字助理组件106的一个或多个组件通信，并且数字助理组件106可以使用接口104来与应用118通信。68.应用118可以配置有声明120。应用118的开发者可以提供声明120。应用118可以被构造、设计和操作以确定应用118的当前状态。应用118的状态可以指代应用118当前能够接收什么输入。应用118的状态可以指代应用118能够执行什么动作。应用118的状态可以指代应用118能够执行什么功能。因此，应用118的状态可以指代、包括或基于应用118可以接收的输入、应用118可以执行的功能或应用118被配置为执行的动作。69.示例性声明可以包括功能、动作、输入值的格式、输入值的类型、文本的类别或类型、名称、语义信息、数值或促进检测语音输入中的输入参数的其他信息。应用118可以声明应用118正期望接收查询、请求、指令或命令。应用118可以声明应用118正期望接收数值或词、短语、专有名词、地理位置、邮政编码、州、城市或城镇。声明120可以包括兴趣点。声明120可以包括货币。因此，应用118可以被配置为提供与应用118能够执行什么功能相关的声明120，或者应用118的当前场境或状态，其可以指示应用118当前能够接收和处理什么输入参数以执行功能或动作。示例性功能可以包括进行在餐馆处的预留、在酒店预订、预订航班、租赁汽车、购买商品或服务、预订外卖食物、预订乘坐共享或预订出租车。70.例如，应用118可以被设计、构造和操作以进行餐馆处的预留。在被启动、调用或以其他方式激活时，应用118可以进入状态。应用118可以进入默认或主状态。在该默认、主或初始状态下，应用118可以包括输入文本框。输入文本框可以是被配置为接收查询的输入搜索框。查询可以包括对餐馆类型、位置或餐馆名称的查询。因此，应用118的当前状态可以指示应用118能够在应用118的用户接口的搜索字段中接收输入查询。71.应用118可以经由协议150向nlp组件108声明应用118可以执行的功能包括进行在餐馆处的预留。在一些情况下，应用118可以声明应用118可以接收什么类型的输入以执行功能，诸如与搜索餐馆相关的输入查询。应用118可以进一步声明输入的类型或格式，诸如关键字、文本、名称、餐馆的类别或类型、或餐馆的名称。通过向nlp108声明应用118可以执行进行在餐馆处的预留的功能，或者正期望接收餐馆的名称，nlp108可以修改nlp108的模型110或技术112，以提高检测语音输入中的输入信息的可能性、准确性和可靠性，该输入信息促进应用118执行进行在餐馆处的预留的功能。72.nlp组件108可以响应于由应用声明的功能来修改自然语言处理技术112或模型110。nlp组件108可以对nlp处理技术112或模型110执行动态实时修改或更新。nlp组件108可以执行nlp技术112或模型110的基于声明的实时更新。nlp组件108可以使用声明来基于第三方应用的状态或场境执行实时自然语言理解。实时可以指响应于应用的激活而更新nlp处理。实时可以指在激活应用之后并且在接收第二音频输入信号之前更新nlp处理。实时可以指例如在激活应用118的1秒、激活应用118的2秒、激活应用118的3秒、激活应用118的5秒、激活应用118的10秒、激活应用118的15秒或激活应用118的30秒内更新nlp处理技术。73.在一些情况下，可以基于功能来更新模型110，并且nlp技术112可以使用更新的模型110。nlp组件108可以将更新的模型110提供给nlp技术112。nlp组件112可以基于声明来选择模型110或技术112的类型。nlp组件112可以选择模型110或技术，其被调整或校准以在后续输入音频信号中检测用于由应用118声明的功能的输入参数。例如，如果声明指示应用118执行的功能使用包括地理区域的输入，则nlp组件112可以选择被校准、优化或调整以检测地理区域(诸如州、城市、城镇、广场或其他地理区域)的模型110或技术112。例如，nlp组件108可以为所声明的功能选择字典。在另一示例中，可以调整模型110以更重地加权对应于声明的词项，而不是数值。在另一示例中，可以优化技术112以检测地理区域，而不是数值或语义处理。因此，数字助理组件106可以在激活应用118之后并且基于由应用118声明的功能来修改自然语言处理技术112，以相对于未基于该功能修改的自然语言处理技术112增加检测到一个或多个参数的可能性(例如，相对于使用默认技术112或默认模型110来检测输入参数，使用更新的技术112或使用更新的模型110的技术112可以提供对检测功能的输入参数的准确性和可靠性或可能性的改进)。74.在另一示例中，如果所声明的功能包括进行在餐馆的预留，则nlp组件108可以选择被优化以检测名词(诸如餐馆的名称)的模型110或技术。因此，基于由应用声明的功能，nlp组件108可以选择被校准、调整、优化或以其他方式构造的模型110或技术112，以更可靠地检测用于执行或实行功能的输入参数，诸如专有名词、数字、词、短语、问题、数值、货币量或地理位置。75.数字助理组件106(例如，经由nlp组件108)可以接收由计算设备128的麦克风(例如，传感器136)检测到的第二输入音频信号。数字助理组件106可以经由所修改的自然语言处理技术112或模型110来处理第二输入音频信号，以检测与由应用118声明的功能相对应的一个或多个参数。nlp组件108可以使用由应用118声明的状态信息(例如，指示应用118可以在当前状态下执行的功能的声明)来执行第二输入音频信号的实时自然语言处理以识别一个或多个参数。执行实时自然语言处理可以指代使用由应用118声明的当前场境信息以修改或更新nlp技术112或模型110来处理输入信号以检测输入参数，来处理第二输入音频信号。76.数字助理组件106可以基于一个或多个参数与由应用声明的功能之间的比较来确定一个或多个参数对于输入到应用118的输入字段中是兼容的。数字助理组件106可以确定检测到的输入参数与声明的功能兼容。数字助理组件106可以使用策略、匹配技术或其他技术来确定兼容性。数字助理组件106可以将输入参数的类型与功能被配置为接收的输入参数的类型进行比较。类型可以包括例如数值、地理位置、专有名词、问题、词或短语。类型可以包括或基于语义，诸如输入参数的含义。类型可以包括或基于语法，诸如输入参数的格式或语法。例如，输入参数可以是地理位置。数字助理组件106可以确定输入参数是地理位置，诸如地址，然后将类型“地址”与被配置用于所声明的功能的输入值的类型进行比较以确定匹配或兼容性。77.在另一示例中，数字助理组件106可以基于输入参数的数量、可能的输入值的范围或多个输入参数之间的一致性来确定兼容性。78.在一些情况下，数字助理组件106可以使用模板来确定兼容性。数字助理组件106可以识别与所声明的功能相关联的模板。模板可以指示输入参数的类型、输入参数的数量、与输入参数相关联的语义和语法、或与预期输入参数相关联的任何其他信息。数字助理组件106使用模板可以确定检测到的输入参数是否兼容。例如，如果模板指示所预期的输入参数是地理位置或地址，但是检测到的输入参数是产品类型，则数字助理组件106可以确定输入参数与声明的功能之间的不兼容性。响应于确定不兼容，数字助理组件106可以确定不创建具有不兼容的检测到的输入参数的动作数据结构。数字助理组件106可以确定不将不兼容参数输入到应用118中，因为它可能导致应用118的故障或错误或者不期望的结果。因此，通过检测到不兼容性并且不输入错误的输入参数，数字助理组件106可以减少或防止错误和浪费的计算资源利用。在一些情况下，响应于检测到错误，数字助理组件106可以生成请求兼容输入参数的提示或警报。79.nlp组件108可以经由协议150接收由应用118声明的状态信息。nlp组件108可以经由所修改的自然语言处理技术112(或模型110)将第二输入音频信号映射到状态信息以识别请求。例如，状态信息可以指示应用118处于就绪状态并且打开以接收执行一种类型的动作的请求。动作类型的范围可以从执行对餐馆的搜索、被添加到餐馆的等待列表、在餐馆进行预留、或者留下对餐馆的评论。应用可以向nlp组件108声明可用动作的类型。然后，nlp组件108可以解析第二输入音频信号以确定对留下对餐馆的评论的请求(例如，“leaverestaurant_a5stars(留下5星给餐馆_a)”)。nlp组件108使用技术112或模型110(其被调整为基于指示留下评论是兼容请求之一的声明的状态信息来更可靠且准确地检测到这是留下评论的请求)可以检测到这是留下对该餐馆的评论的请求。nlp组件108可以检测该请求，然后提供检测到的输入参数，包括功能类型(例如，评论)、被评论的餐馆的名称(例如，restaurant_a(餐馆_a))、以及评论或评级是什么(例如，5星)。直接动作api116可以生成包括这三个输入参数的动作数据结构。因此，数字助理组件106可以通过使用nlp组件108来防止或避免需要多个对话或屏幕以便执行该动作，nlp组件108可以基于激活的应用118的声明的场境或状态来实时地修改nlp技术112或模型110。80.数字助理组件106可以包括直接动作api116，其被设计和构造为响应于兼容性的确定并且基于一个或多个参数来生成用于应用118的动作数据结构。直接动作api116可以经由协议150将动作数据结构输入到应用118中，以使得应用118执行动作数据结构并更新应用118的用户接口元件。计算设备128的处理器可以调用直接动作api116来执行向应用118生成数据结构的脚本，以请求或预订服务或产品，诸如来自汽车共享服务的汽车或进行在餐馆处的预留。直接动作api116可以从nlp组件108以及数据储存库122获得数据，以及在终端用户同意的情况下从客户端计算设备128接收的数据，以确定位置、时间、用户账户、物流或其他信息，以允许在与3p应用服务器148通信中应用118执行动作或操作，诸如进行在餐馆处的预留或从汽车共享服务预留汽车。使用直接动作api116，数字助理组件106还可以与3p应用服务器148通信以通过在该示例中进行预留或进行汽车共享接取预留来完成转化。81.直接动作api116可以执行指定的动作以向应用118提供输入，从而使得应用执行动作以执行由应用118声明的功能。取决于在其输入中指定的动作，直接动作api116可以执行识别实现功能或用户请求所需的参数的代码或对话脚本。这样的代码可以例如在数据储存库122中查找附加信息，诸如家庭自动化服务的名称，或者它可以提供音频输出以在客户端计算设备128处渲染，以向终端用户询问诸如所请求的出租车的预期目的地的问题。直接动作api116可以确定必要的参数，并且可以将信息打包成动作数据结构，然后可以将该动作数据结构发送到应用118以供执行。82.直接动作api116可以从nlp组件108或数字助理组件106的其他组件接收指令或命令，以生成或构造动作数据结构。直接动作api116可以确定动作的类型，以便选择存储在数据储存库122中的模板。动作的类型可以包括例如服务、产品、预留或门票。动作的类型可以进一步包括服务或产品的类型。例如，服务类型可以包括汽车共享服务、食品递送服务、洗衣服务、女仆服务、修理服务或家庭服务。产品的类型可以包括例如衣服、鞋子、玩具、电子产品、计算机、书籍或珠宝。预留的类型可以包括例如晚餐预留或美发沙龙预约。门票的类型可以包括例如电影票、体育场馆门票或飞机票。在一些情况下，可以基于价格、位置、运输类型、可用性或其他属性来对服务、产品、预留或门票的类型进行分类。83.在识别请求的类型时，直接动作api116可以从存储在数据储存库中(例如，存储在应用124数据结构或数据库中)的模板储存库访问对应的模板。模板可以包括结构化数据集合中的字段，所述字段可以由直接动作api116填充以使3p应用服务器148的所请求的操作更进一步(诸如，发送出租车以在接取位置处接取终端用户并将终端用户运送到目的地位置的操作)。直接动作api116可以在(例如，存储在应用124数据结构或数据库中的)模板储存库中执行查找，以选择与所声明的功能的一个或多个特征匹配的模板。例如，如果声明的功能对应于请求汽车或乘坐到目的地，则数据处理系统102可以选择汽车共享服务模板。汽车共享服务模板可以包括以下字段中的一个或多个：设备标识符、接取位置、目的地位置、乘客数量或服务类型。直接动作api116可以用值填充字段。为了用值填充字段，直接动作api116可以从计算设备128的一个或多个传感器136或计算设备128的用户接口查验、轮询或以其他方式获得信息。例如，直接动作api116可以使用诸如gps传感器的位置传感器来检测源位置。直接动作api116可以通过向计算设备128的用户终端提交调查、提示或查询来获得进一步的信息。直接动作api可以经由数据处理系统102的接口104和计算设备128的用户接口(例如，音频接口、基于语音的用户接口、显示器或触摸屏)提交调查、提示或查询。因此，直接动作api116可以基于触发关键字或请求来选择用于动作数据结构的模板，用由一个或多个传感器136检测到的或经由用户接口获得的信息填充模板中的一个或多个字段，并且生成、创建或以其他方式构造动作数据结构以促进3p应用服务器148执行操作。84.数据处理系统102可以基于各种因素从存储在数据储存库122中(例如，存储在应用124数据结构或数据库中的)的模板数据结构中选择模板，所述各种因素包括例如来自应用的声明、关键字、请求、3p应用服务器148、应用类型、应用118所属的类别(例如，出租车服务、洗衣服务、鲜花服务、预留或食物递送)、位置或其他信息中的一个或多个。85.为了基于声明选择模板，数据处理系统102(例如，经由直接动作api116)可以使用来自应用118的声明或输入参数对数据储存库中的(例如，存储在应用124数据结构或数据库中的)模板数据库执行查找或其他查询操作，以识别映射或以其他方式对应于声明或输入参数的模板数据结构。例如，模板数据库中的每个模板可以与一个或多个声明相关联，以指示模板被配置为响应于应用118可以处理以执行动作的声明而生成动作数据结构。在一些情况下，数据处理系统102可以基于索引126或应用124中的信息来识别应用118的类型。86.为了构造或生成动作数据结构，数据处理系统102可以识别所选择的模板中的一个或多个字段，以使用更新的或修改的nlp技术112或模型110，用由nlp组件108在输入音频信号中检测到的值填充。字段可以用数值、字符串、unicode值、布尔逻辑、二进制值、十六进制值、标识符、位置坐标、地理区域、时间戳或其他值填充。字段或数据结构本身可以被加密或掩蔽以维护数据安全性。87.在确定模板中的字段时，数据处理系统102可以识别字段的值以填充模板的字段来创建动作数据结构。数据处理系统102可以通过使用更新的或修改的nlp技术112或模型110解析或处理输入音频信号来获得、检索、确定或以其他方式识别字段的值。在一些情况下，数据处理系统102可以确定来自其他源(诸如数据储存库122或传感器136)的值。例如，数据处理系统102可以通过查询或轮询客户端计算设备128的一个或多个可用传感器、向客户端计算设备128的终端用户提示信息、或者使用http协议访问在线的基于web的资源来获取或获得信息。例如，数据处理系统102可以确定它不具有客户端计算设备128的当前位置，该当前位置可以是模板的所需字段。数据处理系统102可以向客户端计算设备128查询位置信息。数据处理系统102可以请求客户端计算设备128使用一个或多个位置传感器136(诸如全球定位系统传感器、wifi三角测量、蜂窝塔三角测量、蓝牙信标、ip地址或其他位置感测技术)来提供位置信息。88.直接动作api116可以使用协议150来将动作数据结构输入到应用118中。直接动作api116可以经由应用118的用户接口或应用118的其他接口来输入动作数据结构。直接动作api可以经由接口104输入动作数据结构。直接动作api可以经由应用118的无头接口输入动作数据结构。应用118在接收到动作数据结构时可以执行动作数据结构以执行动作或功能。89.数字助理组件106可以从应用118接收附加声明。在将动作数据结构输入到应用118中之后，应用118的当前状态可以基于处理或执行动作数据结构而改变。应用118可以响应于执行动作数据结构并改变应用的状态而提供更新的或新的声明。新声明或更新声明可以指示在接收到动作数据结构、执行动作数据结构或部分执行动作数据结构之后的应用的当前状态。更新声明可以指示对用户接口的改变，诸如用户接口中的附加输入字段。nlp组件108可以响应于对状态的改变的指示来修改(例如，重新修改或再次修改)先前响应于由应用声明的功能而修改的自然语言处理技术112或模型110。修改的类型可以类似于第一修改，但是适于新声明(例如，声明的新功能或用于执行新功能的输入，或者请求附加输入以促进原始功能或动作的执行)。数字助理组件106可以在重新修改nlp技术112或模型110之后接收第三输入音频信号。nlp组件108可以经由响应于状态改变的指示而修改的自然语言处理技术112(例如，修改的技术112或使用修改的或不同的模型110的相同技术112)来处理第三输入音频信号以识别第二一个或多个参数。数据处理系统102可以基于第二一个或多个参数来生成第二动作数据结构。90.在一些情况下，应用118可以调用数字助理组件106。例如，应用118可以提供对应用118的状态的改变的指示。应用118可以经由协议150提供指示。应用118可以提供指示应用118的状态的改变的声明，或者对输入的请求或对动作数据结构的请求。声明可以指示应用118处于就绪状态或者可用于执行动作数据结构。该指示或声明可以调用数字助理组件106。例如，该指示可以唤醒数字助理组件106以使数字助理组件检测或处理输入音频信号。对数字助理组件106的调用可以指代或包括绕过预处理器130检测到的热词或唤醒词。调用可以使得数字助理组件106生成提示或输出，诸如请求来自计算设备128的用户的输入的音频输出。91.该调用可以使得数字助理组件106解析应用118的当前用户接口，以确定应用的场境或应用的场境信息或应用的当前状态。除了基于来自应用118的声明来确定应用的状态或场境之外，数字助理组件106(例如，经由应用管理器组件114)还可以解析应用118的用户接口(例如，图形用户界面)以确定应用的状态。确定应用118的状态可以指代或包括确定应用118能够接收的输入的类型、可用输入的改变、或应用118能够执行的动作或功能的类型。应用管理器组件114可以响应于改变的指示而解析应用118的当前用户接口，以识别经由应用118的用户接口元件提供的一个或多个输入字段。数字助理组件106可以在由应用118通过经由协议150发送的声明调用之后接收输入音频信号(例如，第三输入音频信号)。数字助理组件106可以使用基于所声明的一个或多个输入字段的自然语言处理技术来处理第三输入音频信号，以识别第三输入音频信号的第二一个或多个参数以用于响应于应用118的状态的改变而输入到应用118中。92.数字助理组件106可以接收停用应用的指示。停用可以是指应用118退出、被关闭、被禁用、被关上、被移除或卸载、进入待机状态、成为后台进程(例如，不再在前台中活动使用)、或者不同的应用进入前台或成为前台进程。应用118的停用可以指示应用118不是当前正在使用的主应用，或者不再是在计算设备128上正在使用或执行的主应用。93.数字助理组件106可以将所修改的自然语言处理技术返回到默认自然语言处理技术。数字助理组件可以响应于应用118的停用，将所修改的nlp技术112或模型110返回到默认或初始技术112或模型110。数字助理组件106可以从自然语言处理技术112(或模型110)中移除基于应用118向数字助理组件106声明的功能来对技术112或模型110进行的修改。数字助理组件106可以将nlp恢复到先前状态或默认状态。数字助理组件106可以删除所进行的修改或调整。数字助理组件106可以停用所修改的技术112或模型110，但是将它们存储在数据储存库122中以供将来使用。数字助理组件106可以将技术112或模型110重置为初始状态或默认状态，以促进对由于应用118已经被停用而不再向应用118提供输入的后续输入音频信号的nlp。通过重置nlp，数字助理组件106可以通过不使用针对由应用118声明的特定功能调整或校准的技术112或模型110来防止或减少错误或不准确的nlp。nlp可以恢复到使用被调整用于通常检测查询或输入的技术112或模型110，而不是被调整以检测用于应用118的功能的特定查询或输入的技术112或模型110。94.数字助理组件106可以向远程数据处理系统142传送对内容的请求。数字助理组件106可以基于或响应于动作数据结构、由应用118声明的功能、声明120、所修改的nlp技术、在第二输入音频信号中使用所修改的nlp技术检测的一个或多个参数、或所更新的应用的用户接口元件来传送对内容的请求。例如，请求可以包括关于由应用118声明的功能、声明120、所修改的nlp技术、在第二输入音频信号中使用所修改的nlp技术检测到的一个或多个参数、或所更新的应用的用户接口元件的信息。该请求可以包括或向远程数据处理系统142提供功能类型或功能名称。该请求可以包括声明120或向远程数据处理系统142提供声明120。该请求可以包括或向远程数据处理系统142提供如何修改nlp的指示，诸如应用于nlp技术的权重或正在使用的nlp技术的类型。该请求可以包括或向远程数据处理系统142提供关于使用所修改的nlp处理技术在第二输入音频信号中检测到的参数或值的信息。该请求可以包括或向远程数据处理系统142提供关于应用的用户接口元件的信息，诸如内容项槽位(例如，内容项将经由视觉显示器呈现的内容项槽位的大小或位置，或者槽位的持续时间，诸如音频或视频内容项的持续时间)。因此，基于信息生成请求可以是指或包括利用该信息生成请求。在一些情况下，基于所更新的应用的用户接口元件生成请求可以包括响应于识别应用的用户接口元件中的可用内容槽而生成请求。95.在一些情况下，应用118可以生成对内容的请求并且将对内容的请求直接传送到远程数据处理系统142。应用118可以响应于动作数据结构的输入而生成对内容的请求。应用118可以生成对内容的请求并将该请求传送到数字助理组件106，以将该请求传送、转发或传达到远程数据处理系统142。96.远程数据处理系统142的内容选择器组件146可以基于请求或响应于请求来选择内容项(例如，数字组成部分对象)。内容选择器组件146可以基于或响应于动作数据结构、由应用118声明的功能、声明120、修改的nlp技术或所更新的应用的用户接口元件来选择内容项。内容选择器组件146可以将与动作数据结构、由应用118声明的功能、声明120、所修改的nlp技术、使用所修改的nlp技术在输入音频信号中检测到的参数或值或所更新的应用的用户接口元件相关联的信息输入到实时内容选择过程中。内容选择器组件146可以选择与动作数据结构、应用、由应用118声明的功能、声明120、所修改的nlp技术、使用所修改的nlp技术在输入音频信号中检测到的参数或值、使用所修改的nlp技术在输入音频信号中检测到的参数或值、或所更新的应用的用户接口元件相关或以其他方式匹配信息的内容项。例如，如果应用是销售鞋子的电子商务应用，则内容选择器组件146可以选择一种类型的运动鞋的内容项。在另一示例中，如果使用所修改的输入音频信号检测到的第二输入音频信号包括餐馆类型或餐馆中的餐桌类型的参数或值，则远程数据处理系统142可以选择与餐馆相关的内容项(例如，餐馆的优惠券)。97.远程数据处理系统142可以将所选择的内容项提供给数字助理组件106以呈现。远程数据处理系统142可以将所选择的内容项提供给应用118以呈现。远程数据处理系统142可以将所选择的内容项提供给数字助理组件106以提供给应用118以呈现。内容项可以经由应用118的用户接口呈现，诸如在视觉内容槽或音频输出中呈现。98.数字助理组件106可以与应用118分开或独立地呈现内容项。例如，数字助理组件106可以调用单独的用户接口，诸如弹出窗口或横幅内容以经由计算设备128的显示设备134显示。在一些情况下，数字助理组件106可以将内容项提供为音频输出。可以在应用118的音频输出之前、期间或之后呈现音频输出。在应用118没有提供音频输出的情况下，数字助理组件106可以经由独立于应用所使用的接口的音频输出来提供内容项。因此，数据处理系统102可以经由数字助理组件106的用户接口(例如，音频接口)或应用118的用户接口(例如，图形用户界面)呈现内容项。99.图2是系统100与应用动态对接的操作200的图示。该系统可以包括图1中描绘的系统100或图4中描绘的系统400的一个或多个组件。在操作200中，在动作202处，(例如，由计算设备128执行的)预处理器130可以接收或检测第一语音查询。第一语音查询可以包括输入音频信号。预处理器130可以检测触发关键字、热词、唤醒词、警报或其他指示以调用数字助理组件106。响应于检测到唤醒词，预处理器130可以在动作204处调用数字助理组件106。100.在动作206处，数字助理组件106的nlp组件108可以解析第一语音查询以识别应用。nlp组件108可以使用一种或多种nlp技术或模型来识别应用。nlp组件108可以在动作208处向应用管理器组件114提供应用的指示。应用管理器组件114可以确定应用118被安装在计算设备128上或者以其他方式可由计算设备128访问。应用管理器114可以在动作210处启动或激活应用118。101.在动作212处，应用118可以识别应用118的状态。例如，应用118可以识别当前用户接口、图形用户界面、或应用118可以执行的功能、或用户接口的输入字段。应用118可以在动作214处经由协议150向数字助理组件106提供应用118的状态的声明。102.在动作216处，nlp组件108可以执行nlp的基于声明的实时更新。nlp的基于声明的实时更新可以是指更新、修改或以其他方式调整或校准nlp技术112或模型110，以提高准确性和可靠性，nlp组件108可以按照所述准确性和可靠性检测后续输入音频信号中与应用118声明的功能兼容的输入参数。103.在动作218处，数字助理组件106可以接收第二语音查询218。预处理器130可以接收第二语音查询并将第二语音查询提供给数字助理组件106。在一些情况下，先前已经由预处理器130调用的数字助理组件106可以保持在活动状态并且在动作220处直接接收和解析第二语音查询。在动作220处，nlp组件108可以检测用于激活或启动的应用118的参数。在动作222处，数字助理组件106可以将检测到的参数提供给直接动作api116。在动作224处，直接动作api116可以使用模板或其他技术来生成具有输入参数的动作数据结构。104.在动作226处，直接动作api116可以提供动作数据结构以用于输入到应用118中。在动作228处，应用118可以执行动作数据结构。应用118可以执行动作或以其他方式处理所接收的动作数据结构以改变或更新应用的状态。动作数据结构可以引起应用118的状态的改变。在动作230处，应用118可以更新状态，然后声明更新状态。应用118可以重新声明应用的状态，以便向数字助理组件106提供当前状态信息或场境。在动作232处，应用可以经由协议提供与更新的状态相对应的声明。在动作234处，nlp组件108可以从动作232接收声明，并且执行nlp技术112或模型110的基于声明的实时更新。105.应用118可以在动作236处终止。应用118可以在动作236处停用或进入待机状态。用户可以在动作236处关闭或最小化或隐藏应用118。应用118(或应用管理器组件114)可以在动作238处提供停用或终止的指示。应用管理器组件114可以检测到应用118已经被停用。在动作240处，nlp组件108可以将nlp技术112或模型110重置为默认状态，以便不使用针对应用118的声明功能修改的nlp来处理在应用118终止之后接收到的输入音频信号。106.图3是用于与应用动态对接的示例性方法的图示。方法300可以由系统100或系统400的一个或多个组件、系统或元件(包括例如计算设备、数据处理系统、数字助理组件、nlp组件、直接动作api或应用管理器组件)执行。方法300可以包括在302处接收输入音频信号。可以经由数据处理系统的接口接收输入音频信号。输入音频信号可以由客户端计算设备的麦克风检测。输入音频信号可以包括来自计算设备的用户的语音查询、指令或命令。107.在动作304处，数据处理系统可以使用nlp来处理输入音频信号以识别应用。数据处理系统可以识别输入音频信号中的基于应用的词项、关键字或其他信息。在判定框308处，数据处理系统可以确定应用是否被安装在计算设备上或者以其他方式可由计算设备访问。数据处理系统可以确定计算设备(或其账户)是否被授权访问或使用应用。如果在判定框308处，数据处理系统确定应用未被授权，则数据处理系统可以进行到动作310以提供警报。警报可以包括下载和安装应用的指示、应用不可用的指示或做出另一请求的指示。108.如果在判定框308处，数据处理系统确定应用被安装，则数据处理系统可以进行到动作306以激活应用。数据处理系统可以启动、调用或以其他方式将应用带到前台。在一些情况下，数据处理系统可以在无头状态下执行应用，在无头状态下，应用可以不呈现用于在计算设备的显示设备上显示的图形用户界面元件。例如，数据处理系统可以以仅语音模式执行应用或者用于经由音频输入和音频输出进行对接。在一些情况下，数据处理系统可以以混合模式激活应用，在所述混合模式激活应用中应用可以经由图形用户界面提供输出，同时经由数字助理组件经由基于语音的接口接收输入。在动作306处激活应用可以使得应用声明应用的当前状态。109.在动作312处，由数据处理系统执行的数字助理组件可以从激活的应用接收声明并修改nlp。数字助理组件可以执行nlp技术或模型的基于声明的实时更新。数字助理组件可以响应于从应用接收到的声明来更新nlp。110.在动作314处，数据处理系统可以接收第二输入音频信号。数字助理组件可以从计算设备的用户接收第二输入音频信号，诸如语音输入。第二输入音频信号可以是第一输入音频信号的延续。在动作316处，数据处理系统可以使用更新的nlp来处理第二输入音频信号，以检测与应用兼容的输入参数(例如，应用的当前状态或应用的功能的输入字段)。数字助理组件可以基于一个或多个参数与由应用声明的功能之间的比较来确定一个或多个参数对于到由客户端计算设备上的数字助理激活的应用的输入字段中的输入是兼容的。111.在动作318处，数字助理组件可以基于检测到的输入参数或请求来生成动作数据结构。数字助理组件可以响应于确定输入参数与应用的功能或状态兼容而生成动作数据结构。数字助理组件可以提供用于输入到应用中的动作数据结构。应用可以执行动作数据结构。112.在动作320处，数字助理组件可以基于响应于动作数据结构的执行(或部分执行)的应用的新状态来接收更新的声明。数字助理组件可以基于新声明来更新nlp。113.在判定框322处，数据处理系统可以确定是否选择3p内容。3p内容可以是指数字组成部分对象，诸如内容项、图像、视频内容项或音频内容项。数字组成部分对象可以是指或包括广告。数字助理组件可以基于策略、偏好或配置来确定是否选择3p内容。例如，应用可以经由声明提供内容槽在应用中可用并且被配置用于3p内容项的指示。声明可以包括内容槽的类型(例如，音频内容槽、文本内容槽、图像内容槽、视频内容槽、弹出窗口内容槽或横幅内容槽)。在一些情况下，计算设备可以包括关于是否允许提供3p内容的简档或偏好。在一些情况下，数字助理组件可以基于功能类型或应用的当前状态来确定是否选择3p内容。例如，如果应用功能涉及导航，则数字助理组件可以确定不选择内容。如果该功能与餐馆的预留有关，则数字助理组件可以确定选择3p内容。114.如果数字助理组件在判定框322处确定选择3p内容，则数字助理可以进行到动作324以选择并提供3p内容。数字助理组件可以向具有内容选择器组件的远程数据处理系统传送对内容的请求。内容选择器组件可以接收请求以及促进实时内容选择过程的信息。内容选择器组件可以将所选择的内容项提供给数字助理组件。数字助理组件可以接收内容项并呈现内容项(例如，播放音频内容项)，或者将内容项提供给应用118以经由应用(例如，经由应用中的音频或视觉内容槽)呈现。115.数字助理可在判定框326处(例如，在动作324之后或者如果判定框322导致否定，或者独立于动作324或判定框322)确定是否将nlp重置为默认状态。数字助理可以基于应用的状态(诸如应用是活动的、停用的、终止的、待机的还是未安装的)来确定是否重置nlp。如果数字助理确定不重置nlp，则数字助理组件可以进行到动作328以维持nlp。然而，如果在判定框326处数字助理组件确定重置nlp，则数字助理组件可以进行到动作330以撤销对nlp的更新来将nlp重置为默认或初始状态(例如，在动作312的基于声明的实时更新之前)。116.因此，该技术解决方案可以改进nlp处理，以便检测在基于语音的计算环境中接收的请求中的参数的值，并且提供检测到的值以输入到应用中。数字助理组件可以从应用接收声明以识别参数和参数的值的类型，然后使用检测到的类型来对语音输入执行nlp处理。例如，参数或值的类型可以是“时间”、“位置”或应用定义的参数类型，诸如具有相关联的应用定义的值(诸如“booth(展台)”、“roundtable(圆桌)”和“windowview(窗口视图)”)的tabletype。在另一示例中，参数类型可以是餐馆名称，其可以促进数字助理组件识别语音输入中的餐馆名称，而不是人或地理区域的名称。117.图4是示例性计算机系统400的框图。计算机系统或者计算设备400可以包括或者被用来实现系统100或者其组件，诸如数据处理系统102。计算系统400包括总线405或者用于传送信息的其它通信组件以及耦合至总线405以用于处理信息的处理器410或者处理电路。计算系统400还可以包括耦合至总线的用于处理信息的一个或多个处理器410或者处理电路。计算系统400还包括耦合至总线405的用于存储信息和待由处理器410执行的指令的主存储器415(诸如，随机存取存储器(ram)或者其它动态存储设备)。该主存储器415可以是或者包括数据储存库145。主存储器415还可以用于存储位置信息、临时变量、或者在处理器410执行指令期间的其它中间信息。计算系统400可以进一步包括耦合至总线405的用于存储用于处理器410的静态信息和指令的只读存储器(rom)420或者其它静态存储设备。可以将存储设备425(诸如，固态设备、磁盘或者光盘)耦合至总线405以持久地存储信息和指令。存储设备425可以包括数据储存库145或者可以是数据储存库145的一部分。118.可以经由总线405来将计算系统400耦合至显示器435(诸如，液晶显示器、或者有源矩阵显示器)以便向用户显示信息。可以将输入设备430(诸如，包括字母数字键和其它键的键盘)耦合至总线405以向处理器410传送信息和命令选择。输入设备430可以包括触摸屏显示器435。输入设备430还可以包括用于向处理器410传送方向信息和命令选择以及用于控制在显示器435上的光标移动的光标控制器(诸如，鼠标、轨迹球、或者光标方向键)。例如，显示器435可以是数据处理系统102、客户端计算设备128或者图1的其它组件的一部分。119.响应于处理器410执行包含在主存储器415中的指令的布置，本文所描述的过程、系统和方法可以由计算系统400实现。可以将这些指令从另一计算机可读介质(诸如，存储设备425)读入主存储器415中。执行包含在主存储器415中的指令的布置使得计算系统400能够执行本文所述的说明性过程。还可以采用在多处理布置中的一个或多个处理器来执行包含在主存储器415中的指令。代替软件指令可以使用硬布线电路系统，或者可以与软件指令以及本文描述的系统和方法结合使用硬布线电路系统。本文描述的系统和方法不限于硬件电路和软件的任何特定组合。120.虽然已经在图4中对示例计算系统进行了描述，但是可以在其它类型的数字电子电路中、或者在计算机软件、固件、或者硬件中(包括本说明书中所公开的结构及其结构等同物)、或者在它们中的一个或多个的组合中实现包括本说明书中所描述的操作的主题。121.对于本文讨论的系统采集有关用户的个人信息或者可以利用个人信息的情形，可以为用户提供机会来控制程序或者特征是否可以采集个人信息(例如，有关用户的社交网络、社交动作或者活动、用户的偏好、或者用户的位置的信息)，或者控制是否和/或如何从内容服务器或者其它数据处理系统接收可能与用户更有关的内容。另外，在存储或者使用特定数据之前，可以以一种或者多种方式来使该特定数据匿名化，从而使得在生成参数时去除个人可识别信息。例如，可以使用户的身份匿名化，从而使得无法确定用户的个人可识别信息，或者可以在获得位置信息的情况下概括用户的地理位置(诸如，到城市、邮政编码、或者州县等级)，使得无法确定用户的具体位置。由此，用户可以对内容服务器采集和使用有关他或者她的信息的方式进行控制。122.可以在数字电子电路中、或者在计算机软件、固件、或者硬件中(包括本说明书中所公开的结构及其结构等效物)、或者在它们中的一个或多个的组合中实现本说明书中所描述的主题和操作。可以将本说明书中描述的主题实现为一个或多个计算机程序，例如，编码在一个或多个计算机存储介质上以由数据处理装置执行或者以控制数据处理装置的操作的计算机程序指令的一个或多个电路。可替代地或者附加地，程序指令可以被编码在人工生成的传播信号上，例如，机器生成的电、光、或者电磁信号，生成该信号以编码信息以便传输至合适的接收器装置以由数据处理装置执行。计算机存储介质可以是以下或包括在以下中：计算机可读存储设备、计算机可读存储基底、随机或者串行存取存储器阵列或者设备、或者它们中的一个或多个的组合。当计算机存储介质不是传播信号时，计算机存储介质可以是编码在人工生成的传播信号中的计算机程序指令的源或者目的地。计算机存储介质还可以是以下或包括在以下中：一个或多个单独的组件或者介质(例如，多个cd、磁盘、或者其它存储设备)。可以将本说明书中描述的操作实现为由数据处理装置对存储在一个或多个计算机可读存储设备或者从其它源接收到的数据执行的操作。123.术语“数据处理系统”、“计算设备”、“组件”、或者“数据处理装置”涵盖了用于处理数据的各种装置、设备、和机器，包括例如，可编程处理器、计算机、片上系统、或者前述中的多个或者组合。该装置可以包括专用逻辑电路，例如，fpga(现场可编程门阵列)或者asic(专用集成电路)。除了硬件之外，该装置还可以包括为所述的计算机程序创建执行环境的代码，例如，构成处理器固件、协议栈、数据库管理系统、操作系统、跨平台运行时间环境、虚拟机、或者它们中的一个或多个的组合的代码。该装置和执行环境可以实现各种不同的计算模型架构，诸如web服务、分布式计算和网格计算架构。数字助理组件106、直接动作api116、接口104、nlp组件108和其它数据处理系统102组件可以包括或者共享一个或多个数据处理装置、系统、计算设备、或者处理器。数字助理服务器144和内容选择组件146可以包括或共享一个或多个数据处理装置、系统、计算设备或处理器。124.可以用任何形式的编程语言(包括编译语言或者解释性语言、声明语言或者过程语言)来编写计算机程序(也称为程序、软件、软件应用、app、脚本或者代码)，并且可以以任何形式(包括作为独立式程序或者模块、组件、子例程、对象、或者适合用在计算环境中的其它单元)来部署计算机程序。计算机程序可以与文件系统中的文件相对应。可以将计算机程序存储在保持其它程序或者数据(例如，存储在标记语言文档中的一个或多个脚本)的文件的一部分中、存储在专用于所述程序的单个文件中，或者存储在多个协作文件(例如，存储一个或多个模块、子程序、或者部分代码的文件)中。可以将计算机程序部署为在一个计算机上执行或者在位于一个站点处或者跨多个站点分布并且通过通信网络互相连接的多个计算机上执行。125.可以通过一个或多个可编程处理器来执行本说明书中描述的过程和逻辑流程，该一个或多个可编程处理器执行一个或多个计算机程序(例如，数据处理系统102的组件)以通过操作输入数据并且生成输出来执行动作。还可以由专用逻辑电路(例如，fpga(现场编程门阵列)或者asic(专用集成电路))来执行过程和逻辑流程，并且还可以将装置实现为专用逻辑电路(例如，fpga(现场编程门阵列)或者asic(专用集成电路))。适合于存储计算机程序指令和数据的设备包括所有形式的非易失性存储器、介质和存储器设备，包括例如，半导体存储器设备(例如，eprom、eeprom、和闪速存储器设备)、磁盘(例如，内部硬盘或者可移动盘)、磁光盘、cd-rom盘和dvd-rom盘。处理器和存储器可以由专用逻辑电路补充或者可以并入该专用逻辑电路中。126.可以将本文描述的主题实现在包括后端组件(例如，作为数据服务器)的计算系统、或者包括中间件组件(例如，应用服务器)的计算系统、或者包括前端组件的计算系统(例如，具有图形用户界面或者web浏览器的客户端计算机，通过该图形用户界面或者web浏览器，用户可以与本说明书中所描述的主题的实施方式进行交互)、或者包括一个或多个这样的后端组件、中间件组件、或者前端组件的组合的计算系统中。可以通过任何形式或者介质的数字数据通信(例如，通信网络)来将系统的组件相互连接。通信网络的示例包括：局域网(“lan”)和广域网(“wan”)、网际网(例如，互联网)，以及对等网络(例如，点对点对等网络)。127.诸如系统100或系统400的计算系统可以包括客户端和服务器。客户端和服务器通常彼此远离，并且通常通过通信网络(例如，网络105)进行交互。客户端和服务器的关系借助于在相应计算机上运行并且彼此具有客户端-服务器关系的计算机程序而产生。在一些实施方式中，服务器将数据(例如，表示数字组成部分的数据包)传输到客户端设备(例如，出于向与客户端设备交互的用户显示数据和从与客户端设备交互的用户接收用户输入的目的)。在客户端设备处生成的数据(例如，用户交互的结果)可以在服务器处从客户端设备接收(例如，由数字助理服务器144从计算设备128的数字助理组件106或3p内容提供者设备140接收)。128.虽然在附图中以特定顺序来描绘操作，但是不需要以示出的特定顺序或者相继顺序来执行这样的操作，并且不需要执行所有图示的操作。可以以不同的顺序执行本文描述的动作。129.各种系统组件的分离不需要在所有实施方式中分离，并且所描述的程序组件可以被包括在单个硬件或软件产品中。例如，nlp组件108或直接动作api116可以是单个组件、app或程序，或者具有一个或多个处理电路的逻辑设备，或者由数据处理系统102的一个或多个处理器执行。130.现在已经描述了一些说明性实施方式，显而易见的是，前述内容是说明性的而非限制性的，其是以示例的方式呈现的。具体地，虽然本文呈现的示例中的许多示例涉及方法动作或者系统元素的特定组合，但是可以以其它方式来组合这些动作和这些元素以实现相同的目的。结合一个实施方式讨论的动作、元素和特征不旨在从其它实施方式或者实施方式中的相似作用排除。131.本文使用的措辞和术语是为了进行描述，并且不应当将其视为是限制。本文对“包括”、“由...组成”、“具有”、“包含”、“涉及”、“特征在于”及其变型的使用是指涵盖其后列出的项、其等效物、和附加项，以及由其后排外地列出的项组成的替选实施方式。在一个实施方式中，本文所述的系统和方法由所描述的元素、动作、或者组件中的一个、所描述的元素、动作、或者组件中的多于一个的各个组合、或者所有所描述的元素、动作、或者组件组成。132.对本文中以单数形式提及的系统和方法的实施方式或者元素或者动作的任何引用还可以包括具有多个这些元素的实施方式包括，并且本文中以复数形式对任何实施方式或者元素或者动作的任何引用还可以涵盖包括仅包括单个元素的实施方式。以单数或者复数形式的引用不旨在将目前公开的系统或者方法、它们的组件、动作、或者元素限制为单数或者复数配置。基于任何信息、动作或者元素对任何动作或者元素的引用可以包括动作或者元素至少部分地基于任何信息、动作或者元素的实施方式。133.本文公开的任何实施方式可以与任何其它实施方式或者实施例组合，并且对“实施方式”、“一些实施方式”、“一个实施方式”等的引用不一定是相互排斥的并且旨在指示结合该实施方式描述的特定特征、结构、或者特性可以包括在至少一个实施方式或者实施例中。如本文使用的这样的术语不一定都是指相同的实施方式。可以以与本文公开的方面和实施方式一致的任何方式来包括地或者排外地将任何实施方式与任何其它实施方式组合。134.对“或”的引用可以被解释为包含性的，使得使用“或”描述的任何术语可以指示所描述的术语中的单个、多于一个和全部中的任何一个。对术语的联合列表中的至少一个的引用可以被解释为包含性或，以指示所描述的术语中的单个、多于一个和全部中的任何一个。例如，对“‘a’和‘b’中的至少一个”的引用可以仅包括‘a’、仅包括‘b’，以及包括‘a’和‘b’两者。与“包括”或其他开放式术语结合使用的这种引用可以包括附加项目。135.在附图、具体实施方式或任何权利要求中的技术特征后面有附图标记的情况下，包括附图标记以增加附图、具体实施方式和权利要求的可理解性。因此，附图标记及其缺失都不对任何权利要求要素的范围具有任何限制作用。136.在不脱离其特性的情况下，本文描述的系统和方法可以以其他特定形式体现。例如，被描述为3p或第三方的设备、产品或服务(诸如3p数字内容提供者设备140)可以是或部分或全部包括第一方设备、产品或服务，并且可以由与数据处理系统102、数字助理服务器144或其他组件相关联的实体共同拥有。前述实施方式是说明性的而不是限制所描述的系统和方法。因此，本文描述的系统和方法的范围由所附权利要求而不是前面的描述指示，并且在权利要求的等同物的含义和范围内的改变被包含在其中。当前第1页12当前第1页12