使用来自多个来源影像/视频的方法及设备的制造方法
【专利摘要】一种涉及使用来自多个来源的视频/音频数据技术以及其选择的实施被描述。一第一设备的一或多个处理器可接收由上述第一设备的一第一影像传感器在一第一时间中所取得的一第一数据。上述第一数据可包括一影像或视频相关的数据。上述第一设备可从一第二设备无线接收由上述第二设备之一第二影像传感器在一第二时间中所取得的一第二数据。上述第二数据可至少包括影像或视频相关的数据。上述第二设备的一位置或一地点可不同于上述第一设备的一位置或一地点。上述第一时间可等同于上述第二时间或不同于上述第二时间且不超过一预定时间差。上述第一设备的上述一或多个处理器可执行皆使用上述第一数据和上述第二数据作为输入的一任务。
【专利说明】
使用来自多个来源影像/视频的方法及设备
【技术领域】
[0001]本揭露有关于无线接收来自多个来源的数据,且特别是有关于利用来自多个来源之影像/视频/音频的方法及设备。
【【背景技术】】
[0002]除非此处另有说明,本节中描述的方法并非本权利要求的现有技术,并且不因为包括在本节中即承认为现有技术。
[0003]目前,使用多台照相机的应用,像是,举例来说,画中画(picture-1n-picture,PIP)和立体特征(例如,三维(three-dimens1nal,3D)撷取、快速自动对焦、影像再聚焦以及距离测量)基于一前提,即执行应用的设备至少具有两个影像传感器/照相机。因此,此应用的实施方式往往被硬件所限制。然而,当设备被配置或以其它方式配备时,硬件成本逐渐增高以支持多相机功能及应用。
【
【发明内容】
】
[0004]以下
【发明内容】
仅为示例性的,且不意指以任何方式加以限制。除所述说明性方面、实施方式和特征之外,通过参照附图和下述【具体实施方式】,其他方面、实施方式和特征也将显而易见。即,以下
【发明内容】
被提供以介绍概念、重点、益处及本文所描述新颖且非显而易见的技术优势。所选择,非所有的,实施例将进一步详细描述如下。因此,以下
【发明内容】
并不意旨在所要求保护主题的必要特征,也不意旨在决定所要求保护主题的范围中使用。
[0005]在一实施方式中,一方法可包括通过一第一设备接收由上述第一设备的一第一影像传感器在一第一时间中所取得的一第一数据。上述第一数据可至少包括一影像或视频相关的数据。上述方法可包括通过上述第一设备从一第二设备无线接收由上述第二设备的一第二影像传感器在一第二时间中所取得的一第二数据。上述第二数据至少包括影像或视频相关的数据。上述第二设备的一位置或一地点不同于上述第一设备的一位置或一地点。上述第一时间等同于上述第二时间或不同于上述第二时间且不超过一预定时间差。上述方法可进一步包括通过上述第一设备的一或多个处理器执行皆使用上述第一数据和上述第二数据作为输入的一任务。
[0006]在另一实施方式中,一方法可包括通过一第一设备接收由上述第一设备的一第一影像传感器在一第一时间中所取得的一第一数据。上述第一数据至少包括一影像或视频相关的数据。上述方法也包括通过上述第一设备从一第二设备无线接收由上述第二设备的一第二影像传感器在一第二时间中所取得的一第二数据。上述第二数据至少包括影像或视频相关的数据。上述第二设备的一位置或地点不同于上述第一设备的一位置或地点。上述第一时间等同于上述第二时间或不同于上述第二时间且不超过一预定时间差。上述方法可进一步包括通过上述第一设备和第二设备其中之一或两者判断上述第一数据和上述第二数据其中之一或两者是否满足一或多个标准。上述方法可另外包括通过上述第一设备和第二设备其中之一或两者执行一或多个补救动作以响应至少一上述第一数据和上述第二数据不满足上述一或多个标准的一判断。
[0007]在又另一实施方式中,一第一设备可包括一第一影像传感器、一内存及一或多个处理器。上述内存可配置用以储存至少一数据或一或多组指令在其中。上述一或多个处理器可耦接以存取储存在上述内存中的上述数据或上述一或多组指令。上述一或多个处理器被配置用以接收由一第二设备的一第二影像传感器在一第二时间中所取得的一第二数据。上述第二数据由上述第二设备无线传送。上述一或多个处理器可接收由上述第一影像传感器在一第一时间中所取得的一第一数据。上述一或多个处理器执行使用至少上述第二数据和上述第一数据作为输入的一任务。上述第一数据至少包括影像或视频相关的数据。上述第二数据至少包括影像或视频相关的数据。上述第二设备的一位置或一地点不同于上述第一设备的一位置或一地点。上述第一时间等同于上述第二时间或不同于上述第二时间且不超过一预定时间差。
[0008]因此,根据本揭露的实施方式解决与多相机应用支持相关的硬件限制及高硬件成本的问题。有益的是,根据本揭露的一设备可接收和使用由一或更多其他设备的(多个)影像传感器/(多个)相机所撷取、接收或取得的影像/视频/音频数据。
[0009]【图式简单说明】
[0010]附图被包括以提供本发明进一步理解且被合并并组成本揭露的一部分。附图为说明本发明的实施例且连同描述一起用以解释本发明的原理。其可理解附图不一定按比例描绘,一些组件可以超过在实际实施方式的大小来显示,以清楚地说明本揭露的概念。
[0011]图1为根据本揭露的一实施方式的一示范性的情景图。
[0012]图2为根据本揭露的另一实施方式的一示范性情景图。
[0013]图3为根据本揭露的一实施方式的一示范性特征图。
[0014]图4为根据本揭露的另一实施方式的一示范性特征图。
[0015]图5为根据本揭露的又另一实施方式的一示范性特征图。
[0016]图6为根据本揭露的静态另一实施方式的一示范性特征图。
[0017]图7为根据本揭露一实施方式的一示范设备之方块图。
[0018]图8为根据本揭露一实施方式的一示范流程之流程图。
[0019]图9为根据本揭露另一实施方式的一示范流程之流程图。
[0020]图中,
[0021]100情景图
[0022]HO 设备
[0023]120 设备
[0024]115 二维影像
[0025]125 二维影像
[0026]130深度地图
[0027]200情景图
[0028]215 二维影像
[0029]225 二维影像
[0030]230画中画效果
[0031]300特征图
[0032]310、320、330 方块
[0033]322、324、326、332 子方块
[0034]400特征图
[0035]402 第一影像
[0036]404第二影像/画面
[0037]406第三影像
[0038]410、420 方块
[0039]422、424、426 子方块
[0040]500特征图
[0041 ] 502第一影像/画面
[0042]504第二影像/画面
[0043]510、520 方块
[0044]522、524、526 子方块
[0045]600特征图
[0046]610、620 方块
[0047]622、624、626 子方块
[0048]700 设备
[0049]710影像传感器
[0050]720 内存
[0051 ] 730 一或多个处理器
[0052]740通讯装置
[0053]750用户接口装置
[0054]800 流程
[0055]810、820、830 步骤
[0056]900 流程
[0057]910、920、930、940 步骤
【【具体实施方式】】
[0058]依据本揭露实施例可使一设备接收并使用由一或多个其它设备的(多个)传感器/(多个)相机所撷取、接收或取得影像数据、视频数据和/或音频数据(在此可互换为「影像/视频/音频数据」)。因此,通过使用一或多个其它设备的影像传感器和/或相机,该设备可从多相机功能和/或超出此设备在硬件方面所能配置物理极限(例如,一影像传感器/相机)的应用中获益。该设备可与一或多个其它设备建立无线通信,并接收来自每一或多个其它设备的影像/视频/音频数据,且该设备可通过结合或其他方式使用自身影像/视频/音频数据及来自每一或多个其它设备所接收的影像/视频/音频数据,来执行、呈现、提供、实现或以其他方式实现多相机特征和/或应用。影像/视频/音频数据可由该设备的(多个)传感器/(多个)相机同时、共时或在与一或多个其他设备的一段时间差中撷取、接收或取得。因此,不仅是该设备的内容还是软件和/或硬件资源以及上述一或多个其它设备可被共享和/或进一步地被处理,使上述设备与一个或多个的其它设备可操作类似一单一设备,其将比在没有云端服务器下的设备更为有利。
[0059]值得注意的是,根据本揭露的技术,其可适用或实施在一设备(本文中可交互使用为一「接收端(sink)」可从另一其他设备(本文中可交互使用为一「来源端(source)」)接收影像/视频/音频数据的方案中,也可适用或实施于一接收端接收来自多个来源端的收影像/视频/音频数据的其他方案中,及多个接收端接收来自一来源端的影像/视频/音频数据的方案,及多个接收端接收来自多个来源端的影像/视频/音频数据的方案。简单且可轻易理解的是,根据本揭露的技术,虽然描述于例子中的技术也可适用及实施于有多个接收端和/或多个来源端的内容中,但本文仅提供单一来源端及单一接收端的例子来说明。
[0060]此外,在根据本揭露的各种实施方式中,每个接收端为了实时通讯可无线接收来自每一来源端的影像/视频/音频数据。由来源端所取得的影像/视频/音频数据可在来源端的任一处理阶段中被传送至一接收端。每一接收端可直接从每一来源端无线接收影像/视频/音频数据。又或者,每一接收端可间接地从每一来源端(例如,经由一存取点、一中继点或另一装置)无线接收影像/视频/音频数据。举例来说,在一种拓扑结构中,一接收端和一接收端可无线连接至彼此。在另一种拓扑结构中,一接收端和一接收端可经由一存取点、一中继点或另一装置间接无线连接到彼此。在又另一种拓扑结构中,一接收端和一接收端可以经由一存取点、一中继点或另一装置间直接及间接连接到彼此。简单且轻易理解的是,根据本揭露的技术,虽然描述于例子中的技术也可适用及实施于其他拓扑结构的内容中,但本文提供的例子仅描述于一接收端和一来源端直接无线连接至彼此之拓扑结构的内容中。
[0061]此外,根据本揭露,一接收端、一来源端或接收端及来源端两者的校准。例如,接收端可产生用于调整上述来源端和/或接收端位置和/或角度的一或多个指示。或者或可取代地,来源端可以产生用于调整接收端和/或来源端位置和/或角度的一或多个指示。接收端/来源端可通过比较和/或映像由接收端所取得的影像/视频数据及由来源端所取得的影像/视频数据来做调整。在一实施例中,由接收端和来源端所取得的各影像/视频数据的特征点可进行比较以产生(多个)指示。上述(多个)指示可以各种形式,举例但不局限于,在接收端和/或来源端的用户接口上的(多个)讯息和/或(多个)视觉/听觉指示,来表现或实施。上述(多个)指示可通知接收端的一使用者和/或来源端的一使用者如何调整接收端和/或来源端的位置和/或角度和/或(多个)设定和/或(多个)配置。在一些实施方式中,一合适的影像或视频可以从由接收端或来源端所取得的一系列影像或视频中被自动检索,以取代由接收端及来源端所取得的已给定影像或视频。
[0062]值得注意的是,虽然此处提供的例子为影像/视频,但依据本揭露的实施方式也可以适用于音频数据。
[0063]图1显示依据本揭露的一实施方式的情景图100。在情景图100中,一设备110可以是接收端(sink)以及其他设备,设备120可以是由设备120撷取、接收或以其它方式所取得的影像/视频/音频数据的来源端(source),来源端并以无线传输至设备110且由设备110,即接收端,无线接收。每一设备110和设备120可为一可携式电子设备,像是,例如一智能型手机、一穿戴装置或一计算装置(像是一平板、一膝上型计算机及一笔电)。如图1所示的例子中,每一设备110和设备120可以是一智能型手机,且分别各自装设一后部影像传感器或相机,其可撷取、接收或以其它方式取得二维(two-dimens1nal,2D)的静止影像和视频。也就是说,每一设备110和设备120可配备一影像传感器或相机在设备后侧,而在设备前侧则可包括一般用以面对其用户的一用户接口装置(例如,一触控感测屏幕)。
[0064]在情景图100中,每一设备110和设备120可以分别捕获、接收或以其他方式取得使用各自影像传感器/相机的一场景的一二维影像。设备110可以在第一方位取得该场景的一二维影像115,而设备120可在与第一方位不同的第二方位上取得该场景的二维影像125。举例来说,影像115和影像125可以在不同角度、坡度(pitch)、晃动(rolls )、偏移(yaws)和/或其他的相对位置上取得。设备120可无线传送代表影像125之数据至设备110。在设备110从设备120接收代表影像125的数据后,设备110可以利用影像115和影像125产生一或多个立体特征,像是,举例但不局限于,一三维(three-dimens1nal,3D)的视觉效果。该三维视觉效果可包括,举例但不局限于,一深度图和/或一三维撷取图。或者或可取代地,上述一或多个立体特征可包括,举例但不局限于,自动对焦、影像再聚焦和/或距离测量。在如图1所示的例子中,设备110可根据影像115和影像125两者产生一深度地图130。有利地是,虽然设备110配备有一影像传感器/相机,但设备110能够通过结合使用由本身所取得的影像115及接收来自设备120的影像125或其他方式执行、呈现、提供、实现或以其他的方式实施多相机功能和/或其他应用。
[0065]图2显示根据本揭露另一实施方式的一示范情景图200。在情景图200中,类似于情景图100,设备110可为是接收端而设备120可为由设备120撷取、接收或以其它方式所取得的影像/视频/音频数据的来源端,来源端并以无线传输至设备110且由设备110,即接收端,来作无线接收。
[0066]在情景图200中,设备110可使用其影像传感器/相机撷取、接收或以其它方式取得一情景的一二维(two-dimens1nal,2D)影像215,而设备120可使用其影像传感器/相机撷取、接收或以其他方式取得一场景、人或物体的一二维影像225。设备120可无线传送代表影像225至设备110。在接收来自设备120的代表影像225的数据后,设备110可使用这两个影像215和影像225以呈现一画中画(picture-1n-picture)效果。在如图2所示的例子中,设备110可根据一场景的影像215和一人物的影像225产生一画中画效果230。有利的是,虽然设备110仅配备一影像传感器/相机,但设备110还能通过结合或其他方式使用本身所取得的影像215及接收来自设备120的影像215执行、呈现、提供、实行或以其他方式实施多相机特征和/或其他应用。
[0067]图3显示出根据本揭露一实施例的特征图300。在如图3所示的例子中,设备110可以是接收端,而设备120可以是来源端可以是由设备120撷取、接收或以其它方式所取得的影像/视频/音频数据的来源端(source),来源端并以无线传输至设备110且由设备110,即接收端,无线接收。特征图300可涉及分别由一或多个方块310、320和330所表示的一或多个操作、动作或功能。尽管上述特征图300由离散方块所描述,但特征图300的各方块可取决于所需的实施方式被分割成更多方块或合并成更少方块甚至移除。虽然本文所描述的实施例为通过设备110是接收端和设备120是来源端的一情况或时间来解释,但在相同的实施例或其它不同的实施例中,设备110可以是来源端且设备120可以是接收端。
[0068]在方块310中,设备110可利用其影像传感器/相机取得影像/视频数据(例如,一二维影像),设备120可利用其影像传感器/相机取得影像/视频数据(例如,一二维影像),而由设备120取得的上述影像/视频数据可被无线传送至接收设备110且由设备110所接收。特征图300可从方块310进行至方块320。
[0069]在方块320中,设备110可使用由设备110取得的影像/视频数据及由设备120所取得的影像/视频数据执行一或多个任务,这些可能引起或造成使用者行为修正。方块320可包括数个子方块像是322、324和326。
[0070]在子方块322,设备110可根据由设备120所取得的影像/视频数据及由设备110取得的影像/视频数据执行一或多个任务。这些任务包括,举例但不局限于,运动估计、物体侦测、曝光同步和/或颜色同步。特征图300可从322进行至324。在子方块324中,设备110可判断通过设备110所取得的影像/视频数据(例如,影像/画面115或影像/画面215)和/或通过设备120所取得的影像/视频数据(例如影像/画面225或影像/画面225)是否满足一或多个预定标准。上述一或多个预定标准可用来判断影像/画面125和影像/画面225或其信息是否适用于产生一三维影像。在判断满足一或多个标准的情况下,特征图300可从324进行至330。在判断不满足一或多个标准的情况下,特征图300将从324进行至326。在子方块326中,设备110可提供一指示至一使用者,以请求用于调整与通过设备110所取得的影像/视频数据及通过设备120所取得的影像/视频数据其中之一或两者相关的一或多个参数的一输入。举例来说,设备110可提供用以校正与设备120相关的使用者行为的反馈建议326,举例来说,曝光同步、颜色同步和/或自动聚焦。该反馈可被用以使设备120调整其设定或配置,和/或产生(多个)指示以并显示在设备120的用户接口上,以告知设备120的一使用者如何调整上述设备的位置/角度/(多个)设定及(多个)配置。特征图300可从326进行到310,针对设备120的使用者根据反馈以取得新的影像/视频数据。
[0071]在方块330中,设备110可使用通过设备110所取得的影像/视频数据(例如,影像/画面115或影像/画面215)和/或通过设备120所取得的影像/视频数据(例如影像/画面225或影像/画面225)及通过产生(多个)三维视觉效果像是一深度地图(例如,深度地图130)和/或三维撷取图来产生一或多个立体特征。
[0072]图4显示出根据本揭露一实施例的特征图400。在如图4所示的例子中,设备110可以是接收端,而设备120可以是来源端可以是由设备120撷取、接收或以其它方式所取得的影像/视频/音频数据的来源端(source),来源端并以无线传输至设备110且由设备110,即接收端,无线接收。特征图400可涉及分别由一或多个方块410及420所表示的一或多个操作、动作或功能。尽管上述特征图400其由离散方块所描述,特征图400的各方块可取决于所需的实施方式被分割成更多方块或合并成更少方块甚至移除。虽然本文所描述的实施例为通过设备110是接收端和设备120是来源端的一情况或时间来解释,但在相同的实施例或其它不同的实施例中,设备110可以是来源端且设备120可以是接收端。
[0073]在方块410中,设备110可利用其影像传感器/相机取得影像/视频数据(例如,一二维影像),设备120可利用其影像传感器/相机取得影像/视频数据(例如,一二维影像),而由设备120取得的上述影像/视频数据可被无线传送至接收设备110且由设备110所接收。特征图400可从方块410进行至方块420。在如图4所示的例子中,设备100可取得一物体的一第一影像402,而设备120可取得该相同物体的一第二影像/画面404。影像402的曝光和/或颜色可以与影像/画面404的曝光和/或颜色不同。
[0074]在方块420中,设备110可执行使用由设备110所取得的影像/视频数据(例如,第一影像/画面402)及设备120所取得的影像/视频数据(例如,第二影像/画面404)的一或多个任务,且可能引起或造成设备120和/或设备110的校准。方块420可包括数个子方块像是422、424和426。
[0075]在子方块422中,设备110可根据由设备120所取得的影像/视频数据及由设备110所取得的影像/视频数据执行一或多个任务。这些任务可包括,举例但不局限于,曝光同步和/或颜色同步。特征图400可从422进行至424。在子方块424中,设备110可判断由设备110所取得的影像/视频数据(例如,影像115或画面215)和/或由设备120所取得的影像/视频数据(例如,影像225或影像225)是否满足一或多个预定标准。举例来说,设备110可计算、估算或以其他方式判断由设备110及设备120各自取得的影像/视频数据(例如,影像402及影像404)的曝光和/或颜色以决定第一影像/画面402及第二影像/画面404间之曝光和/或颜色之间的一差值是否大于一门坎值。在相同例子或其他的例子中,设备110可计算或以其它方式判断影像/画面402和影像/画面404或其信息是否适用于产生一三维影像。在判断上述满足一或多个标准的情况下(例如,第一影像/画面402与第二影像/画面404之间的曝光和/或颜色差值并未大于此默认门坎值),特征图400可从子方块424进行至410以接着取得影像/视频数据。在判断上述未满足一或多个标准的情况下(例如,第一影像/画面402与第二影像/画面404之间的曝光和/或颜色差值大于此默认门坎值),特征图400将从子方块424进行至426。在子方块426,设备110可通过,例如,产生或传送数据和/或(多个)指令至设备120来校准设备120的影像传感器/相机的曝光和/或颜色,以调整设备120的影像传感器/相机的曝光和/或白平衡,以完成同步。该反馈可用以使设备120调整其设定或配置,和/或使(多个)指示以显示在设备120的一用户接口上,以告知设备120的一使用者如何调整上述设备的位置/角度/(多个)设定/(多个)配置。因此,设备120可取得相对于第一影像402且具有同步曝光和/或颜色的第三影像406。对于曝光而言,设备110和/或设备120的统计平均值的一偏差需小于预设门坎值。对于白平衡而言,设备110和/或设备120的RGB统计平均值的一偏差需小于一预设门坎值。特征图400可从子方块426进行至410接着取得影像/视频数据。
[0076]图5显示出根据本揭露另一实施例的特征图500。在如图5所示的例子中,设备110可以是接收端,而设备120可以是来源端可以是由设备120撷取、接收或以其它方式所取得的影像/视频/音频数据的来源端(source),来源端并以无线传输至设备110且由设备110,即接收端,无线接收。特征图500可涉及分别由一或多个方块510及520所表示的一或多个操作、动作或功能。尽管上述特征图500其由离散方块所描述,特征图500的各方块可取决于所需的实施方式被分割成更多方块或合并成更少方块甚至移除。虽然本文所描述的实施例为通过设备110是接收端和设备120是来源端的一情况或时间来解释,但在相同的实施例或其它不同的实施例中,设备110可以是来源端且设备120可以是接收端。
[0077]在方块510中,设备110可利用其影像传感器/相机取得影像/视频数据(例如,一二维影像),设备120可利用其影像传感器/相机取得影像/视频数据(例如,一二维影像),而由设备120取得的上述影像/视频数据可被无线传送至接收设备110且由设备110所接收。特征图500可从方块510进行至方块520。在如图5所示的例子中,设备100可取得一第一影像/画面502,而设备120可取得一第二影像/画面504。设备110也可接收一使用者输入,以选择在第一影像/画面里面感兴趣的物体。
[0078]在方块520中,设备110可执行使用由设备110所取得的影像/视频数据(例如,第一影像/画面502)及设备120所取得的影像/视频数据(例如,第二影像/画面504)的一或多个任务,且可能引起或造成设备120和/或设备110的校准以聚焦在第二影像/画面504中感兴趣的物体。方块520可包括数个子方块像是522、524和526。
[0079]在子方块522中,设备110可侦测在第一影像/画面502中感兴趣的物体,以在第一影像/画面502中形成一聚焦窗口,且可传送数据/(多个)命令至设备120使设备120侦测在第二影像/画面504中有兴趣的物体,以在第二影像/画面中504形成的聚焦窗口。特征图500可从子方块522处理至524。在子方块524中,设备110可判断设备110所取得的影像/视频数据(例如,影像115或影像215)和/或由设备120所取得的影像/视频数据(例如,影像125或影像225)是否满足一或多个预定标准。举例来说,设备110将计算、估算或以其他方式判断在第一影像/画面502聚焦窗口中的感兴趣的物体大小与在第二影像/画面504聚焦窗口中之感兴趣的物体大小间的一差值是否大于一预设门坎值。在相同的例子或其他的例子中,设备110可计算、估算或以其它方式判断第一影像/画面502和第二影像/画面504或其信息是否适用于产生一三维影像。在判断上述满足一或多个标准的情况下时(例如,第一影像/画面502与第二影像/画面504之间的差值并未大于一预设门坎值,并不适合产生一三维影像),特征图500可从子方块524进行至510以接着取得影像/视频数据。在判断上述不满足一或多个标准的情况下时(例如,上述差值大于上述默认门坎值),特征图500可从子方块524进行至526。在子方块526中,设备110可通过,例如,产生或传送数据和/或(多个)指令作为反馈至设备120来校准设备120的影像传感器/相机的对焦,以调整设备120的影像传感器/相机的对焦以在聚焦窗口中取得感兴趣物体的清楚影像。该反馈可用以使设备120调整其设定或配置,和/或产生显示在设备120的一用户接口上的多个指示,以告知设备120的一使用者如何调整上述设备的位置/角度/(多个)设定及(多个)配置。特征图500可从子方块526进行至510以接着取得影像/视频数据。
[0080]图6显示出根据本揭露一实施例的特征图600。在如图6所示的例子中,设备110可以是接收端,而设备120可以是来源端可以是由设备120撷取、接收或以其它方式所取得的影像/视频/音频数据的来源端(source),来源端并以无线传输至设备110且由设备110,即接收端,无线接收。特征图400可涉及分别由一或多个方块610及620所表示的一或多个操作、动作或功能。尽管上述特征图600为由离散方块所描述,特征图600的各方块可取决于所需的实施方式被分割成更多方块或合并成更少方块甚至移除。虽然本文所描述的实施例为通过设备110是接收端和设备120是来源端的一情况或时间来解释,但在相同的实施例或其它不同的实施例中,设备110可以是来源端且设备120可以是接收端。
[0081]在方块610中,设备110可利用其影像传感器/相机取得影像/视频数据(例如,一二维影像),设备120可利用其影像传感器/相机取得影像/视频数据(例如,一二维影像),而由设备120取得的上述影像/视频数据可被无线传送至接收设备110且由设备110所接收。特征图600可从方块610进行至方块620。在动态的环境下,若由设备110的影像传感器/相机所取得的影像/视频数据及由设备120的影像传感器/相机所取得的影像/影像数据的一差值越大时,产生的深度地图则有一较差的效果。举例来说,当设备110的影像传感器/相机的性能或能力与设备120的影像传感器/相机的性能或能力之间具有一差异时,讯框率(framerate)对准可为必要的。设备110可根据由设备120所传送数据频率的至少一部分判断设备120的影像传感器/相机的讯框率。
[0082]在方块620中,设备110可使用由设备110所取得的影像/视频数据(例如,第一影像/画面602)及由设备120所取得的影像/视频数据(例如,第二影像/画面604)执行一或多个任务,这些可能引起或造成设备110和/或设备120的校准,以同步设备110及设备120的讯框率。方块620将包括数个子方块像是624和626。
[0083]在子方块624中,设备110可判断由设备110所取得的影像/视频数据(例如,影像115或影像215)和/或由设备120所取得的影像/视频数据(例如,影像225或影像225)是否满足一或多个预定标准。例如,设备110将计算、估算或以其他方式判断设备110的讯框率及设备120的讯框率的一差值是否小于一预设门坎值(例如,一画面期间(durat1n of aframe))。在相同的例子或其他的例子中,设备110将计算、估算或以其它方式判断第一影像/画面602和第二影像/画面604或其信息是否适用于产生一三维影像。在判断上述满足一个或多个标准的情况下时(例如,上述差值未大于上述默认门坎值),特征图600可从子方块624进行至610并接着取得影像/视频数据。在判断未满足一或多个标准的情况下时(例如,上述差值大于上述默认门坎值),特征图600将从子方块624进行至626。在子方块626中,设备110可通过,例如,调整设备110的讯框率和/或产生及传送数据和/或一或多个指令至设备120作为反馈至设备120,以调整设备120的讯框率来达成讯框率同步。举例来说,当设备110的讯框率是每秒30画面(fps)而设备120的讯框率系为24fps,设备110可经由讯框率的范围降低设备110的讯框率从3(^口8至24€口8。在另一例子中,当设备110的讯框率是24fps而设备120的讯框率是30f ps,设备110可反馈讯框率的范围至设备120以使设备120的讯框率从30fps降低至24fps。该反馈可用以使设备120调整其设定或配置,和/或产生显示在设备120的一用户接口上的(多个)指示,以告知设备120的一使用者如何调整该设备的位置/角度/(多个)设定及(多个)配置。特征图500将从子方块526进行至510接着取得影像/视频数据。
[0084]图7显示依据本揭露一实施方式的一示范设备700。设备700可以是设备110和/或设备120的示范的实施方式。设备700可执行多种功能以实现本文所述的技术、方法和系统,包括上方所描述情景图100、情景图200、特征图300、特征图400、特征图500、特征图600及描述如下的程序800和程序900。在一些实施方式中,设备700可以是一可携式电子设备像是,
例如,一智能型手机、一穿戴式装置或一计算装置,像是一平板计算机、一膝上型计算机及一笔记本电脑。
[0085]设备700至少包括如图7所示的组件。为了避免混淆图7及/或理解设备700,与本揭露的实施方式不相关的设备700中的某些组件未示出在图7中。请参照图7,设备700可包括一影像传感器710、一内存720、一或多个处理器730、一通讯装置740和一用户接口装置750。
[0086]影像传感器710可由,举例但不局限于,一主动式像素传感器来实现像是,举例来说,一互补式金属氧化物半导体(Complementary Metal-Oxide-Semiconductor,CMOS)传感器、一电荷親合组件(Charge-coupled Device,CCD)传感器或任一目前已存在或未来将开发的影像传感装置。影像传感器710可配置用以检测并传达构成一影像之信息,并可用于撷取、接收或以其他方式取得静止影像和/或视频影像。
[0087]内存720可通过现有存在或是将在未来开发的任何合适的内存装置来实现,其可包括,举例但不局限于,挥发性内存像是随机存取内存(random-access memory,RAM)、非挥发性内存(non-volatile memory)像是只读存储器(read-only memory,ROM)和非挥发性随机存取内存(non-volatile RAM)、或其任意组合。在随机存取内存的情况下,内存720可包括,举例但不局限于,动态随机存取内存(dynamic RAM,DRAM)、静态随机存取内存(staticRAM,SRAM)、闸流晶体管随机存取内存(thyristor RAM,T-RAM)和/或零电容随机存取内存(zero-capacitor RAM,Z-RAM)。在只读存储器的情况下,内存720可包括,举例但不局限于,光罩式只读存储器(Mask ROM)、可程序化只读存储器(programmable ROM,P-ROM)、可抹除可程序化只读存储器(erasable programmable R0M,EPR0M)、和/或电子式可抹除可程序化只读存储器(electrically erasable programmable R0M,EEPR0M)。在非挥发性随机存取内存的情况下,内存720可包括,举例但不局限于,闪存内存(flash memory)、固态内存(solid-state memory)、磁阻式随机存取内存(Magnetoresistive Random AccessMemory,MRAM)、非挥发性SRAM(nvSRAM)、铁电随机存取内存(Ferroelectric RAM,FRAM)和/或相变化内存(phase-change memory,PRAM)。内存720可通讯親接至影像传感器710,并配置用以储存由影像传感器710所撷取、接收或以其它方式取得的静止(多个)影像和/或(多个)视频影像。内存720也可被配置用以储存一或多组指令,当其由一或多个处理器730所执行时,这些指令可使一或多个处理器730根据本揭露内的各种实施方式执行操作。
[0088]通讯装置740可通过,举例但不局限于,一单集成电路(integrated-circuit,IC)芯片、一包括一或多个集成电路芯片的芯片组或任一合适的电子设备来实现,且可包括至少一用于无线通信的天线。通讯装置740可配置用以无线(或有线)的方式传送及接收数据/信息。通讯装置740可配置用以在一或多个模式,其包括,举例但不局限于,射频(rad1frequency,RF)方式、自由空间光学模式、声音/听觉模式及电磁感应模式下,传送及接收数据/信息。举例来说,通讯装置740可配置用以根据电机电子工程师学会(IEEE)802.11标准经由W1-Fi来传送及接收数据/信息。在情景图100、情景图200、特征图300、特征图400、特征图500、特征图600、流程800和流程900的内容中,通讯装置740可配置用以进行无线接收来自一或多个其它设备的数据、信息、(多个)命令、(多个)静止影像及/或(多个)视频影像,
[0089]并传送数据、信息、(多个)命令、(多个)静止影像及/或(多个)视频影像至一或多个其他设备。
[0090]用户接口装置750可通过,举例但不局限于,显示器、触控传感显示器、电压传感触控面板、电容传感触控面板、电阻式传感触控面板、力传感触控面板、键盘、小键盘、轨迹球、操纵杆、(多个)麦克风和(多个)扬声器,或其上述组合实现。用户接口装置750可配置用以提供或其他方式展示数据/信息至设备700的一使用者,并接收来自用户的数据/信息/(多个)命令。
[0091](多个)处理器730可通过,举例但不局限于,一单集成电路芯片或一包括一或多个集成电路芯片的芯片组或任一合适的电子设备来实现。(多个)处理器730可通讯耦接至每一影像传感器710、内存720、通讯装置740和用户接口装置750,以控制其操作,其包括:由此接收数据/信息,并向其提供数据/信息/命令。(多个)处理器730可配置用以根据本揭露各种实施方式执行操作。举例来说,(多个)处理器730可接收由影像传感器710在第一时间所取得的第一数据,并且接收由一不同且远程设备的一影像传感器在第二时间所取得的第二数据。第二数据可通过通讯装置740从远程设备被无线接收,并提供至(多个)处理器730进行处理。(多个)处理器730可执行使用至少上述第一数据和上述第二数据作为输入的一或多个任务。在一些实施方式中,第一数据可至少包括一影像或视频相关的数据,而第二数据可至少包括一影像或视频相关的数据。在一些实施方式中,取得第二数据的一位置或一地点可以与取得第一数据的一位置或一地点不同。在一些实施方式中,第一时间可以等同于第二时间或不同于第二时间且不超过一预定时间差(例如,一或超过千分之一秒、一或超过百分之一秒、一或超过十分之秒、一或数秒,或依据实际的实施方式任何合适的期间)。在一些实施方式中,第一数据和第二数据中任一或两者也可包括音频数据。在一些实施方式中,当第二数据被取得时远程设备的一定向(orientat1n)可能不同于当第一数据被取得时设备700所取得的定向。
[0092]在一些实施方式中,在执行任务时,(多个)处理器730可通过组合或迭加第一数据和第二数据产生一合成数据。
[0093]在一些实施方式中,在执行任务时,(多个)处理器730可呈现使用由上述第一数据所描绘的一第一画面和由上述第二数据所描绘的一第二画面的一画中画(picture-1n-picture)效果。
[0094]在一些实施方式中,在执行任务时,(多个)处理器730可产生至少使用上述第一数据和上述第二数据的一或多个立体特征。在一些实施方式中,上述一或多个立体特征可包括一三维视觉效果。在一些实施方式中,上述三维视觉效果可包括至少一深度图或一三维撷取图。或者或可取代地,上述一或多个立体特征可包括至少一快速自动对焦、影像再聚焦、或距离测量。
[0095]在一些实施方式中,在执行任务时,(多个)处理器730可执行以下至少一个:运动估计、物体侦测、曝光同步、或颜色同步。
[0096]在一些实施方式中,在执行任务时,(多个)处理器730根据上述第一数据和上述第二数据的至少一部分产生一第三数据。此外,(多个)处理器730可经由通讯设备740无线传送上述第三数据至不同于第一设备700和远程设备的一另一不同且远程的设备。
[0097]在一些实施方式中,在执行任务时,(多个)处理器730可根据上述第一数据和上述第二数据的至少一部分产生一第三数据。此外,(多个)处理器730可经由通讯装置740无线传送该第三数据到上述远程设备,以控制远程设备的一或多个操作。在一些实施方式中,在传送该第三数据到上述远程设备,以控制远程设备的一或多个操作中,(多个)处理器730可经由通讯装置740无线传送上述第三数据至上述第二设备,以控制上述第二数据的连续产生。
[0098]在一些实施方式中,在执行任务时,(多个)处理器730可判断第一数据和第二数据其中之一或两者是否满足一或多个标准。此外,(多个)处理器730可执行一或多个补救动作以响应至少一上述第一数据和上述第二数据不满足上述一或多个标准的一判断。在一些实施方式中,在执行上述补救动作中,(多个)处理器730根据上述第一数据和上述第二数据的至少一部分产生一第三数据。此外,(多个)处理器730可经由通讯装置740无线传送上述的第三数据至该远程设备,以控制远程设备的一或多个操作。
[0099]可选地或另外地,在执行一或多个补救动作中,(多个)处理器730可调整与上述第一数据和上述第二数据其中之一或两者的一或多个相关参数。在一些实施方式中,(多个)处理器730也可提供一指示(例如,(多个)视觉和/或听觉指示)至一使用者,以请求上述用于调整与上述第一数据和上述第二数据其中之一或两者的上述一或多个相关参数的一输入。
[0100]可选地或另外地,在执行一或多个补救动作中,(多个)处理器730可检索多个影像的一影像,其中上述多个影像预先从上述第一影像传感器或上述第二影像传感器所接收,并满足上述一或多个标准。
[0101]可选地或另外地,在执行一或多个补救动作中,(多个)处理器730可产生一信号以调整上述第一影像传感器或上述第二影像传感器任一或两者的至少一相机曝光、一聚焦、或一讯框率。
[0?02]图8显不依据本揭露的一实施方式的一不范流程800。流程800可包括由一或多个方块810、820和830所表示的一或多个操作、行动或功能。尽管上述流程800被描述为离散方块,但流程800的各方块可取决于所需的实施方式被分割成更多方块或合并成更少方块甚至移除。上述方块可由如图8中所示的顺序或取决于所需实施方式的任何其它顺序来执行。流程800可由设备110、设备120和设备700来实现。在单纯为了说明的目的且不限制本揭露的范畴下,流程800将在以下流程800的内容中被描述,其流程800可通过设备110和设备120在情景图100和/或情景图200中所执行。流程800可起始于方块810。
[0103]在方块810中,流程800可包括设备110接收由设备110的一第一影像传感器在一第一时间中所取得的一第一数据,其中上述第一数据至少包括一影像或视频相关的数据。流程800可从810进行至820。
[0104]在方块820,流程800可包括设备110从设备120无线接收由设备120的一第二影像传感器在一第二时间中所取得的一第二数据,其中上述第二数据至少包括影像或视频相关的数据。设备120的一位置或一地点可不同于设备110的一位置或一地点。第一时间可等同于上述第二时间或不同于上述第二时间且不超过一预定时间差(例如,半秒、一秒或另一合适的期间)。流程800可从820进行至830。
[0105]在方块830中,流程800可包括设备110执行皆使用上述第一数据和上述第二数据作为输入的一任务。
[0106]在一些实施方式中,上述第一数据和上述第二数据任一或两者可更进一步包括一音频数据。
[0107]在一些实施方式中,设备120的定向可不同于设备110的定向。
[0108]在一些实施方式中,在执行上述任务中,流程800可包括设备110通过组合或迭加上述第一数据和上述第二数据产生一合成数据。或者附加地,在执行上述任务中,流程800可包括设备110呈现使用由上述第一数据所描绘的一第一画面和由上述第二数据所描绘的一第二画面的一画中画(口:^1:1^6-;[111;[(31:11代)效果(例如,情景图200)。或者附加地,在执行上述任务中,流程800可包括设备110产生至少使用上述第一数据和上述第二数据的一或多个立体特征(例如,情景图100)。在一些实施方式中,一或多个立体特征可包括一三维(three-dimens1nal,3D)视觉效果。在一些实施方式中,上述三维视觉效果可包括至少一深度图或一三维撷取图。在一些实施方式中,一或多个立体特征可包括至少一快速自动对焦、影像再聚焦、或距离测量。
[0109]在一些实施方式中,设备110和设备120可分别包括一第一相机和一第二相机。上述第一相机及上述第二相机分别对应上述第一影像传感器和上述第二影像传感器。在一些实施方式中,上述任务至少包括运动估计、物体侦测、曝光同步、或颜色同步。
[0110]在一些实施方式中,在执行上述任务中,流程800可包括设备110执行多个操作。举例来说,流程800可包括设备110可根据上述第一数据和上述第二数据的至少一部分产生一第三数据。流程800也可包括设备110可无线传送上述第三数据至一不同于设备110及设备120的第三设备。
[0111]在一些实施方式中,在执行上述任务中,流程800可包括设备110执行多个操作。举例来说,流程800可包括设备110可根据上述第一数据和上述第二数据的至少一部分产生一第三数据。流程800也可包括设备110无线传送上述第三数据至设备120,以控制设备120的一或多个操作。在一些实施方式中,在上述无线传送上述第三数据至设备120以控制设备120的上述一或多个操作中,流程800可包括设备110无线传送上述第三数据至设备120,以控制上述第二数据的连续产生。
[0112]在一些实施方式中,流程800更进一步可包括设备110和设备120其中之一或两者判断上述第一数据和上述第二数据其中之一或两者是否满足一或多个标准。流程800也可包括设备110和设备120其中之一或两者执行一或多个补救动作以响应至少一上述第一数据和上述第二数据不满足上述一或多个标准的一判断。在一些实施方式中,在执行一或多个补救动作中,流程800可包括设备110根据上述第一数据和上述第二数据的至少一部分产生一第三数据。流程800也可包括设备110无线传送上述第三数据至设备120,以控制设备120的一或多个操作。在一些实施方式中,上述判断及执行为由一相同设备或由与设备110和设备120两个不同的设备所执行。在一些实施方式中,在执行上述执行一或多个补救动作中,流程800可包括调整与上述第一数据和上述第二数据其中之一或两者的一或多个相关参数。流程800也可更进一步包括设备110提供一指示至一使用者以请求上述用于调整与上述第一数据和上述第二数据其中之一或两者的上述一或多个相关参数的一输入。
[0113]在一些实施方式中,在执行上述执行一或多个补救动作中,流程800也包括设备110检索多个影像的一影像,其中上述多个影像预先从上述第一影像传感器或上述第二影像传感器所接收,并满足上述一或多个标准。
[0114]在一些实施方式中,设备110及设备120可分别包括一第一相机和一第二相机。上述第一相机和上述第二相机分别对应上述第一影像传感器和上述第二影像传感器。在上述执行上述一或多个补救动作中,流程800可包括设备110产生一信号以调整上述第一影像传感器或上述第二影像传感器任一或两者的至少一相机曝光、一聚焦、或一讯框率。
[0?15]图9显不依据本揭露的一实施方式的一不范流程900。流程900可包括由一或多个方块910、920、930和940所表示的一或多个操作、行动或功能。尽管上述流程900被描述为离散方块,但流程900的各方块可取决于所需的实施方式被分割成更多方块或合并成更少方块甚至移除。上述方块可由如图9中所示的顺序或取决于所需实施方式的任何其它顺序来执行。流程900可由设备110、设备120和设备700来实现。在单纯为了说明的目的且不限制本揭露的范畴下,流程900将在以下流程900的内容中被描述,其流程900可通过设备110和设备120在情景图100和/或情景图200中所执行。流程900可以起始于方块910。
[0116]在方块910中,流程900可包括设备110接收由设备110的一第一影像传感器在一第一时间中所取得的一第一数据,其中上述第一数据至少包括一影像或视频相关的数据。流程900可以从910进行至920。
[0117]在方块920中,流程900可以包括设备110从设备120无线接收由设备120的一第二影像传感器在一第二时间中所取得的一第二数据,其中上述第二数据至少包括影像或视频相关的数据。设备120的一位置或一地点可不同于设备110的一位置或一地点。第一时间可等同于上述第二时间或不同于上述第二时间且不超过一预定时间差。流程900可以从920进行至930。
[0118]在方块930中,流程900可以包括设备110和设备120其中之一或两者判断上述第一数据和上述第二数据其中之一或两者是否满足一或多个标准。流程900可以从930进行至940。
[0119]在方块940中,流程900可以包括设备110和设备120其中之一或两者执行一或多个补救动作,以响应至少一上述第一数据和上述第二数据不满足上述一或多个标准之一判断。
[0120]在一些实施方式中,在执行上述执行一或多个补救动作中,流程900也包括设备110和设备120提供一指示至一使用者以请求与上述第一数据和上述第二数据相关的至少一参数的一调整。或者或附加地,在执行上述执行一或多个补救动作中,流程900也包括设备110和设备120检索多个影像的一影像,其中上述多个影像预先从上述第二影像传感器或上述第一影像传感器所接收,并满足上述一或多个标准。或者或附加地,在执行上述执行一或多个补救动作中,流程900也包括设备110和设备120其中之一或两者产生一信号以调整上述第二影像传感器或上述第一影像传感器任一或两者之至少一相机曝光、一聚焦、或一讯框率。
[0121 ]在一些实施方式中,流程900也可更进一步包括设备110执行一任务,其中上述任务为使用上述第一数据和上述第二数据作为输入以响应上述第一数据和上述第二数据满足上述一或多个标准的一判断。在一些实施方式中,上述第一数据和上述第二数据其中之一或两者包括影像或视频相关的数据,以及其中上述第二数据被取得之一位置或一地点不同于上述第一数据被取得的一位置或一地点。在一些实施方式中,在上述执行上述任务中,流程900可包括呈现使用由上述第一数据所描绘的一第一画面和由上述第二数据所描绘的一第二画面的一画中画效果(例如,情景图200)。在一些实施方式中,在上述执行上述任务中,流程900也可更进一步包括设备110产生使用至少上述第一数据及上述第二数据的一三维视觉效果。在一些实施方式中,上述三维视觉效果包括至少一深度图或一三维撷取图。或者或附加地,在上述执行上述任务中,流程900也可更进一步包括设备110产生至少使用上述第一数据和上述第二数据的一或多个立体特征。在一些实施方式中,上述一或多个立体特征包括至少一快速自动对焦、影像再聚焦、或距离测量。
[0122]在一些实施方式中,设备110和设备120可以分别包括一第一相机和一第二相机。上述第一相机及上述第二相机可以分别对应上述第一影像传感器和上述第二影像传感器。上述任务可至少包括运动估计、物体侦测、曝光同步、或颜色同步。
[0123]本文中描述的方面示出了包括在不同组件中、或与不同组件连接的不同组件。应将理解,所示出的结构仅仅为示意性的,事实上还有很多很多其它的结构可被执行,以达到相同的功效。在一概念意义上,取得相同功效组件的任何配置被有效地「关联」,从而取得期望的功效。因此,不考虑结构或媒介间的组件,本文中组合以取得特定功效的任何两个组件可以视为彼此「相关联」,从而取得期望的功效。同样地,如此关联的任何两个组件也可以视为彼此「可操作连接(operably connected)」或「可操作親接(operably coupled)」以取得期望的功效,并且能够关联的任何两个组件还可以视为彼此「可操作地可连接(operablycouplable) J,以取得期望的功效。可操作地可连接(operably couplable)的特定例子包括但不局限于物理上可成对的和/或物理上相互作用的组件和/或无线可交互和/或无线交互的组件和/或逻辑交互和/或逻辑相互作用性组件。
[0124]再者,关于本文中基本上任何多个和/或单数术语的使用,在适合上下文和/或应用的情况下,本领域技术人员可以将多个转化为单数和/或将单数转化为多个。为清楚起见,本文中可能明确地阐述了各种单数/多个转换。
[0125]此外,本领域技术人员将会理解,一般而言,本文中,特别是所附的权利要求,例如,所附权利要求的主体中,所使用的术语通常意在作为「开放式」术语,例如,术语「包括(including)」应理解为「包括但不局限于」,术语「具有」应理解为「至少具有」,术语「包括(includes)」应理解为「包括但不局限于」等等。本领域技术人员将进一步理解,如果意图是特定数量引入的权利要求叙述,则这样的意图将在权利要求中进行明确地陈述,在没有这样的叙述的情况下,则没有这样的意图。例如,为帮助理解,以下所附的权利要求可能包含对引入性短语「至少一」和「一或多个」的使用,以介绍权利要求叙述。然而,此种短语的使用不应解释为隐含由不定冠词U」或「an」引入的权利要求叙述将包含这种引入的权利要求叙述的任何特定权利要求限制为包含仅仅一个这种叙述的发明,即使当同一权利要求包括引入性短语「一或多个」或「至少一」和如U」或「an」等不定冠词时亦如此,例如,U」或「an」通常应解释为「至少一」或「一或多个」的意思;这同样适用于引入权利要求叙述的不定冠词的使用。另外,即使明确地陈述了特定数量引入的权利要求叙述,本领域技术人员也将认识到这种叙述通常应解释为指至少为所陈述的数量,例如,没有其他修饰语的「两个叙述」这种单纯的叙述通常是指至少两个叙述或者两个以上叙述。此外,在其中采用类似于「A、B和C等中的至少一个」的惯用说法的那些情形中,通常这类修辞意指本领域技术人员会理解该惯用说法,例如,具有「A、B和C等中的至少一系统」会包括但不限于只具有A的系统、只具有B的系统、只具有C的系统、同时具有A和B的系统、同时具有A和C的系统、同时具有B和C的系统和/或同时具有A、B和C的系统等。在其中采用类似于「A、B或C等中的至少一个」的惯用说法的那些情形中,通常这类修辞意指本领域技术人员会理解该惯用说法,例如,「具有A、B或C中的至少一个的系统」包括但不限于只具有A的系统、只具有B的系统、只具有C的系统、同时具有A和B的系统、同时具有A和C的系统、同时具有B和C的系统和/或同时具有A、B和C的系统等。本领域技术人员还应理解,实际上,带出两个以上可选择的术语的任何转折连词和/或短语,无论是在说明书、权利要求还是附图中,都应被理解为设想了包括这些术语之一、这些术语中的任一个或者全部这些术语的可能。例如,短语「A或B」将被理解为包括「A」或「B」或者「A和B」的可能。
[0126]从上述可知,应可理解的是,本揭露内容的各种实施方式出于说明的目的已描述于本文中,并且各种修改可在不脱离本揭露的范围和精神下而进行。因此,本揭露的各种实施方式并不意在进行限制,真正的范围和精神系由下面的权利要求所指示。
【主权项】
1.一种方法,包括: 通过一第一设备接收由上述第一设备的一第一影像传感器在一第一时间中所取得的一第一数据,其中上述第一数据至少包括一影像或视频相关的数据; 通过上述第一设备从一第二设备无线接收由上述第二设备的一第二影像传感器在一第二时间中所取得的一第二数据,其中上述第二数据至少包括影像或视频相关的数据;其中上述第二设备的一位置或一地点不同于上述第一设备的一位置或一地点,其中上述第一时间等同于上述第二时间或不同于上述第二时间且不超过一预定时间差;以及 通过上述第一设备的一或多个处理器执行皆使用上述第一数据和上述第二数据作为输入的一任务。2.如权利要求1所述的方法,其中上述第一数据和上述第二数据任一或两者更进一步包括一音频数据。3.如权利要求1所述的方法,其中上述第二设备的一定向不同于上述第一设备的一定向。4.如权利要求1所述的方法,其中上述执行上述任务包括:通过组合或迭加上述第一数据和上述第二数据产生一合成数据。5.如权利要求1所述的方法,其中上述执行上述任务包括:呈现使用由上述第一数据所描绘的一第一画面和由上述第二数据所描绘的一第二画面的一画中画效果。6.如权利要求1所述的方法,其中上述执行上述任务包括:产生至少使用上述第一数据和上述第二数据的一或多个立体特征。7.如权利要求6所述的方法,其中上述一或多个立体特征包括一三维视觉效果。8.如权利要求7所述的方法,其中上述三维视觉效果包括至少一深度图或一三维撷取图。9.如权利要求6所述的方法,其中上述一或多个立体特征包括至少一快速自动对焦、影像再聚焦、或距离测量。10.如权利要求1所述的方法,其中上述第一设备和上述第二设备分别包括一第一相机和一第二相机,上述第一相机及上述第二相机分别对应上述第一影像传感器和上述第二影像传感器。11.如权利要求10所述的方法,其中,上述任务至少包括运动估计、物体侦测、曝光同步、或颜色同步。12.如权利要求1所述的方法,其中上述执行上述任务包括: 根据上述第一数据和上述第二数据的至少一部分产生一第三数据;以及 无线传送上述第三数据至不同于上述第一设备和上述第二设备的一第三设备。13.如权利要求1所述的方法,其中上述执行上述任务包括: 根据上述第一数据和上述第二数据的至少一部分产生一第三数据;以及 无线传送上述第三数据至上述第二设备,以控制上述第二设备的一或多个操作。14.如权利要求13所述的方法,其中上述无线传送上述第三数据至上述第二设备以控制上述第二设备的上述一或多个操作包括:无线传送上述第三数据至上述第二设备,以控制上述第二数据的连续产生。15.如权利要求1所述的方法,更包括: 通过上述第一设备和第二设备其中之一或两者判断上述第一数据和上述第二数据其中之一或两者是否满足一或多个标准;以及 通过上述第一设备和第二设备其中之一或两者执行一或多个补救动作以响应至少一上述第一数据和上述第二数据不满足上述一或多个标准之一判断。16.如权利要求15所述的方法,其中上述执行上述一或多个补救动作包括: 由上述第一设备根据上述第一数据和上述第二数据的至少一部分产生一第三数据;以及 通过上述第一设备无线传送上述第三数据至上述第二设备,以控制上述第二设备的一或多个操作。17.如权利要求15所述的方法,其中上述判断及执行由一相同设备或由与上述第一设备和上述第二设备两个不同的设备所执行。18.如权利要求15所述的方法,其中上述执行一或多个补救动作包括:调整与上述第一数据和上述第二数据其中之一或两者的一或多个相关参数。19.如权利要求18所述的方法,更包括: 提供一指示至一使用者以请求上述用于调整与上述第一数据和上述第二数据其中之一或两者的上述一或多个相关参数的一输入。20.如权利要求15所述的方法,其中上述执行一或多个补救动作包括:检索多个影像的一影像,其中上述多个影像预先从上述第一影像传感器或上述第二影像传感器所接收,并满足上述一或多个标准。21.如权利要求15所述的方法,其中上述第一设备和上述第二设备分别包括一第一相机和一第二相机,上述第一相机和上述第二相机分别对应上述第一影像传感器和上述第二影像传感器,其中上述执行上述一或多个补救动作包括:产生一信号以调整上述第一影像传感器或上述第二影像传感器任一或两者的至少一相机曝光、一聚焦、或一讯框率。22.一种方法,包括: 通过一第一设备接收由上述第一设备的一第一影像传感器在一第一时间中所取得的一第一数据,其中上述第一数据至少包括一影像或视频相关的数据; 通过上述第一设备从一第二设备无线接收由上述第二设备的一第二影像传感器在一第二时间中所取得的一第二数据,其中上述第二数据至少包括影像或视频相关的数据;其中上述第二设备的一位置或地点不同于上述第一设备的一位置或地点,其中上述第一时间等同于上述第二时间或不同于上述第二时间且不超过一预定时间差; 通过上述第一设备和第二设备其中之一或两者判断上述第一数据和上述第二数据其中之一或两者是否满足一或多个标准;以及 通过上述第一设备和第二设备其中之一或两者执行一或多个补救动作以响应至少一上述第一数据和上述第二数据不满足上述一或多个标准之一判断;以及 通过上述第一设备的一或多个处理器执行皆使用上述第一数据和上述第二数据作为输入的一任务。23.如权利要求22所述的方法,其中上述执行上述一或多个补救行动补救动作包括:提供一指示至一使用者以请求与上述第一数据和上述第二数据相关的至少一参数的一调整。24.如权利要求22所述的方法,其中上述执行上述一或多个补救动作包括:检索多个影像的一影像,其中上述多个影像预先从上述第二影像传感器或上述第一影像传感器所接收,并满足上述一或多个标准。25.如权利要求22所述方法,其中上述执行上述一或多个补救动作包括:产生一信号以调整上述第二影像传感器或上述第一影像传感器任一或两者的至少一相机曝光、一聚焦、或一讯框率。26.如权利要求22所述的方法,更包括: 执行一任务,其中上述任务使用上述第一数据和上述第二数据作为输入以响应上述第一数据和上述第二数据满足上述一或多个标准之一判断。27.如权利要求24所述的方法,其中上述第一数据和上述第二数据其中的一或两者包括影像或视频相关的数据,以及其中上述第二数据被取得的一位置或一地点不同于上述第一数据被取得的一位置或一地点。28.如权利要求26所述的方法,其中上述执行上述任务包括:呈现使用由上述第一数据所描绘的一第一画面和由上述第二数据所描绘的一第二画面的一画中画效果。29.如权利要求26所述的方法,其中上述执行上述任务包括:产生使用至少上述第一数据及上述第二数据的一三维视觉效果。30.如权利要求29所述的方法,其中上述三维视觉效果包括至少一深度图或一三维撷取图。31.如权利要求26所述的方法,其中上述执行上述任务包括:产生至少使用上述第一数据和上述第二数据的一或多个立体特征。32.如权利要求31所述的方法,其中上述一或多个立体特征包括至少一快速自动对焦、影像再聚焦、或距离测量。33.如权利要求22所述的方法,其中上述第一设备和上述第二设备分别包括一第一相机和一第二相机,上述第一相机及上述第二相机分别对应上述第一影像传感器和上述第二影像传感器,以及其中上述任务至少包括运动估计、物体侦测、曝光同步、或颜色同步。34.一第一设备,包括: 一第一影像传感器; 一内存,配置用以储存至少一数据或一或多组指令在其中;以及一或多个处理器,耦接以存取储存在上述内存中的上述数据或上述一或多组指令,上述一或多个处理器被配置用以执行操作,包括: 接收由一第二设备的一第二影像传感器在一第二时间中所取得的一第二数据,上述第二数据由上述第二设备无线传送; 接收由上述第一影像传感器在一第一时间中所取得的一第一数据;以及 执行使用至少上述第二数据和上述第一数据作为输入的一任务, 其中上述第一数据至少包括影像或视频相关的数据, 其中上述第二数据至少包括影像或视频相关的数据, 其中上述第二设备的一位置或一地点不同于上述第一设备的一位置或一地点,其中上述第一时间等同于上述第二时间或不同于上述第二时间且不超过一预定时间差。35.如权利要求34所述的第一设备,其中上述第一数据和上述第二数据任一或两者更进一步包括一音频数据。36.如权利要求34所述的第一设备,其中上述第二设备当上述第二数据被取得时的一定向不同于上述第一设备当上述第一数据被取得时的一定向。37.如权利要求34所述的第一设备,其中,在执行上述任务时,上述一或多个处理器被配置用以通过组合或迭加上述第一数据和上述第二数据产生一合成数据。38.如权利要求34所述的第一设备,其中,在执行上述任务时,上述一或多个处理器被配置用以呈现使用由上述第一数据所描绘的一第一画面和由上述第二数据所描绘的一第二画面的一画中画效果。39.如权利要求34所述的第一设备,其中,在执行上述任务时,上述一或多个处理器被配置用以产生至少使用上述第一数据和上述第二数据的一或多个立体特征。40.如权利要求39所述的第一设备,其中上述一或多个立体特征包括一三维视觉效果。41.如权利要求40所述的第一设备,其中上述三维视觉效果包括至少一深度图或一三维撷取图。42.如权利要求39所述的第一设备,其中上述一或多个立体特征包括至少一快速自动对焦、影像再聚焦、或距离测量。43.如权利要求34所述的第一设备,其中,在执行上述任务时,上述一或多个处理器被配置用以执行至少一运动估计、物体侦测、曝光同步、或颜色同步。44.如权利要求34所述的第一设备,其中,在执行上述任务时,上述一或多个处理器被配置用以执行操作包括: 根据上述第一数据和上述第二数据的至少一部分产生一第三数据;以及 无线传送上述第三数据至一不同于上述第一设备和上述第二设备的第三设备。45.如权利要求34所述的第一设备,其中,在执行上述任务时,上述一或多个处理器被配置用以执行操作包括: 根据上述第一数据和上述第二数据的至少一部分产生一第三数据;以及 无线传送上述第三数据至上述第二设备,以控制上述第二设备的一或多个操作。46.如权利要求45所述的第一设备,其中,在无线传送上述第三数据至上述第二设备,以控制上述第二设备的上述一或多个操作时,上述一或多个处理器被配置用以无线传送上述第三数据至上述第二设备,以控制上述第二数据的连续产生。47.如权利要求34所述的第一设备,其中上述一或多个处理器被配置用以执行操作包括: 判断上述第一数据和上述第二数据其中之一或两者是否满足一或多个标准;以及 执行一或多个补救动作以响应至少一上述第一数据和上述第二数据不满足上述一或多个标准的一判断。48.如权利要求47所述的第一设备,其中,在执行上述一或多个补救动作中,上述一或多个处理器被配置用以执行操作包括: 根据上述第一数据和上述第二数据的至少一部分产生一第三数据;以及 无线传送上述第三数据至上述第二设备,以控制上述第二设备的一或多个操作。49.如权利要求47所述的第一设备,其中,在执行上述一或多个补救动作中,上述一或多个处理器被配置用以调整与上述第一数据和上述第二数据其中的一或两者的一或多个相关参数。50.如权利要求49所述的第一设备,其中上述一或多个处理器被配置用以执行操作包括: 提供一指示至一使用者以请求上述用于调整与上述第一数据和上述第二数据其中的一或两者的上述一或多个相关参数的一输入。51.如权利要求47所述的第一设备,其中,在执行上述一或多个补救动作中,上述一或多个处理器被配置用以检索多个影像的一影像,其中上述多个影像预先从上述第一影像传感器或上述第二影像传感器所接收,并满足上述一或多个标准。52.如权利要求47所述的第一设备,其中,在执行上述一或多个补救动作中,上述一或多个处理器被配置用以产生一信号以调整上述第一影像传感器或上述第二影像传感器任一或两者的至少一相机曝光、一聚焦、或一讯框率。
【文档编号】H04N5/262GK105827948SQ201610042280
【公开日】2016年8月3日
【申请日】2016年1月21日
【发明人】陈九如, 郑升弘
【申请人】联发科技股份有限公司