增加显示的方法和装置的制造方法
【技术领域】
[0001]本发明涉及用于在环境尤其是运输工具周围环境的至少一个图像中增加显示至少一个附加信息的方法。本发明还涉及用于执行该方法的装置。
【背景技术】
[0002]增加显示装置使所产生的附加信息与被记录下的可感知的周围环境叠加。此时，附加信息被位置准确地显示在环境图像中，在此，环境图像出现在背景中。这样的装置例如是半透光的显示单元如HUP显示单元(HUP =平视显示器)、HMD显示单元(HMD =头戴式显示器)或不透光的显示单元如常见的显示屏。
[0003]这样的用于增加显示的装置例如由DE 10 2011 115 739 Al公开。
【发明内容】
[0004]本发明任务在于:提出用于增加显示至少一个附加信息的改善方法和改善装置。
[0005]关于方法，本发明通过权利要求1的特征来完成该任务。关于装置，本发明通过权利要求10的特征来完成该任务。
[0006]有利的实施方式是从属权利要求的主题。
[0007]在根据本发明的用于在环境尤其是运输工具环境的至少一个图像中增加显示至少一个附加信息的方法中，该图像构成显示器的背景，其中，多个待显示的附加信息被汇集成至少一组且作为分组信息在背景中被叠加输出。
[0008]本发明允许连续调整虚拟附加信息的显现。尤其允许可快速识别地将虚拟附加信息与真实环境中的真实物体对应起来，尤其在动态场景如在依靠真正运输工具的行驶中所拍摄的且在显示器上发布的视频序列的情况下。另外，本发明允许与分组虚拟附加信息的直观互动，以清楚看到所有的或仅相关的或观看者所挑选的附加信息的内容。
[0009]本发明可被用在运输工具中用于掌握和显示运输工具环境。另外，本发明也可以被用在移动装置例如手机、数据智能眼镜和/或虚拟显示器如投影屏幕和其它目的如广告、行人导航或交通工具如公共汽车、火车、飞机和船舶中的显示器。在此，根据背景和/或根据事件和/或根据状况来对叠加的附加信息进行调整。
[0010]在一个改进方案中，多个待显示的附加信息如此作为分组信息来发布，即各个附加信息重叠且相互部分或完全覆盖地被输出。通过人工选择或事件控制地选择隐藏附加信息的未遮盖区，它能作为第一附加信息在前景输出。例如可在到达对应的真实物体时由事件控制地和/或与距离相关地在前景输出尤其近距真实物体的附加信息，和/或与预定相关性和/或优先性相关地在前景输出原先隐藏的附加信息。因此，在显示多个附加信息时可实现级别顺序或优先性顺序，在此级别顺序或优先性顺序可以人工或由事件控制和/或取决于状况地来预定。
[0011]替代地或补充地，将来待显示的附加信息可以汇集在第一组中并作为第一分组信息来输出。因此，例如距参考点且尤其是真正运输工具的当前位置较远的物体被汇集在第一组中。接着，随着真正的运输工具接近，该分组附加信息尤其在真正运输工具到达其真实位置时可以被完全读取且例如在背景中被单独地并排和/或重叠输出。
[0012]另外规定，替代地或补充地，当前待显示的附加信息被汇集在第二组内且作为第二分组信息来输出。这给了观看者以下可能用以改善显示器的清晰性:例如仅发布在时间上和/或地点上在前且因而属于将来的虚拟附加信息。当前待显示的虚拟附加信息被部分或完全重叠地汇集在分组信息中并输出，以减小显示器中的信息密度。
[0013]还可行的是，过去的例如过去所显示的虚拟附加信息被汇集在第三组中且作为第三分组信息来发布。由此，观看者可根据需要通过简单选择第三分组信息来回顾过去所显示的虚拟附加信息。
[0014]在一个改进方案中，至少其中一组的附加信息是按照根据至显示器观看者位置的距离且尤其是至真正运输工具的位置的距离和/或根据在显示器背景中的相应显示时长来排序的方式汇集的，并且作为相关分组信息来输出。因此，属于一组的附加信息可以按照根据至参考点如真正运输工具的距离来排序的方式汇集，并且或许被输出，从而附加信息的输出以时序正确的方式进行。
[0015]本发明还允许通过下述方式与显示器动态互动:在背景中输出的附加信息可以手动借助至少一个选择功能被操控且其在背景中的输出可被相应改变或调整。尤其是，有待输出的附加信息的输出和/或操控可借助语音控制、图像控制和/或按键控制的功能来完成。
[0016]在一个可能的实施方式中，附加信息作为附加物体和/或附加文本来输出，其中，至少一个附加物体是按照与所示环境关联或不关联(上下文关联)的方式来生成作为虚拟交通指示牌的。尤其在本发明被应用在运输工具显示器中时，真正运输工具的当前位置作为参考点。
[0017]还可以规定，附加信息尤其由事件控制地且或许交替地作为两维显示和/或三维显示来输出。因此，例如作为附加对象输出的附加信息如虚拟交通指示牌以三维显示方式和/或作为附加文本输出的附加信息且尤其是输出图像中的真实物体或虚拟物体的标题以两维显示方式被显现在背景中。这提高显示明晰性并允许背景中相关信息的更好察觉和可识别性。
[0018]用于执行方法的装置包括用于记录并获得构成显示器背景的环境图像的至少一个采集单元、用于图形处理所记录的数字图像且将数字图像转换成输出图像以及在背景中产生并叠加至少一个附加信息的至少一个处理单元和用于在背景中输出附加信息的至少一个输出单元。
[0019]该采集单元尤其是一个或多个照相机且尤其是立体照相机系统、全方位照相机、红外照相机、激光扫描单元、雷达、激光雷达或相似采集单元的组合。该处理单元可以被集成在采集单元内或单独构成。该处理单元可以是集成电路或控制装置或其它合适的图像处理单元。该输出单元可以是经典的屏幕、HUP显示单元(HUP =平视显示器)、HMD显示单元(HMD =头戴式显示器)或其它合适的显示单元。
[0020]在根据本发明的、在至少一个所拍摄的运输工具环境数字图像中增加显示至少一个附加信息的另一方法中，由事件控制地存储以下内容:
[0021]所拍摄的数字图像；
[0022]对应的采集时刻;和
[0023]至少作为运输工具参数的运输工具对应当前位置，
[0024]其中，所述数字图像的存储根据所确定的事件和所拍摄的数字图像在地点和/或时间方面受限制地进行，和/或其中，至少一个事件的所存储的数字图像作为输出图像在显示器上输出。
[0025]利用本发明获得的优点尤其在于:直观感觉到真实环境与虚拟附加信息之间的关系，尤其是因为多个待显示的虚拟附加信息汇集在分组信息中而可以实现改善的明晰性。另外，可以实现虚拟附加信息在显示器中的时序正确且因而按照时序的显示。另外，该显示可以根据事件和/或状况来调整且附加信息可以关于某个事件被单独输出。
[0026]当将增加显示方法用在运输工具中时，虚拟附加信息直接对应于可让驾驶员看到的交通工具环境的周边，在这里，根据本发明的附加信息如附加物体/附加文本的“减化”增加显示是通过汇集多个附加信息在多个经排序的组中来实现的。在此，待显示的/所显示的附加信息能汇集在以下组中:
[0027]-预告组(=第一组):其显示即将来临的附加信息；
[0028]-当前组(=第二组):当前在运输工具环境中可看到的附加信息；
[0029]-回顾组(=第三组):其不久前已在显示器中看到的附加信息。
[0030]以下的组内排序是可行的:
[0031]-根据距参考点即运输工具的距离来对附加信息排序；
[0032]-根据附加信息在显示器中的滞留时间来排序。
[0033]为了在时间上和内容上互动和操控环境输出图像内的附加信息的输出/成像，给乘客提供了不同功能，如“暂停当前输出的附加信息和/或输出图像的序列”(=暂停相关视频序列)、“回放”、“分组/附加信息”和“内部视图” O
【附图说明】
[0034]以下将结合附图来详述本发明的多个实施例。
[0035]其中:
[0036]图1A示意性示出用于在背景中增加显示附加信息的装置，
[0037]图1B示意性示出具有多个采集单元的运输工具，
[0038]图2是示意性示出用于包含叠加的两维附加信息的背景的一个实施例，所述两维附加信息与图像对象有关联或无关联地就位在背景中，
[0039]图3示意性示出包含叠加的两维附加信息的背景的另一个实施例，所述两维附加信息与图像对象有关联或无关联地就位在背景中，其中，至少两个输出的附加信息是相互关联的，
[0040]图4示意性示出用于包含分组附加信息的背景的另一个实施例，
[0041]图5示意性示出用于包含时序准确地输出的分组附加信息的背景的另一个实施例，
[0042]图6示意性示出用于包含叠加的两维和三维附加信息的背景的另一个实施例，其包括在显示器内的互动按键，用于输出与其中一个所选附加信息相关联的其它附加信息，
[0043]图7示意性示出用于包含叠加的两维和三维附加信息的背景的另一个实施例，其包括在显示器内的互动按键，用于输出与其中一个所选附加信息相关联的其它附加信息，以及
[0044]图8