首页 专利交易 科技果 科技人才 科技服务 商标交易 会员权益 IP管家助手 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索

【发明授权】场景图像分析模块_依视路国际公司_201680025818.6 

申请/专利权人:依视路国际公司

申请日:2016-06-03

公开(公告)日:2024-06-18

公开(公告)号:CN107533375B

主分类号:G06F3/01

分类号:G06F3/01

优先权:["20150629 EP 15306024.9"]

专利状态码:有效-授权

法律状态:2024.06.18#授权;2018.03.13#专利申请权的转移;2018.01.26#实质审查的生效;2018.01.02#公开

摘要:本发明涉及一种分析模块10,所述分析模块包括:‑通信部件12,所述通信部件被安排成用于从安装在头戴式设备20上的场景相机18接收场景图像,所述场景图像对应于使用者戴着所述头戴式设备20时所述使用者面对的环境的图像,‑图像分析部件14,所述图像分析部件被安排成用于从自所述场景相机18所接收到的图像的预限定的分析区28中的预限定元素清单中标识至少一个预限定元素、并且基于所标识的至少一个预限定元素来分析所述场景图像的至少一部分,以及‑反馈部件16,所述反馈部件被安排成用于产生反馈数据并且将这种数据发送至所述头戴式设备20。

主权项:1.一种分析模块10,包括:-通信部件12,所述通信部件被安排成用于从安装在头戴式设备20上的场景相机18接收场景图像,所述场景图像对应于所述头戴式设备20的使用者在戴着所述头戴式设备时所述使用者面对的环境的图像,-图像分析部件14,所述图像分析部件被安排成用于从落入所述场景相机18所接收到的场景图像的预限定的分析区28的边界内的预限定元素清单中标识至少一个预限定元素,所述场景图像被分为至少两个区域:预限定的分析区28和与预限定的分析区28互补的区,并且所述预限定的分析区28是所接收的场景图像的一部分,并且基于所标识的至少一个预限定元素来分析所述场景图像的至少一部分,-头部移动检测部件34,所述头部移动检测部件被安排成用于检测所述头戴式设备20的所述使用者的头部移动,并且其中,所述图像分析部件14被安排成用于在检测到所述使用者的稳定头部姿势后分析所述场景图像的至少一部分,以及-反馈部件16,所述反馈部件被安排成用于基于对所述场景图像的至少一部分的分析来产生反馈数据,并且将这种数据发送至所述头戴式设备20的所述使用者,其中所述预限定的分析区28对于由图像分析部件14所分析的所有场景图像是相同的。

全文数据:场景图像分析模块技术领域[0001]本发明涉及一种被安排成用于基于场景图像的分析向头戴式设备的使用者产生反馈的分析模块。[0002]本发明进一步涉及一种包括根据本发明的分析模块的头戴式设备。背景技术[0003]通常,视觉受损者需要视觉帮助和或音频帮助来更好地理解现实世界。[0004]头戴式设备可以满足这样的要求。[000^]_然而,实际头戴式设备对分析这样的头戴式设备的使用者面对的环境不是最佳的。实际上,这样的设备包括较长的计算时间、延长的使用者响应时间、以及手动确认。而且,这样的设备与使用者的观察能力不相适配。[0006]因此,需要提供一种头戴式设备,所述头戴式设备与使用者相适配并且尤其被适配成用于根据使用者的观察能力、基于所标识的预限定元素来自动分析使用者面对的场景图像。发明内容[0007]为此,本发明提出了一种分析模块,所述分析模块包括:[0008]-通信部件,所述通信部件被安排成用于从安装在头戴式设备上的场景相机接收场景图像,所述场景图像对应于使用者戴着所述头戴式设备时所述使用者面对的环境的图像;[0009]-图像分析部件,所述图像分析部件被安排成用于从自所述场景相机所接收到的图像的预限定的分析区中的预限定元素清单中标识至少一个预限定元素、并且基于所标识的至少一个预限定元素来分析所述场景图像的至少一部分;以及[0010]-反馈部件,所述反馈部件被安排成用于基于对所述场景图像的至少一部分的分析来产生反馈数据、并且将这种数据发送至所述头戴式设备的所述使用者。[0011]有利的是,根据本发明的分析模块允许对所述头戴式设备的使用者面对的环境进行相关分析。实际上,所述图像分析部件和所述反馈部件允许根据使用者的需要、基于预限定元素对头戴式设备的使用者面对的场景图像进行自动、快速、且最佳分析。[0012]根据实施例,根据本发明的分析模块可以进一步包括以下特征之一或其任何可能的组合:[0013]-所述通信部件被安排成用于实时接收场景图像,所述图像分析部件被安排成用于标识至少一个预限定元素并且实时分析所述场景图像的至少一部分,并且所述反馈部件被安排成用于实时产生并发送反馈数据;和或[0014]-所述图像分析部件被安排成用于在预限定时间段内在所述预限定的分析区中标识所述至少一个预限定元素后,分析所述场景图像的至少一部分;和或[0015]-所述图像分析部件被安排成用于在所述头戴式设备的所述使用者确认后分析所述场景图像的至少一部分;和或[0016]-所述分析模块进一步包括头部移动检测部件,所述头部移动检测部件被安排成用于检测所述头戴式设备的所述使用者的头部移动,并且其中,所述图像分析部件被安排成用于在检测到所述使用者的稳定头部姿势后分析所述场景图像的至少一部分;和或[0017]-所述分析模块进一步包括眼睛跟踪设备,所述眼睛跟踪设备被安排成用于跟踪所述头戴式设备的所述使用者的眼睛移动,并且其中,所述图像分析部件被安排成用于在检测到所述使用者正注视与所述预限定的分析区相对应的方向后分析所述场景图像的至少一部分;和或[0018]-所述预限定元素至少包括书写字符,并且对所述场景图像的分析至少包括文本识别;和或[0019]-所述预限定元素至少包括人脸,并且对所述场景图像的分析至少包括脸部识别;和或[0020]-所述预限定元素至少包括交通灯,并且对所述场景图像的分析至少包括颜色识另IJ;和或[0021]-所述预限定元素至少包括路标,并且对所述场景图像的分析至少包括文本或标志识别;和或[0022]-所述反馈部件被安排成用于通过对从所述头戴式设备的场景相机接收到的所述场景图像应用图像处理来向所述使用者提供视觉反馈;和或[0023]-所述反馈部件被安排成用于通过对从所述头戴式设备的场景相机接收到的所述场景图像应用图像处理来向所述使用者提供视觉反馈;和或[0024]-从包括以下各项的清单中选择所述图像处理:放大、边缘增强、颜色重新映射、文本识别、图案识别、对比度增强、以及亮度增强;和或[0025]-所述反馈部件被安排成用于向所述使用者提供音频反馈。[0026]本发明还涉及一种头戴式设备,所述头戴式设备包括:[0027]-被适配成有待配戴在使用者的头部上的框架;[0028]-场景相机,所述场景相机被固定至所述框架上并且被适配成用于获取当戴着所述头戴式设备时所述使用者面对的环境的场景图像,以及[0029]-通信单元,所述通信单元被安排成用于将所述场景图像发送至根据以上权利要求中任一项所述的分析模块。[0030]根据实施例,根据本发明的头戴式设备可以进一步包括以下特征之一或其任何可能的组合:[0031]-所述头戴式设备进一步包括根据本发明的分析模块,[0032]-所述头戴式设备进一步包括输出设备,所述输出设备被安排成用于基于所述反馈部件发送的反馈数据向所述使用者输出信号,[0033]-所述输出设备是显不设备和或首频输出设备。[0034]如从以下讨论中明显的是,除非另有具体规定,否则应认识到,贯穿本说明书,使用如“运算”、“计算”、或类似术语的讨论是指计算机或计算系统或类似的电子计算设备的动作和或过程,所述动作和或过程对在所述计算系统的寄存器和或存储器内表现为物理(如电子量的数据进行操纵和或将其转换成在所述计算系统的存储器、寄存器或其他此类信息存储、传输或显示设备内类似地表现为物理量的其他数据。[0035]本发明的实施例可以包括用来执行在此所述操作的装置。此设备可以是为所期望的目的而专门构建的,或此装置可以包括通用计算机或被储存在计算机中的计算机程序选择性地激活或重新配置的数字信号处理器(“DSP”)。这种计算机程序可以存储在计算机可读存储介质中,如但不限于任何类型的磁盘,包括软盘、光盘、CD-ROM、磁光盘、只读存储器ROM、随机存取存储器RAM、电可编程只读存储器EPROM、电可擦除可编程只读存储器EEPR0M、磁性或光学卡,或任何其他类型的适合于存储电子指令并且能够耦联到计算机系统总线上的介质。[0036]此处所提出的方法和显示器并非本来就与任何具体的计算机或其他装置相关。各种通用系统都可以与根据此处的教导的程序一起使用,或者其可以证明很方便地构建一个更专用的装置以执行所期望的方法。各种这些系统所期望的结构将从以下描述中得以明了。[0037]此外,并没有参考任何具体的编程语言描述本发明的实施例。将认识到的是,各种编程语言都可以用来实现如在此描述的本发明的传授内容。附图说明[0038]本发明的其他特征和优点将从权利要求书和以下通过实例而不限于参照附图给出的一些实施例的描述中变得清楚,在附图中:[0039]-图1展示了根据本发明的分析模块的实施例,[0040]-图2表示与使用者戴着根据本发明的头戴式设备时所述使用者面对的环境的图像相对应的示意性场景图像,[0041]-图3表示根据本发明的头戴式设备的实施例,[0042]-图4表示根据本发明的联网数据处理设备,并且[0043]-图5表示根据本发明的进一步实施例的头戴式设备的一部分的示意性表示。具体实施方式[0044]附图中的元件仅是为了简洁和清晰而展示的并且不一定是按比例绘制的。例如,图中的一些元件的尺寸可以相对于其他尺寸被放大,以便帮助提高对本发明的实施例的理解。[0045]图1展示了根据本发明的分析模块10。分析模块10包括通信部件12、图像分析部件14、以及反馈部件16。[0046]通信部件12被安排成用于从安装在头戴式设备20上的场景相机18接收场景图像。所述场景图像与使用者戴着头戴式设备20时所述使用者面对的环境的图像相对应。[0047]场景图像26被划分为至少两个区:预限定的分析区28以及与预限定的分析区28互补的区。例如,如图2所示,预限定的分析区28与场景图像26的右上侧相对应。[0048]对于分析模块10分析的所有场景图像,预限定的分析区28是相同的。[0049]根据本发明的实施例,预限定的分析区28可以是整个场景图像。[0050]在优选的实施例中,预限定的分析区28是场景图像的一部分,以减少计算时间并且对头戴式设备20的使用者提供快速响应。[0051]预限定的分析区28可以与头戴式设备20的使用者相适配。[0052]而且,预限定的分析区28可以由头戴式设备20的使用者进行配置。例如,所述配置可以通过使用经由蓝牙连接的计算机与头戴式设备20通信来实现。使用者可以例如用计算机鼠标、或者通过输入坐标、或者利用眼睛跟踪设备来指示预限定的分析区28。因此,预限定的分析区28的大小和位置可以由头戴式设备20的使用者来定制。在配置过程中,可以使用像计算机屏幕或电视一样的外部屏幕、或安装在头戴式设备20上的显示设备。这个显示设备可以在配置之后被移除、或者不在标准系统使用过程中使用,以节省电池寿命并且不扰乱标准视力。例如,它可以仅在预限定的分析区28中检测到预限定元素时激活。[0053]图像分析部件14被安排成用于从场景相机18接收到的图像的预限定的分析区28中的预限定元素清单中标识至少一个预限定元素。图像分析部件14进一步被安排成用于基于所标识的至少一个预限定元素来分析所述场景图像的至少一部分。[00M]在优选的实施例中,图像分析部件14被安排成用于基于所标识的至少一个预限定元素来分析所述场景图像的预限定的分析区28。'[0055]这些预限定兀素可以被划分为不同的预限定元素类别。例如,所述预限定元素类别可以是书写字符、人脸、交通灯、或路标。[0056]每个预限定元素类别可以包括不同的预限定子元素。例如,路标类别可以包括停车标志、禁入标志、或人行横道标志。作为进一步的实例,所述书写字符类别可以是字典中的常见字清单,或者人脸类别可以包括头戴式设备的使用者的朋友和或熟人的脸部。交通灯类别可以例如包括一个预限定元素、三色交通灯。[0057]预限定元素可以各自对应一种分析,例如像文本识别、脸部识别、颜色识别、或标志识别。[0058]所述预限定元素可以至少包括书写字符。例如,如果使用者正在阅读,则他将书写字符放在预限定的分析区28中并且其头部停止移动以分析场景图像。在这种情况下,对所述场景图像的分析可以至少包括文本识别。所述文本识别可以包括例如对文字、空格、大写字母、标点符号、书写字符颜色的检测和或识别。[0059]所述预限定元素可以进一步至少包括人脸。作为实例,如果使用者想要识别熟人,则他将人脸放在预限定的分析区28中并且使他的头部不移动以分析场景图像。在这种情况下,所述场景图像的分析可以进一步至少包括脸部识别。脸部识别可以包括对头发颜色、眼睛颜色、脸形和边缘等的检测和或识别以将自动脸部识别的结果与预限定的脸部数据库进行比较。[0060]所述预限定元素还可以至少包括交通灯。举例而言,考虑了如果使用者正在行走并且想要穿过街道,则他将交通灯放在预限定的分析区28中并且使他的头部停止移动。在这种情况下,所述场景图像的分析还可以至少包括颜色识别。所述颜色识别可以包括对绿色或红色的与亮度分析相关联的检测和或识别。[0061]所述预限定元素可以进一步至少包括路标。在这种情况下,对所述场景图像的分析可以进一步至少包括文本和或标志识别。标志识别可以包括对标志颜色、标志形式、标志图案等的检测和或识别以将自动标志识别的结果与预限定路标清单进行比较。[0062]在优选的实施例中,所述预限定元素至少包括书写字符和人脸以及交通灯和路标,并且所述场景图像的分析至少包括文本识别和脸部识别以及颜色识别和标志识别。[0063]所述预限定元素清单明显不限于以上引用的元素、而是可以包括其他元素。[0064]所述预限定元素可以是包含在元素数据库中、和或元素清单中、或任何可能的元素索引中的元素。[0065]在优选的实施例中,所述预限定元素包含在预限定元素清单中。[0066]如果所述预限定元素清单包括仅一个预限定元素,则图像分析部件14可以被安排成用于在从场景相机18接收到的图像的预限定的分析区28中标识预限定元素。例如,分析模块10可以被配置成用于仅分析书写字符,并且因此头戴式设备的使用者可以仅在他想要阅读时使用它。[0067]所述预限定元素清单可以存储在图像分析部件14中、和或远程实体例如,智能电话、触摸板、计算机、或互联网)中所包括的存储器中。[0068]在优选的实施例中,所述预限定元素清单存储在图像分析部件14中。[0069]而且,当所述预限定元素清单没有存储在分析模块10中时,所述通信部件还可以被安排成用于访问所述预定元素清单。[0070]所述预限定元素清单还可以由头戴式设备20的使用者给出和或完善。[0071]有利的是,图像分析部件14可以被安排成用于在预限定的时间段内在预限定的分析区28中标识所述至少一个预限定元素后,分析所述场景图像的至少一部分。[0072]所述预限定的时间段被限定为:使用者应将预限定元素维持在预限定的分析区28或任何预限定区中而不使其头部移动以使图像分析部件14开始分析场景图像的时间。[0073]所述预限定的时间段可以为2秒或3秒。有利的是,所述预限定的时间段大于或等于一秒。[0074]根据本发明的实施例,图像分析部件14可以被安排成用于在预限定时间段内在所述预限定的分析区中标识所述至少一个预限定元素后,分析整个场景图像。例如,如果使用者将预限定元素放在预限定的分析区28的边界处,或者如果预限定元素超出预限定的分析区28,则图像分析部件14可能分析整个场景图像。[0075]在优选的实施例中,图像分析部件14被安排成用于在预限定的时间段内在所述预限定的分析区中标识至少一个预限定元素后,分析所述场景图像的预限定的分析区,以减少计算时间并且对头戴式设备的使用者提供快速响应。[0076]图像分析部件可以进一步被安排成用于在所述头戴式设备的使用者确认后分析所述场景图像的至少一部分。[0077]头戴式设备20的使用者的确认可以是语音确认。语音确认可以是头戴式设备20的使用者所说的话。头戴式设备20可以包括例如语音识别传感器30。语音识别传感器30可以位于头戴式设备20的框架24上,如图3所示。[0078]来自头戴式设备的使用者的确认可以进一步是手动确认。手动确认可以是头戴式设备20的使用者对被置于所述设备的框架24上的按钮未示出)的按压。[0079]来自头戴式设备的使用者的确认还可以是视觉确认。视觉确认可以由眼睛跟踪设备32检测。作为实例,图3展示了眼睛跟踪设备32。例如,在向头戴式设备的使用者显示虚拟确认按钮之后,眼睛跟踪设备在检测到使用者正注视与所述虚拟确认按钮相对应的方向后跟踪使用者的眼睛移动。视觉确认按钮可以显示在安装在头戴式设备20上的显示设备上。视觉确认还可以是长时间眨眼。[0080]而且,图像分析部件14可以被安排成用于在头戴式设备20的使用者确认后分析整个场景图像。[0081]在优选的实施例中,图像分析部件14被安排成用于在头戴式设备20的使用者确认后分析场景图像的预限定的分析区28。[0082]分析模块10可以进一步包括头部移动检测部件34,所述头部移动检测部件被安排成用于检测头戴式设备20的使用者的头部移动。图像分析部件14可以被安排成用于在检测到使用者的稳定头部姿势后分析场景图像的至少一部分。[0083]换言之,头戴式设备20的使用者想要分析场景图像时,他将预限定元素放在预限定的分析区28中并且停止移动其头部。头部移动检测部件34检测使用者的稳定头部姿势并且向分析部件10发送信号,所述分析部件分析场景图像的至少一部分。[0084]头部移动检测部件34可以包括被配置成用于感测所述模块的取向和位置、以及取向和位置的变化的加速度计和或陀螺仪和或指南针。[0085]头部移动检测部件34可以被置于头戴式设备20的框架24上,如图3所示。[0086]分析模块10可以进一步包括眼睛跟踪设备32,所述眼睛跟踪设备被安排成用于跟踪头戴式设备20的使用者的眼睛移动。图像分析部件14被安排成用于在检测到使用者正注视与预限定的分析区28相对应的方向后分析场景图像的至少一部分。[0087]换言之,当头戴式设备20的使用者想要分析场景图像时,他将预限定元素放在预限定的分析区28中并且注视预限定的分析区28或任何另一个预定区的方向。[0088]如果不存在眼睛跟踪设备,可以仅使用头部定位来选择预限定区。在这种情况下,使用者只需要验证在安装在头戴式设备上的显示设备中,预限定元素被放在正确的地方。如果不存在眼睛跟踪设备和显示设备,使用者就必须记住预限定的分析区28的位置以将预限定元素放入其中。例如,如果他戴着标准眼镜,则所述眼镜上的小标记可以帮助指示预限定的分析区28,如所述区的颜色变化或轮廓指示。在这种情况下,眼镜必须准确定位在使用者的头部上,就像在预限定的分析区配置阶段期间一样。[0089]在具有眼睛跟踪设备情况下,头戴式设备上不需要显示设备。[0090]眼睛跟踪设备32检测到使用者正注视与预限定的分析区28相对应、或与任何另一个预定区相对应的方向。接着眼睛跟踪设备32向分析部件10发送信号以分析场景图像的至少一部分。[0091]而且,当使用者在至少预限定的时间段期间将预限定元素放在预限定的分析区28中并且注视与预限定的分析区28相对应的方向还不使他的头部移动时,眼睛跟踪设备32可以向分析部件1〇发送信号。所述预限定的时间段可以大于一秒。例如,所述预限定的时间段可以是2秒或3秒。[0092]眼睛跟踪设备32还可以与反射镜和或棱镜相组合,以获得与使用者的瞳孔正交的眼睛跟踪光学路径。[0093]而且,可以对眼睛跟踪信息进行平均和删减,以将对眼睛的随机移动和或眨眼的敏感度最小化。[0094]头戴式设备还可以针对使用者的每只眼睛包括一个眼睛跟踪设备32。[0095]反馈部件16被安排成用于基于对场景图像的至少一部分的分析来产生反馈数据、并且将这种数据发送至头戴式设备20的使用者。[0096]反馈部件I6可以被安排成用于通过对从头戴式设备2〇的场景相机18接收到的场景图像应用图像处理来向使用者提供视觉反馈。[0097]优选地可以从包括以下各项的清单中选择图像处理:放大、边缘增强、颜色重新映射、文本识别、图案识别、对比度增强、以及亮度增强。[0098]换言之,提供给使用者的视觉反馈可以是根据使用者的视觉行为定制的场景图像的图像。例如,对于色盲使用者,改善后的图像可以是具有颜色重新映射的图像,或者对于近视眼使用者,改善后的图像可以是对场景图像的预限定的分析区24的放大。[0099]视觉反馈数据还可以是文本。例如,对于近视眼使用者,如果所述使用者正在行走并且想要分析路标,则视觉反馈可以放大所述路标上书写的文本。[0100]可以在安装在头戴式设备20上的显示设备上提供视觉反馈。[0101]头戴式设备20还可以针对使用者的每只眼睛包括一个显示设备。在这种情况下,可以在所述头戴式设备的两个显示设备上向使用者提供视觉反馈。[0102]在优选的实施例中,在预限定的分析区28中向使用者提供视觉反馈。[0103]所述视觉反馈可以在整个显示器上完成以进行缩放操作、或可以改善反馈效果的其他处理,如具有更多可读字体和或颜色的文本显示。[0104]反馈部件可以进一步被安排成用于向使用者提供音频反馈。[0105]例如,如果使用者正在读书,则音频反馈可以是与所述书相对应的音频声音。而且,对于色盲使用者,如果使用者正看向交通灯,则音频反馈可以是例如“灯为绿色”或“灯为红色”的语句。[0106]音频反馈可以通过耳机、扬声器、头戴式耳机、或任何可能的音频输出设备来提供。有利的是,音频输出设备36被定位在头戴式设备20的框架24上,如图3所示。音频输出设备36还可以被定位在使用者的耳朵内。[0107]在优选的实施例中,音频输出设备36被定位成尽可能靠近使用者的耳朵。[0108]反馈数据还可以取决于预限定元素和使用者。实际上,例如,当所述预限定元素是交通灯时,色盲使用者可能偏爱音频反馈而不是视觉反馈。作为另外的实例,正在阅读的使用者可能偏爱视觉反馈、例如对场景图像进行缩放,而不是音频反馈。[0109]还可以通过被定位在所述框架上、例如两侧上的用于色盲使用者的多个LED元件未示出或用于其他使用者的单一多色LH来完成简单的LED反馈。[0110]此外,反馈部件16可以被安排成用于基于对整个场景图像的分析来产生反馈数据、并且将这种数据发送至头戴式设备20的使用者。[0111]在优选的实施例中,反馈部件16被安排成用于基于对所述场景图像的预限定的分析区28的分析来产生反馈数据、并且将这种数据发送至头戴式设备20的使用者。[0112]此外,通信部件12可以被安排成用于实时接收场景图像,图像分析部件14可以被安排成用于标识至少一个预限定元素并且实时分析所述场景图像的至少一部分,并且反馈部件16被安排成用于实时产生并发送反馈数据。[0113]在本发明的意义上,“实时”是分析模块10的通信部件12接收到场景图像与分析模块10的反馈部件16产生反馈之间的时间少于一秒、例如少于2〇〇ms。[0114]有利的是,所述预限定的时间段与实际时间之间的4倍比率提供良好结果。例如,使用者应注视分析区28的预限定的时间段可以为2秒,并且分析模块可以接收并分析场景图像并且产生反馈数据的时间可以为500ms。[0115]现在将描述的根据本发明的实施例的头戴式设备。[0116]图3表示根据本发明的头戴式设备20的实例。所述头戴式设备包括被适配成有待配戴在使用者头部上的框架34、固定至框架24上的场景相机18、并且包括通信单元38。[0117]图3所示的头戴式设备2〇还包括两个镜片22、语音识别传感器30、眼睛跟踪设备32、头部移动检测部件34、以及音频输出设备36指向在配戴者头部的左侧未示出)。场景相机1S被适配成用于获取当戴着头戴式设备20时所述使用者面对的环境的场景图像。[0119]有利的是,场景相机18被定位在头戴式设备20的框架24上。更精确地,场景相机18可以被定位在使用者的两只眼睛之间、或者可以被定位在头戴式设备20的一侧以获取与使用者的一只眼所看到的环境相对应的场景图像。例如,如果所述场景相机被定位在框架24的右侧,则获取与使用者的右眼所看到的场景图像相对应的环境。[0120]场景相机18可以包括电荷耦合器件(CCD图像传感器、互补金属氧化物半导体CMOS图像传感器、或模拟或数字信号输出可以被发送给通信部件12的任何其他图像传感器。[0121]所述头戴式设备还可以针对使用者的每只眼睛包括一个场景相机。在这种情况下,每个场景相机可以被定位在框架的一侧,以获取头戴式设备的使用者的两只眼睛所看到的场景图像。[0122]头戴式设备的镜片22可以是眼镜片或眼镜镜片。镜片22可以符合使用者的光学处方。[0123]镜片22还可以是具有光学功能的有源镜片,所述有源镜片可以适应于使用者的需求。[0124]头戴式设备20还可以包括显示设备40。图5表示显示设备40的实例。所述显示设备允许配戴者透过它看到虚拟图像和或文本以及现实世界两者。显示设备40可以分为两个区:针对虚拟图像和或文本的区以及针对现实世界的区。[0125]显示设备40能够显示图像和或文本。电子驱动系统(存储器+处理器,未示出)将所述图像和或文本发送至显示设备40以显示出。优选地,它能够在不同的观看方向上显示图像和或文本。[0126]举例而言,显示设备40可以是液晶显示器、或者使用了与可以是透明或半透明的光导相关联的硅基液晶技术或有机发光二极管技术。[0127]通信单元38被安排成用于将场景图像发送至根据本发明的分析模块1〇。在以下描述中将更精确地描述通信单元38。[0128]头戴式设备20可以进一步包括根据本发明的分析模块10,如图3所示。[0129]头戴式设备20可以包括输出设备,所述输出设备被安排成用于基于反馈部件16发送的反馈数据向使用者输出信号。[0130]所述输出设备可以是显示设备和或音频输出设备。如图3所示,所述头戴式设备包括显示设备40和音频输出设备36。[0131]虽然未表示出来,但是头戴式设备20可以进一步包括电源,例如蓄电池和或其他电子产品。[0132]在优选的实施例中,头戴式设备20的部件和或设备被安排成使得头戴式设备20的重量在框架24的每侧可以基本上相等。例如,当电源被定位在框架24的右侧时,头戴式设备20的所有部件和或设备可以位于框架24的左侧。[0133]根据本发明的图4所示的实施例,头戴式设备20与包括分析模块10的远程实体进行通信。[0134]通过不同的通信设备和协议像蓝牙、紫蜂、WiFi、或其他可以完成通信。[0135]例如,通信单元38可以被配置成用于与远程实体进行通信,以将对与头戴式设备20的使用者面对的环境的图像相对应的场景图像的至少一部分的分析存储在存储器MEM中、并且基于对所述场景图像的至少一部分的分析来产生反馈数据。[0136]典型地,所述远程实体包括通信单元C0M,所述通信单元被配置成用于至少与以下各项通信:头戴式设备2〇、存储器mem、至少一个处理器pr〇c、以及存储在非瞬态计算机可读介质上并且可被所述至少一个处理器执行以便至少基于与头戴式设备20的使用者面对的环境的图像相对应的场景图像的至少一部分的分析来产生反馈数据的程序指令。[0137]所述远程实体可以包括不同的计算对象,如个人数字助理、音频视频设备、移动电话、MPEG-1、音频层3MP3播放器、个人计算机、膝上型计算机、平板电脑、蓝牙耳机、手表、腕带等。[0138]在通信网络总线可以是互联网的网络环境中,计算对象可以是Web服务器、文件服务器、媒体服务器等,客户端计算对象或设备经由多种已知协议中的任一种协议如超文本传送协议HTTP来与所述服务器通信。[0139]以上己经借助于实施例描述了本发明,这些实施例并不限制总体发明构思。此外,本发明的实施例可以没有任何限制地进行组合。[0M0]对于参考了以上说明的实施例的本领域技术人员而言,还提出了很多另外的修改和变化,这些实施例仅以举例方式给出,无意限制本发明的范围,本发明的范围仅由所附权利要求书来决定。在权利要求书中,词语“包括”并不排除其他的元件或步骤,并且不定冠词“一个⑸”或“一个an”并不排除复数。不同的特征在相互不同的从属权利要求中被叙述这个单纯的事实并不表示不能有利地使用这些特征的组合。权利要求书中的任何附图标记都不应当被解释为限制本发明的范围。

权利要求:1.一种分析模块10,包括:-通信部件(12,所述通信部件被安排成用于从安装在头戴式设备20上的场景相机18接收场景图像,所述场景图像对应于所述头戴式设备的使用者戴着所述头戴式设备20时所述使用者面对的环境的图像,-图像分析部件(14,所述图像分析部件被安排成用于从自所述场景相机(I8所接收到的图像的预限定的分析区(28中的预限定元素清单中标识至少一个预限定元素、并且基于所标识的至少一个预限定兀素来分析所述场景图像的至少一部分,以及-反馈部件(16,所述反馈部件被安排成用于基于对所述场景图像的至少一部分的分析来产生反馈数据、并且将这种数据发送至所述头戴式设备2〇的所述使用者。2.根据权利要求1所述的分析模块1〇,其中,所述通信部件(12被安排成用于实时接收场景图像,所述图像分析部件(14被安排成用于标识至少一个预限定元素并且实时分析所述场景图像的至少一部分,并且所述反馈部件(16被安排成用于实时产生并发送反馈数据。3.根据权利要求1或2所述的分析模块(10,其中,所述图像分析部件(14被安排成用于在预限定的时间段内在所述预限定的分析区(28中标识所述至少一个预限定元素后,分析所述场景图像的至少一部分。4.根据以上权利要求中任一项所述的分析模块(10,其中,所述图像分析部件(14被安排成用于在所述头戴式设备20的所述使用者确认后分析所述场景图像的至少一部分。5.根据以上权利要求中任一项所述的分析模块(10,进一步包括头部移动检测部件34,所述头部移动检测部件被安排成用于检测所述头戴式设备20的所述使用者的头部移动,并且其中,所述图像分析部件(14被安排成用于在检测到所述使用者的稳定头部姿势后分析所述场景图像的至少一部分。6.根据以上权利要求中任一项所述的分析模块(10,进一步包括眼睛跟踪设备32,所述眼睛跟踪设备被安排成用于跟踪所述头戴式设备20的所述使用者的眼睛移动,并且其中,所述图像分析部件(14被安排成用于在检测到所述使用者正注视与所述预限定的分析区28相对应的方向后分析所述场景图像的至少一部分。7.根据以上权利要求中任一项所述的分析模块(10,其中,所述预限定元素至少包括书写字符,并且对所述场景图像的分析至少包括文本识别。8.根据以上权利要求中任一项所述的分析模块(10,其中,所述预限定元素至少包括人脸,并且对所述场景图像的分析至少包括脸部识别。9.根据以上权利要求中任一项所述的分析模块(10,其中,所述预限定元素至少包括交通灯,并且对所述场景图像的分析至少包括颜色识别。_1〇•根据以上权利要求中任一项所述的分析模块(10,其中,所述预限定元素至少包括路标,并且对所述场景图像的分析至少包括文本或标志识别。11.根据以上权利要求中任一项所述的分析模块10,其中,所述反馈部件(16被安排成用于通过对从所述头戴式设备(20的场景相机(18接收到的所述场景图像应用图像处理来向所述使用者提供视觉反馈。I2•根据前一项权利要求所述的分析模块10,其中,从包括以下各项的清单中选择所述图像处理:放大、边缘增强、颜色重新映射、文本识别、图案识别、对比度增强、以及亮度增强。13.根据以上权利要求中任一项所述的分析模块1〇,其中,所述反馈部件(16被安排成用于向所述使用者提供音频反馈。14.一种头戴式设备20,包括:-被适配成有待配戴在使用者的头部上的框架24,-场景相机(18,所述场景相机被固定至所述框架24上并且被适配成用于获取当戴着所述头戴式设备20时所述使用者面对的环境的场景图像,以及-通信单元38,所述通信单元被安排成用于将所述场景图像发送至根据以上权利要求中任一项所述的分析模块10。15.根据权利要求14所述的头戴式设备2〇,进一步包括根据权利要求1至13中任一项所述的分析模块10。

百度查询: 依视路国际公司 场景图像分析模块

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。

相关技术
相关技术
相关技术
相关技术