著录项信息
专利名称 | 一种物体识别系统、方法及装置 |
申请号 | CN201810142084.0 | 申请日期 | 2018-02-11 |
法律状态 | 授权 | 申报国家 | 中国 |
公开/公告日 | 2019-08-23 | 公开/公告号 | CN110162026A |
优先权 | 暂无 | 优先权号 | 暂无 |
主分类号 | G05D1/02 | IPC分类号 | G;0;5;D;1;/;0;2查看分类表>
|
申请人 | 北京图森未来科技有限公司 | 申请人地址 | 北京市顺义区中关村科技园区顺义园临空二路1号
变更
专利地址、主体等相关变化,请及时变更,防止失效 |
权利人 | 北京图森智途科技有限公司 | 当前权利人 | 北京图森智途科技有限公司 |
发明人 | 吴楠 |
代理机构 | 暂无 | 代理人 | 暂无 |
摘要
本发明公开一种物体识别系统、方法及装置,用以解决现有技术中对无人驾驶车辆进行集中控制管理的系统无法有效地识别物体的问题。物体识别系统包括感测装置、控制装置和无人驾驶车辆。控制装置用于根据感测数据进行物体识别,确定不属于预定类别的物体为未知物体;在包括未知物体的感测数据中标记出未知物体;确定出在未知物体预定范围内的无人驾驶车辆;将标记后的感测数据和识别未知物体的指示发送给所确定的无人驾驶车辆;接收来自无人驾驶车辆的反馈消息,在反馈消息中携带物体类别信息的情况下,保存物体类别信息,并将未知物体的类别标记为所保存的物体类别。
1.一种物体识别系统,其特征在于,包括:感测装置、控制装置和无人驾驶车辆;
感测装置用于对车辆行驶状况和道路状况的进行感测得到感测数据;
控制装置用于根据感测数据进行物体识别,确定不属于预定类别的物体为未知物体;
在包括未知物体的感测数据中标记出未知物体;确定出在未知物体预定范围内的无人驾驶车辆;将标记后的感测数据和识别未知物体的指示发送给所确定的无人驾驶车辆;接收来自无人驾驶车辆的反馈消息,在反馈消息中携带物体类别信息的情况下,保存物体类别信息,并将未知物体的类别标记为所保存的物体类别;
无人驾驶车辆用于接收来自控制装置的指示和标记后的感测数据;对无人驾驶车辆的感测数据进行的物体识别;对比来自控制装置的感测数据中的物体与识别出来的物体,判断是否识别出感测数据中标记的未知物体,在判断已识别出的情况下,向控制装置发送反馈消息,其中反馈消息中携带识别出来的未知物体的物体类别信息。
2.根据权利要求1所述的系统,其特征在于,无人驾驶车辆还用于在判断无法识别出未知物体的情况下,在无人驾驶车辆的感测数据中标记出与未知物体对应的物体,向控制装置反馈携带有识别失败信息的反馈消息和标记的无人驾驶车辆感测数据;
控制装置还用于在来自无人驾驶车辆的反馈消息中携带识别失败信息的情况下,将标记的无人驾驶车辆感测数据发送给一个人工识别处理;接收来自人工识别处理的反馈消息,在反馈消息中携带物体类别信息的情况下,保存物体类别信息,并将未知物体的类别标记为所保存的物体类别。
3.根据权利要求2所述的系统,其特征在于,控制装置还用于:
在来自人工识别处理的反馈消息中携带识别失败信息的情况下,将标记的无人驾驶车辆感测数据和人工处理请求发送给一个人工控制处理,其中人工处理请求用于请求人工控制处理执行基于物体识别的车辆控制处理。
4.根据权利要求1所述的系统,其特征在于,控制装置在包括未知物体的感测数据中标记出未知物体之后,还用于:
将标记后的感测数据发送一个人工识别处理;则,
确定出在未知物体预定范围内的无人驾驶车辆,包括:
接收来自人工识别处理的反馈消息,在反馈消息中携带物体类别信息的情况下,保存物体类别信息,并将未知物体的类别标记为对应的物体类别;在反馈消息中携带识别失败信息的情况下,确定出在未知物体预定范围内的无人驾驶车辆。
5.根据权利要求1所述的系统,其特征在于,控制装置还用于根据识别出的物体执行车辆控制处理;其中,车辆控制处理包括路径规划或者行车策略决策。
6.一种物体识别方法,其特征在于,包括:
控制装置根据来自感测装置的感测数据进行物体识别,确定不属于预定类别的物体为未知物体;其中,感测数据是感测装置对车辆行驶状况和道路状况进行感测得到的;
在包括未知物体的感测数据中标记出未知物体;
确定出在未知物体预定范围内的无人驾驶车辆;
将标记后的感测数据和识别未知物体的指示发送给所确定的无人驾驶车辆;
接收来自无人驾驶车辆的反馈消息,在反馈消息中携带物体类别信息的情况下,保存物体类别信息,并将未知物体的类别标记为所保存的物体类别;其中,反馈消息中携带的物体类别信息,是无人驾驶车辆对无人驾驶车辆的感测数据进行物体识别,对比来自控制装置的感测数据中的物体与识别出来的物体,判断已识别出的情况下,在反馈消息中携带的识别出来的未知物体的物体类别信息。
7.根据权利要求6所述的方法,其特征在于,所述方法还包括:
控制装置接收来自无人驾驶车辆的标记的无人驾驶车辆感测数据;其中,标记的无人驾驶车辆感测数据中包括标记出来的与控制装置确定的未知物体对应的物体;
在来自无人驾驶车辆的反馈消息中携带识别失败信息的情况下,将标记的无人驾驶车辆感测数据发送给一个人工识别处理;
接收来自人工识别处理的反馈消息,在反馈消息中携带物体类别信息的情况下,保存物体类别信息,并将未知物体的类别标记为所保存的物体类别。
8.根据权利要求7所述的方法,其特征在于,所述方法还包括:
在来自人工识别处理的反馈消息中携带识别失败信息的情况下,将标记的无人驾驶车辆感测数据和人工处理请求发送给一个人工控制处理,其中人工处理请求用于请求人工控制处理执行基于物体识别的车辆控制处理。
9.根据权利要求6所述的方法,其特征在于,控制装置在包括未知物体的感测数据中标记出未知物体之后,还用于:
将标记后的感测数据发送一个人工识别处理;则
确定出在未知物体预定范围内的无人驾驶车辆,包括:
接收来自人工识别处理的反馈消息,在反馈消息中携带物体类别信息的情况下,保存物体类别信息,并将未知物体的类别标记为对应的物体类别;在反馈消息中携带识别失败信息的情况下,确定出在未知物体预定范围内的无人驾驶车辆。
10.根据权利要求6所述的方法,其特征在于,所述方法还包括:
控制装置根据识别出的物体执行车辆控制处理;其中,车辆控制处理包括路径规划或者行车策略决策。
11.一种物体识别装置,其特征在于,包括:
第一确定模块,用于根据来自感测装置的感测数据进行物体识别,确定不属于预定类别的物体为未知物体;其中,感测数据是感测装置对车辆行驶状况和道路状况进行感测得到的;
标记模块,用于在包括未知物体的感测数据中标记出未知物体;
第二确定模块,用于确定出在未知物体预定范围内的无人驾驶车辆;
收发模块,用于将标记后的感测数据和识别未知物体的指示发送给所确定的无人驾驶车辆;接收来自无人驾驶车辆的反馈消息;其中,反馈消息中携带的物体类别信息,是无人驾驶车辆对无人驾驶车辆的感测数据进行物体识别,对比来自控制装置的感测数据中的物体与识别出来的物体,判断已识别出的情况下,在反馈消息中携带的识别出来的未知物体的物体类别信息;
保存模块,用于在反馈消息中携带物体类别信息的情况下,保存物体类别信息,并将未知物体的类别标记为所保存的物体类别。
12.根据权利要求11所述的装置,其特征在于,装置还包括:人工接口模块;
收发模块,还用于接收来自无人驾驶车辆的标记的无人驾驶车辆感测数据;其中,标记的无人驾驶车辆感测数据中包括标记出来的与控制装置确定的未知物体对应的物体;
人工接口模块,用于在来自无人驾驶车辆的反馈消息中携带识别失败信息的情况下,将标记的无人驾驶车辆感测数据发送给一个人工识别处理;接收来自人工识别处理的反馈消息;
保存模块,还用于在来自人工识别处理的反馈消息中携带物体类别信息的情况下,保存物体类别信息,并将未知物体的类别标记为所保存的物体类别。
13.根据权利要求12所述的装置,其特征在于,人工接口模块还用于:在来自人工识别处理的反馈消息中携带识别失败信息的情况下,将标记的无人驾驶车辆感测数据和人工处理请求发送给一个人工控制处理,其中人工处理请求用于请求人工控制处理执行基于物体识别的车辆控制处理。
14.根据权利要求11所述的装置,其特征在于,装置还包括人工接口模块,用于将标记模块标记后的感测数据发送一个人工识别处理;接收来自人工识别处理的反馈消息;
保存模块,还用于在反馈消息中携带物体类别信息的情况下,保存物体类别信息,并将未知物体的类别标记为对应的物体类别;
第二确定模块,还用于在反馈消息中携带识别失败信息的情况下,确定出在未知物体预定范围内的无人驾驶车辆。
15.根据权利要求11所述的装置,其特征在于,装置还包括控制模块,用于根据识别出的物体执行车辆控制处理;其中,车辆控制处理包括路径规划或者行车策略决策。
16.一种物体识别装置,其特征在于,包括:一个处理器和至少一个存储器,至少一个存储器中存储有至少一条机器可执行指令,处理器执行至少一条机器可执行指令实现:
根据来自感测装置的感测数据进行物体识别,确定不属于预定类别的物体为未知物体;其中,感测数据是感测装置对车辆行驶状况和道路状况进行感测得到的;
在包括未知物体的感测数据中标记出未知物体;
确定出在未知物体预定范围内的无人驾驶车辆;
将标记后的感测数据和识别未知物体的指示发送给所确定的无人驾驶车辆;
接收来自无人驾驶车辆的反馈消息,在反馈消息中携带物体类别信息的情况下,保存物体类别信息,并将未知物体的类别标记为所保存的物体类别;其中,反馈消息中携带的物体类别信息,是无人驾驶车辆对无人驾驶车辆的感测数据进行物体识别,对比来自控制装置的感测数据中的物体与识别出来的物体,判断已识别出的情况下,在反馈消息中携带的识别出来的未知物体的物体类别信息。
17.根据权利要求16所述的装置,其特征在于,处理器执行至少一条机器可执行指令还实现:
接收来自无人驾驶车辆的标记的无人驾驶车辆感测数据;其中,标记的无人驾驶车辆感测数据中包括标记出来的与控制装置确定的未知物体对应的物体;
在来自无人驾驶车辆的反馈消息中携带识别失败信息的情况下,将标记的无人驾驶车辆感测数据发送给一个人工识别处理;
接收来自人工识别处理的反馈消息,在反馈消息中携带物体类别信息的情况下,保存物体类别信息,并将未知物体的类别标记为所保存的物体类别。
18.根据权利要求17所述的装置,其特征在于,处理器执行至少一条机器可执行指令还实现:
在来自人工识别处理的反馈消息中携带识别失败信息的情况下,将接收到的无人驾驶车辆感测数据和人工处理请求发送给一个人工控制处理,其中人工处理请求用于请求人工控制处理执行基于物体识别的车辆控制处理。
19.根据权利要求16所述的装置,其特征在于,处理器执行至少一条机器可执行指令实现在包括未知物体的感测数据中标记出未知物体之后,还实现:将标记后的感测数据发送一个人工识别处理;则
处理器执行至少一条机器可执行指令实现确定出在未知物体预定范围内的无人驾驶车辆,包括:
接收来自人工识别处理的反馈消息,在反馈消息中携带物体类别信息的情况下,保存物体类别信息,并将未知物体的类别标记为对应的物体类别;在反馈消息中携带识别失败信息的情况下,确定出在未知物体预定范围内的无人驾驶车辆。
20.根据权利要求16所述的装置,其特征在于,处理器执行至少一条机器可执行指令还实现:
根据识别出的物体执行车辆控制处理;其中,车辆控制处理包括路径规划或者行车策略决策。
一种物体识别系统、方法及装置\n技术领域\n[0001] 本发明涉及智能交通领域,特别涉及一种物体识别系统、方法及装置。\n背景技术\n[0002] 在现有技术中,在一些应用场景中,基于对一个区域或者场地中行驶的无人驾驶车辆进行控制或管理的需求,通常会设置一个控制系统进行控制和管理。通过设置在区域或者场地中的感测装置对车辆和道路状况进行感测,控制系统根据感测数据进行物体识别,根据识别出的物体对车辆进行控制和管理,例如路径规划、行车策略决策。\n[0003] 但是,在一些应用场景中,感测装置受限于安装位置、角度、高度等因素,无法通过获取被感测物体的全貌信息。例如通过感测装置中的摄像头获取道路上的物体的信息时,如果摄像头受限于安装角度或者安装位置,只能获取到物体某一面或者某一侧的信息,将会导致控制系统无法确定出物体的类别。\n[0004] 可见,对无人驾驶车辆进行集中控制管理的控制系统存在无法有效地识别物体的问题。\n发明内容\n[0005] 有鉴于此,本发明提供了一种物体识别系统、方法及装置,用以解决现有技术中对无人驾驶车辆进行集中控制管理的系统无法有效地识别物体的问题。\n[0006] 根据本申请实施例的一个方面,提供了一种物体识别系统,包括:感测装置、控制装置和无人驾驶车辆;\n[0007] 感测装置用于对车辆行驶状况和道路状况的进行感测得到感测数据;\n[0008] 控制装置用于根据感测数据进行物体识别,确定不属于预定类别的物体为未知物体;在包括未知物体的感测数据中标记出未知物体;确定出在未知物体预定范围内的无人驾驶车辆;将标记后的感测数据和识别未知物体的指示发送给所确定的无人驾驶车辆;接收来自无人驾驶车辆的反馈消息,在反馈消息中携带物体类别信息的情况下,保存物体类别信息,并将未知物体的类别标记为所保存的物体类别;\n[0009] 无人驾驶车辆用于接收来自控制装置的指示和感测数据;对无人驾驶车辆的感测数据进行的物体识别;对比来自控制装置的感测数据中的物体与识别出来的物体,判断是否识别出感测数据中标记的未知物体,在判断已识别出的情况下,向控制装置发送反馈消息,其中反馈消息中携带识别出来的未知物体的物体类别信息。\n[0010] 根据本申请实施例的一个方面,提供了一种物体识别方法,包括:\n[0011] 控制装置根据来自感测装置的感测数据进行物体识别,确定不属于预定类别的物体为未知物体;其中,感测数据是感测装置对车辆行驶状况和道路状况进行感测得到的;\n[0012] 在包括未知物体的感测数据中标记出未知物体;\n[0013] 确定出在未知物体预定范围内的无人驾驶车辆;\n[0014] 将标记后的感测数据和识别未知物体的指示发送给所确定的无人驾驶车辆;\n[0015] 接收来自无人驾驶车辆的反馈消息,在反馈消息中携带物体类别信息的情况下,保存物体类别信息,并将未知物体的类别标记为所保存的物体类别;其中,反馈消息中携带的物体类别信息,是无人驾驶车辆对无人驾驶车辆的感测数据进行物体识别,对比来自控制装置的感测数据中的物体与识别出来的物体,判断已识别出的情况下,在反馈消息中携带的识别出来的未知物体的物体类别信息。\n[0016] 根据本申请实施例的一个方面,提供了一种物体识别装置,包括:\n[0017] 第一确定模块,用于根据来自感测装置的感测数据进行物体识别,确定不属于预定类别的物体为未知物体;其中,感测数据是感测装置对车辆行驶状况和道路状况进行感测得到的;\n[0018] 标记模块,用于在包括未知物体的感测数据中标记出未知物体;\n[0019] 第二确定模块,用于确定出在未知物体预定范围内的无人驾驶车辆;\n[0020] 收发模块,用于将标记后的感测数据和识别未知物体的指示发送给所确定的无人驾驶车辆;接收来自无人驾驶车辆的反馈消息;其中,反馈消息中携带的物体类别信息,是无人驾驶车辆对无人驾驶车辆的感测数据进行物体识别,对比来自控制装置的感测数据中的物体与识别出来的物体,判断已识别出的情况下,在反馈消息中携带的识别出来的未知物体的物体类别信息;\n[0021] 保存模块,用于在反馈消息中携带物体类别信息的情况下,保存物体类别信息,并将未知物体的类别标记为所保存的物体类别。\n[0022] 根据本申请实施例的一个方面,提供了一种物体识别装置,包括:一个处理器和至少一个存储器,至少一个存储器中存储有至少一条机器可执行指令,处理器执行至少一条机器可执行指令实现:\n[0023] 根据来自感测装置的感测数据进行物体识别,确定不属于预定类别的物体为未知物体;其中,感测数据是感测装置对车辆行驶状况和道路状况进行感测得到的;\n[0024] 在包括未知物体的感测数据中标记出未知物体;\n[0025] 确定出在未知物体预定范围内的无人驾驶车辆;\n[0026] 将标记后的感测数据和识别未知物体的指示发送给所确定的无人驾驶车辆;\n[0027] 接收来自无人驾驶车辆的反馈消息,在反馈消息中携带物体类别信息的情况下,保存物体类别信息,并将未知物体的类别标记为所保存的物体类别;其中,反馈消息中携带的物体类别信息,是无人驾驶车辆对无人驾驶车辆的感测数据进行物体识别,对比来自控制装置的感测数据中的物体与识别出来的物体,判断已识别出的情况下,在反馈消息中携带的识别出来的未知物体的物体类别信息。\n[0028] 根据本申请实施例提供的技术方案,物体识别系统中的控制装置对感测装置获取的感测数据进行分析、进行物体识别处理,确定出不属于预定类别的物体即未知物体,在感测数据中标记出未知物体,将标记的感测数据发送给未知物体预定范围内的无人驾驶车辆,无人驾驶车辆将从自身的感测数据识别出来的物体与来自控制装置的感测数据中标记的未知物体进行对比,判断是否识别出感测数据中标记的未知物体,在判断已识别出的情况下,向控制装置反馈物体类别信息,从而在控制装置无法识别物体的情况下,能够利用无人驾驶车辆的信息获取能力和识别能力,对未知物体进行识别,能够解决现有技术中对无人驾驶车辆进行集中控制管理的系统无法有效地识别物体的问题。\n附图说明\n[0029] 附图用来提供对本发明的进一步理解,并且构成说明书的一部分,与本发明的实施例一起用于解释本发明,并不构成对本发明的限制。\n[0030] 图1为本申请实施例提供的物体识别系统的结构框图;\n[0031] 图2为本申请实施例提供的物体识别方法的处理流程图;\n[0032] 图3为本申请实施例提供的物体识别方法的另一个处理流程图;\n[0033] 图4为本申请实施例提供的物体识别方法的另一个处理流程图;\n[0034] 图5为本申请实施例提供的物体识别装置的结构框图;\n[0035] 图6a为本申请实施例提供的物体识别装置的另一个结构框图;\n[0036] 图6b为本申请实施例提供的物体识别装置的另一个结构框图;\n[0037] 图7为本申请实施例提供的物体识别装置的另一个结构框图;\n[0038] 图8为本申请实施例提供的物体识别装置的另一个结构框图。\n具体实施方式\n[0039] 为了使本技术领域的人员更好地理解本发明中的技术方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。\n[0040] 针对现有技术中对无人驾驶车辆进行集中控制管理的系统无法有效地识别物体的问题,本申请实施例提供了一种物体识别系统、方法和装置,以解决该问题。根据本申请实施例提供的技术方案,物体识别系统中的控制装置对感测装置获取的感测数据进行分析、进行物体识别处理,确定出不属于预定类别的物体即未知物体,在感测数据中标记出未知物体,将标记的感测数据发送给未知物体预定范围内的无人驾驶车辆,无人驾驶车辆将从自身的感测数据识别出来的物体与来自控制装置的感测数据中标记的未知物体进行对比,判断是否识别出感测数据中标记的未知物体,在判断已识别出的情况下,向控制装置反馈物体类别信息,从而在控制装置无法识别物体的情况下,能够利用无人驾驶车辆获取未知物体较为全面清除的信息,对未知物体进行识别,能够解决现有技术中控制管理系统对无人驾驶车辆进行集中管理时,受限于感测装置无法获取全面有效的物体信息,而导致的无法有效地识别物体的问题。\n[0041] 以上是本发明的核心思想,为了使本技术领域的人员更好地理解本发明实施例中的技术方案,并使本发明实施例的上述目的、特征和优点能够更加明显易懂,下面结合附图对本发明实施例中技术方案作进一步详细的说明。\n[0042] 图1中示出了本申请实施例提供的物体识别系统的示意图,该系统中包括感测装置1、控制装置2和无人驾驶车辆3;\n[0043] 感测装置1用于对车辆行驶状况和道路状况的进行感测得到感测数据;感测装置1可以包括至少一个摄像头。\n[0044] 在一些应用场景中,感测装置1可以对预定的区域或者场地中车辆行驶状况和道路状况进行感测,也可以对开放区域中特定区域或者场地的车辆或者道路状况进行感测。\n[0045] 控制装置2用于根据感测数据进行物体识别,确定不属于预定类别的物体为未知物体;在包括未知物体的感测数据中标记出未知物体;确定出在未知物体预定范围内的无人驾驶车辆;将标记后的感测数据和识别未知物体的指示发送给所确定的无人驾驶车辆;\n接收来自无人驾驶车辆的反馈消息,在反馈消息中携带物体类别信息的情况下,保存物体类别信息,并将未知物体的类别标记为所保存的物体类别;\n[0046] 无人驾驶车辆3用于接收来自控制装置2的指示和感测数据;对无人驾驶车辆的感测数据进行的物体识别;对比来自控制装置的感测数据中的物体与识别出来的物体,判断是否识别出感测数据中标记的未知物体,在判断已识别出的情况下,向控制装置发送反馈消息,其中反馈消息中携带识别出来的未知物体的物体类别信息。\n[0047] 根据图1所示的系统,控制装置在确定物体不属于预定类别时,将该物体确定为未知物体,指示无人驾驶车辆对该物体进行识别,由于无人驾驶车辆的车载摄像头通常就有较高的分辨率,并且无人驾驶车辆中具有其它感测设备,例如激光雷达,能够获取物体较为全面的信息,并基于获取的信息对物体进行识别,从而控制装置能够利用无人驾驶车辆的信息获取能力和物体识别能力,对未知物体进行有效识别,能够解决现有技术中对无人驾驶车辆进行集中控制管理的系统无法有效地识别物体的问题。\n[0048] 在本申请的另一些实施例中,控制装置2在包括未知物体的感测数据中标记出未知物体之后,还用于:将标记后的感测数据发送一个人工识别处理;接收来自人工识别处理的反馈消息,在反馈消息中携带物体类别信息的情况下,保存物体类别信息,并将未知物体标记为对应的物体类别;在反馈消息中携带识别失败信息的情况下,确定出在未知物体预定范围内的无人驾驶车辆。也即,在控制装置2无法识别出未知物体后,通过人工识别处理,确定得到物体类别,但是由于感测装置1获取到的未知物体的信息并不全面,人工处理也可能无法识别出未知物体时,此时指示无人驾驶车辆3对未知物体进行识别。从而能够先通过人工识别处理,及时地确定得到物体类别,以满足控制装置2实时控制的要求,在人工处理无法确定物体类别时,指示无人驾驶车辆3对物体进行识别,利用无人驾驶车辆的信息获取能力和物体识别能力进行物体识别。\n[0049] 在本申请的另一些实施例中,无人驾驶车辆3还用于在判断无法识别出未知物体的情况下,在无人驾驶车辆的感测数据中标记出与未知物体对应的物体,向控制装置2反馈携带有识别失败信息的反馈消息和标记的无人驾驶车辆感测数据;则,控制装置2还用于在来自无人驾驶车辆3的反馈消息中携带识别失败信息的情况下,将标记的无人驾驶车辆感测数据发送给一个人工识别处理;接收来自人工识别处理的反馈消息,在反馈消息中携带物体类别信息的情况下,保存物体类别信息,并将未知物体标记为所保存的物体类别;在来自人工识别处理的反馈消息中携带识别失败信息的情况下,将接收到的无人驾驶车辆感测数据和人工处理请求发送给一个人工控制处理,其中人工处理请求用于请求人工控制处理执行基于物体识别的车辆控制处理。在具体应用场景中,通常无人驾驶车辆3出于对处理速度的需要,会对识别物体的类别数量进行限制,也即无人驾驶车辆3中能够识别的物体类别的数量少于控制装置2能够识别的物体类别的数量,在无人驾驶车辆3也无法识别出未知物体类别的情况下,通过人工识别处理,可以及时地确定得到物体类别,以满足控制装置2进行实时控制的要求。\n[0050] 在上述多个实施例的基础上,控制装置2还用于根据识别出的物体执行车辆控制处理;其中,车辆控制处理包括路径规划或者行车策略决策。\n[0051] 下面对图1中控制装置的工作原理进行说明。\n[0052] 图2示出了本申请实施例提供的物体识别方法的流程图,该方法包括:\n[0053] 步骤21、控制装置根据来自感测装置的感测数据进行物体识别,确定不属于预定类别的物体为未知物体;其中,感测数据是感测装置对车辆行驶状况和道路状况进行感测得到的。感测数据可以是通过摄像头获取的图像数据。\n[0054] 步骤22、在包括未知物体的感测数据中标记出未知物体。\n[0055] 也即,标记后的感测数据是包括标记出来的未知物体的感测数据。本申请不对具体的物体识别的方法和标记物体的方法进行限定,可以采用本申请之前或者之后的方法,并且可以根据具体应用场景的需要而选择设定。\n[0056] 步骤23、确定出在未知物体预定范围内的无人驾驶车辆。\n[0057] 该步骤可以结合定位的技术来实现,先通过定位技术、根据感测数据来确定未知物体在地图上的位置,并通过定位技术确定无人技术车辆在地图上的位置,然后确定得到在未知物体位置的预定范围内的无人驾驶车辆。本申请不对具体的定位技术进行限定,可以使用本申请之前或者之后的定位技术,并且根据具体应用场景的需要来选择定位算法。\n[0058] 预定范围可以根据具体应用场景的需要而设置,例如,如果后续基于物体识别的车辆控制或管理处理需要较大的车辆反应范围,可以设置较大数值的预定范围,反之,可以设置较小数值的预定范围。\n[0059] 步骤24、将标记后的感测数据和识别未知物体的指示发送给所确定的无人驾驶车辆;\n[0060] 控制装置可以通过多种通信方式或者协议与无人驾驶车辆进行通信,本申请这里不做限制。\n[0061] 步骤25、接收来自无人驾驶车辆的反馈消息,在反馈消息中携带物体类别信息的情况下,保存物体类别信息,并将未知物体的类别标记为所保存的物体类别;其中,反馈消息中携带的物体类别信息,是无人驾驶车辆对无人驾驶车辆的感测数据进行物体识别,对比来自控制装置的感测数据中的物体与识别出来的物体,判断已识别出的情况下,在反馈消息中携带的识别出来的未知物体的物体类别信息。\n[0062] 通过上述处理,控制装置在确定物体不属于预定类别时,将该物体确定为未知物体,指示无人驾驶车辆对该物体进行识别,由于无人驾驶车辆的车载摄像头通常就有较高的分辨率,并且无人驾驶车辆中具有其它感测设备,例如激光雷达,能够获取物体较为全面的信息,并基于获取的信息对物体进行高效的识别,从而控制装置能够利用无人驾驶车辆的信息获取能力和物体识别能力,对未知物体进行有效识别,能够解决现有技术中对无人驾驶车辆进行集中控制管理的系统无法有效地识别物体的问题。\n[0063] 在图2所示方法的基础上,本申请实施例还提供了一种物体识别方法,在方法在图\n2所示的步骤22之后、在步骤23之间,如图3所示,在步骤22之后,还可以进一步地包括如下处理:\n[0064] 步骤S1、将标记后的感测数据发送一个人工识别处理;\n[0065] 步骤S2、接收来自人工识别处理的反馈消息,判断反馈消息是否携带有物体类别信息,在判断为是的情况下,处理进行到步骤S3,在判断为否的情况下,处理进行到步骤23;\n[0066] 步骤S3、在反馈消息中携带物体类别信息的情况下,保存物体类别信息,并将未知物体的类别标记为对应的物体类别;处理进行到步骤23。\n[0067] 通过上述处理,可以在控制装置无法识别出未知物体的类别的情况下,先请求人工识别处理来识别未知物体的类别,通过人工识别处理,确定得到物体类别,但是由于感测装置获取到的未知物体的信息并不全面,人工处理也可能无法识别出未知物体时,此时指示无人驾驶车辆对未知物体进行识别。从而能够先通过人工识别处理,及时地确定得到物体类别,以满足控制装置实时控制的要求,在人工处理无法确定物体类别时,指示无人驾驶车辆对物体进行识别,利用无人驾驶车辆的信息获取能力和物体识别能力进行物体识别。\n[0068] 基于图2或图3所示的方法,本申请实施例还提供了一种物体识别方法,如图4所示,该方法在图2或图3所示方法的基础上,还包括如下处理:\n[0069] 步骤26、控制装置接收来自无人驾驶车辆的无人驾驶车辆感测数据;其中,无人驾驶车辆感测数据中包括标记出来的与控制装置确定的未知物体对应的物体;\n[0070] 也即,无人驾驶车辆也无法识别出来物体的情况下,对无人驾驶车辆感测数据中与未知物体对应的物体进行标记,并将标记的无人驾驶车辆感测数据发送给控制装置。\n[0071] 步骤27、在来自无人驾驶车辆的反馈消息中携带识别失败信息的情况下,将标记的无人驾驶车辆感测数据发送给一个人工识别处理;\n[0072] 步骤28、接收来自人工识别处理的反馈消息,在反馈消息中携带物体类别信息的情况下,保存物体类别信息,并将未知物体的类别标记为所保存的物体类别;\n[0073] 步骤29、在来自人工识别处理的反馈消息中携带识别失败信息的情况下,将接收到的无人驾驶车辆感测数据和人工处理请求发送给一个人工控制处理,其中人工处理请求用于请求人工控制处理执行基于物体识别的车辆控制处理。\n[0074] 通过图4所示的处理,由于无人驾驶车辆通常是基于已经学习训练得到的类别(即预定类别)进行物体识别,不属于预定类别的物体可能无法被识别出来,通常在应用场景中,无人驾驶车辆出于对处理速度的需要,会对能够识别的物体类别的数量进行限制,也即无人驾驶车辆中能够识别的物体类别的数量少于控制装置能够识别的物体类别的数量,在无人驾驶车辆无法识别出未知物体所属的类别时,请求人工识别处理来识别未知物体所属类别,能够进一步保证未知物体能够被识别出来,可以及时地确定得到物体类别,以满足控制装置进行实时控制的要求,为后续的基于物体识别的车辆控制管理处理提供正确的数据输入。当人工识别处理也无法识别出未知物体时,可以请求人工控制处理执行后续的基于物体识别的车辆控制管理处理,保证基于物体识别的车辆控制管理处理能够得到正确执行。\n[0075] 进一步地,在图2~4所示的方法的基础上,控制装置还根据识别出的物体执行车辆控制处理;其中,车辆控制处理包括路径规划或者行车策略决策。\n[0076] 在本申请的另一些实施例中,上述实施例还可以结合设置。\n[0077] 基于相同的发明构思,本申请实施例还提供了一种物体识别装置。\n[0078] 图5示出了本申请实施例提供的物体识别装置的结构框图,该装置包括:\n[0079] 第一确定模块51,用于根据来自感测装置的感测数据进行物体识别,确定不属于预定类别的物体为未知物体;其中,感测数据是感测装置对车辆行驶状况和道路状况进行感测得到的;\n[0080] 标记模块52,用于在包括未知物体的感测数据中标记出未知物体;\n[0081] 第二确定模块53,用于确定出在未知物体预定范围内的无人驾驶车辆;\n[0082] 收发模块54,用于将标记后的感测数据和识别未知物体的指示发送给所确定的无人驾驶车辆;接收来自无人驾驶车辆的反馈消息;其中,反馈消息中携带的物体类别信息,是无人驾驶车辆对无人驾驶车辆的感测数据进行物体识别,对比来自控制装置的感测数据中的物体与识别出来的物体,判断已识别出的情况下,在反馈消息中携带的识别出来的未知物体的物体类别信息;\n[0083] 保存模块55,用于在反馈消息中携带物体类别信息的情况下,保存物体类别信息,并将未知物体的类别标记为所保存的物体类别。\n[0084] 通过上述技术方案,控制装置在确定物体不属于预定类别时,将该物体确定为未知物体,指示无人驾驶车辆对该物体进行识别,由于无人驾驶车辆的车载摄像头通常就有较高的分辨率,并且无人驾驶车辆中具有其它感测设备,例如激光雷达,能够获取物体较为全面的信息,并基于获取的信息对物体进行高效的识别,从而控制装置能够利用无人驾驶车辆的信息获取能力和物体识别能力,对未知物体进行有效识别,能够解决现有技术中对无人驾驶车辆进行集中控制管理的系统无法有效地识别物体的问题。\n[0085] 在本申请的另一些实施例中,如图6a所示,装置中还包括人工接口模块56,用于将标记模块52标记后的感测数据发送一个人工识别处理;接收来自人工识别处理的反馈消息;\n[0086] 保存模块55,还用于在来自人工识别处理的反馈消息中携带物体类别信息的情况下,保存物体类别信息,并将未知物体的类别标记为对应的物体类别;\n[0087] 第二确定模块53,还用于在来自人工识别处理的反馈消息中携带识别失败信息的情况下,确定出在未知物体预定范围内的无人驾驶车辆。\n[0088] 通过上述技术方案,控制装置无法识别出未知物体的类别的情况下,先请求人工识别处理来识别未知物体的类别,通过人工识别处理,确定得到物体类别,但是由于感测装置获取到的未知物体的信息并不全面,人工处理也可能无法识别出未知物体时,此时指示无人驾驶车辆对未知物体进行识别。从而能够先通过人工识别处理,及时地确定得到物体类别,以满足控制装置实时控制的要求,在人工处理无法确定物体类别时,指示无人驾驶车辆对物体进行识别,利用无人驾驶车辆的信息获取能力和物体识别能力进行物体识别。\n[0089] 在本申请的另一些实施例中,如图6b所示,收发模块54还用于接收来自无人驾驶车辆的无人驾驶车辆感测数据;其中,无人驾驶车辆感测数据中包括标记出来的与控制装置确定的未知物体对应的物体;\n[0090] 人工接口模块56,用于在来自无人驾驶车辆的反馈消息中携带识别失败信息的情况下,将标记的无人驾驶车辆感测数据发送给一个人工识别处理;接收来自人工识别处理的反馈消息;保存模块55,还用于在来自人工识别处理的反馈消息中携带物体类别信息的情况下,保存物体类别信息,并将未知物体的类别标记为所保存的物体类别。\n[0091] 人工接口模块56还用于在来自人工识别处理的反馈消息中携带识别失败信息的情况下,将接收到的无人驾驶车辆感测数据和人工处理请求发送给一个人工控制处理,其中人工处理请求用于请求人工控制处理执行基于物体识别的车辆控制处理。\n[0092] 根据上述技术方案,由于无人驾驶车辆通常是基于已经学习训练得到的类别(即预定类别)进行物体识别,不属于预定类别的物体可能无法被识别出来,通常在应用场景中,无人驾驶车辆出于对处理速度的需要,会对能够识别的物体类别的数量进行限制,也即无人驾驶车辆中能够识别的物体类别的数量少于控制装置能够识别的物体类别的数量,在无人驾驶车辆无法识别出未知物体所属的类别时,请求人工识别处理来识别未知物体所属类别,能够进一步保证未知物体能够被识别出来,可以及时地确定得到物体类别,以满足控制装置进行实时控制的要求,为后续的基于物体识别的车辆控制管理处理提供正确的数据输入。当人工识别处理也无法识别出未知物体时,可以请求人工控制处理执行后续的基于物体识别的车辆控制管理处理,保证基于物体识别的车辆控制管理处理能够得到正确执行。\n[0093] 在本申请的另一些实施例中,图6a和图6b所示的装置还可以合并设置。\n[0094] 在本申请的另一些实施例中,如图7所示,装置还包括控制模块57,用于根据识别出的物体执行车辆控制处理;其中,车辆控制处理包括路径规划或者行车策略决策。\n[0095] 在本申请的另一些实施例中,图6a、图6b和图7的装置还可以合并设置。\n[0096] 基于相同的发明构思,本申请实施例还提供了一种物体识别装置。\n[0097] 如图8所示,本申请实施例提供的物体识别装置包括一个处理器81和至少一个存储器82,至少一个存储器82中存储有至少一条机器可执行指令,处理器81执行至少一条机器可执行指令实现:\n[0098] 根据来自感测装置的感测数据进行物体识别,确定不属于预定类别的物体为未知物体;其中,感测数据是感测装置对车辆行驶状况和道路状况进行感测得到的;\n[0099] 在包括未知物体的感测数据中标记出未知物体;\n[0100] 确定出在未知物体预定范围内的无人驾驶车辆;\n[0101] 将标记后的感测数据和识别未知物体的指示发送给所确定的无人驾驶车辆;\n[0102] 接收来自无人驾驶车辆的反馈消息,在反馈消息中携带物体类别信息的情况下,保存物体类别信息,并将未知物体的类别标记为所保存的物体类别;其中,反馈消息中携带的物体类别信息,是无人驾驶车辆对无人驾驶车辆的感测数据进行物体识别,对比来自控制装置的感测数据中的物体与识别出来的物体,判断已识别出的情况下,在反馈消息中携带的识别出来的未知物体的物体类别信息。\n[0103] 通过上述技术方案,控制装置在确定物体不属于预定类别时,将该物体确定为未知物体,指示无人驾驶车辆对该物体进行识别,由于无人驾驶车辆的车载摄像头通常就有较高的分辨率,并且无人驾驶车辆中具有其它感测设备,例如激光雷达,能够获取物体较为全面的信息,并基于获取的信息对物体进行高效的识别,从而控制装置能够利用无人驾驶车辆的信息获取能力和物体识别能力,对未知物体进行有效识别,能够解决现有技术中对无人驾驶车辆进行集中控制管理的系统无法有效地识别物体的问题。\n[0104] 在本申请的另一些实施例中,处理器81执行至少一条机器可执行指令实现在包括未知物体的感测数据中标记出未知物体之后,还实现:将标记后的感测数据发送一个人工识别处理;则\n[0105] 处理器81执行至少一条机器可执行指令实现确定出在未知物体预定范围内的无人驾驶车辆,包括:接收来自人工识别处理的反馈消息,在反馈消息中携带物体类别信息的情况下,保存物体类别信息,并将未知物体的类别标记为对应的物体类别;在反馈消息中携带识别失败信息的情况下,确定出在未知物体预定范围内的无人驾驶车辆。\n[0106] 通过上述技术方案,控制装置无法识别出未知物体的类别的情况下,先请求人工识别处理来识别未知物体的类别,通过人工识别处理,确定得到物体类别,但是由于感测装置获取到的未知物体的信息并不全面,人工处理也可能无法识别出未知物体时,此时指示无人驾驶车辆对未知物体进行识别。从而能够先通过人工识别处理,及时地确定得到物体类别,以满足控制装置实时控制的要求,在人工处理无法确定物体类别时,指示无人驾驶车辆对物体进行识别,利用无人驾驶车辆的信息获取能力和物体识别能力进行物体识别。\n[0107] 在本申请的另一些实施例中,处理器81执行至少一条机器可执行指令还实现:接收来自无人驾驶车辆的无人驾驶车辆感测数据;其中,无人驾驶车辆感测数据中包括标记出来的与控制装置确定的未知物体对应的物体;在来自无人驾驶车辆的反馈消息中携带识别失败信息的情况下,将标记的无人驾驶车辆感测数据发送给一个人工识别处理;接收来自人工识别处理的反馈消息,在反馈消息中携带物体类别信息的情况下,保存物体类别信息,并将未知物体的类别标记为所保存的物体类别。在来自人工识别处理的反馈消息中携带识别失败信息的情况下,将接收到的无人驾驶车辆感测数据和人工处理请求发送给一个人工控制处理,其中人工处理请求用于请求人工控制处理执行基于物体识别的车辆控制处理。\n[0108] 根据上述技术方案,由于无人驾驶车辆通常是基于已经学习训练得到的类别(即预定类别)进行物体识别,不属于预定类别的物体可能无法被识别出来,通常在应用场景中,无人驾驶车辆出于对处理速度的需要,会对能够识别的物体类别的数量进行限制,也即无人驾驶车辆中能够识别的物体类别的数量少于控制装置能够识别的物体类别的数量,在无人驾驶车辆无法识别出未知物体所属的类别时,请求人工识别处理来识别未知物体所属类别,能够进一步保证未知物体能够被识别出来,可以及时地确定得到物体类别,以满足控制装置进行实时控制的要求,为后续的基于物体识别的车辆控制管理处理提供正确的数据输入。当人工识别处理也无法识别出未知物体时,可以请求人工控制处理执行后续的基于物体识别的车辆控制管理处理,保证基于物体识别的车辆控制管理处理能够得到正确执行。\n[0109] 在上述实施例的基础上,处理器81执行至少一条机器可执行指令还实现:根据识别出的物体执行车辆控制处理;其中,车辆控制处理包括路径规划或者行车策略决策。\n[0110] 在本申请的另一些实施例中,上述实施例还可以结合设置。\n[0111] 显然,本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。
法律信息
- 2022-06-21
- 2020-04-21
专利申请权的转移
登记生效日: 2020.04.02
申请人由北京图森未来科技有限公司变更为北京图森智途科技有限公司
地址由101300 北京市顺义区中关村科技园区顺义园临空二路1号变更为101300 北京市顺义区中关村科技园区顺义园临空二路1号
- 2019-09-17
实质审查的生效
IPC(主分类): G05D 1/02
专利申请号: 201810142084.0
申请日: 2018.02.11
- 2019-08-23
引用专利(该专利引用了哪些专利)
序号 | 公开(公告)号 | 公开(公告)日 | 申请日 | 专利名称 | 申请人 | 该专利没有引用任何外部专利数据! |
被引用专利(该专利被哪些专利引用)
序号 | 公开(公告)号 | 公开(公告)日 | 申请日 | 专利名称 | 申请人 | 该专利没有被任何外部专利所引用! |