点击右上角微信好友

朋友圈

请使用浏览器分享功能进行分享

正在阅读:平行视觉:让汽车拥有一双“慧眼”
首页> 科普频道> 科普头条 > 正文

平行视觉:让汽车拥有一双“慧眼”

来源:《中国科学报》2021-02-18 09:40

调查问题加载中,请稍候。
若长时间无响应,请刷新本页面

  无人驾驶进入汽车领域以来,一直无法消除汽车上安装辅助系统对道路障碍的识别盲区。

  2005年,中国科学院自动化所复杂系统管理与控制国家重点实验室主任王飞跃提出平行驾驶的概念。这一概念针对自动驾驶构建其社会—信息—物理系统模型,从人与车、车与环境、人与车与环境等多个不同层次考虑自动驾驶的实现,并独特性地提出使用云端驾驶与地面端驾驶“平行”的方式,指导无人车实现智能驾驶,为未来无人驾驶指明了一种新的实现途径。

  日前,王飞跃带领团队在《中国图像图形学报》发表了一篇关于平行视觉感知技术的文章,提出将人工社会(Artificial societies)、计算实验(Computational experiments)和平行执行(Parallel execution)构成的ACP方法引入智能驾驶的视觉感知领域,解决了视觉模型合理训练和评估问题,有助于智能驾驶进一步走向实际应用。

  视觉感知努力向人眼看齐

  与依靠后视镜作为辅助的早期汽车相比,现代汽车早已经被摄像头、毫米波雷达、超声波雷达以及激光雷达等负责感知的智能传感器“武装”起来。“相比于雷达,视觉感知的智能之处体现在纹理信息提取和分辨率上。”王飞跃在接受《中国科学报》采访时解释道。智能驾驶需要对复杂的交通环境进行准确感知,其中就包括对交通标志、车道线等进行识别,这些交通要素的识别严重依赖色彩信息,而视觉感知可以有效地实现对这些目标的识别和判断,目前的雷达技术则无法做到。

  不仅如此,“视觉感知提取的纹理信息还能够对同一类别的不同实例进行区分,有助于完成复杂环境下的目标跟踪、轨迹预测等任务。”王飞跃表示。此外,视觉感知能够以较低成本构建高分辨率图像,因此即使是对远处目标和较小目标,视觉感知方案依然能够保证有较多的信息来对其进行识别,从而大大提升车辆对环境的智慧感知能力。

  论文结果显示,目标检测的训练阶段虚实混合数据最高精度可达60.9%,同时精度受到环境与困难程度的影响。

  “尽管我们认为在智能驾驶中视觉感知可以类比为人眼的一部分,它可以像人眼一样获取外界的视觉信息,但是目前还无法做到像人类强大视觉系统一样进行推理。”王飞跃坦言。为此,他举了个例子,比如在复杂城市道路环境中的交叉路口或者人行道上,人类可以根据当前环境推理其他车辆或者行人意图,并可以与其他车辆或者行人交互并根据情况礼让,而这一点,目前的视觉感知系统无法做到。“因为视觉感知是通过车载摄像头或雷达对自动驾驶汽车周围环境数据进行收集,利用计算机视觉为代表的深度学习技术,对收集到的数据进行图像识别、图像分类,并对有价值的信息进行检测、跟踪,将其处理成自动驾驶系统能够读懂的语言,进而为控制决策系统提供依据。”

  视觉感知是智能驾驶核心

  在这项研究中,研究人员将视觉感知应用到“长尾场景”中。该场景主要涉及日常驾驶中出现概率极低、很少遇到的复杂挑战场景,如极端恶劣天气、突发交通事故、突然出现的行人等。

  “由于长尾场景发生概率极低且危险系数高,往往难以采集到相应数据来训练和测试视觉模型,导致目前基于深度学习的视觉算法没有经过充分测试,只在简单的受约束环境下有效。一旦运用到实际复杂开放的交通环境中,算法很容易失败。”王飞跃说,因此,研究人员希望用平行视觉来解决这一问题,目标是实现一种“长尾常规化”模式,通过人工虚拟场景来仿真模拟复杂的实际场景,利用计算实验进行视觉模型的训练与评估,最后借助虚实互动的平行执行实现视觉模型的在线优化。

  “这个过程反复闭环迭代,我们希望实现视觉系统对复杂环境的智能感知与理解,让视觉感知真正走向实际应用。”王飞跃表示。

  智能驾驶中的“马粪”问题

  早在2005年,王飞跃就提出了平行驾驶的概念。为了解释这一概念,他曾在一次演讲中以马车举例。上世纪末,马作为主要的交通工具,随之而来的却是无法分解的马粪。这一问题困扰了人们很多年,甚至有专门的国际会议来研究当时面临的“马粪危机”。

  汽车的到来,成功地消除了马粪的问题。而在人工智能时代,即便给车辆安装高线束激光雷达等传感器感知,配上“足够算力”的计算单元,优化算法,将汽车改装成繁杂的智能体,仍无法避免无人车在长久时间内不出现事故。“这就像是这个时代人类面临的马粪问题。”王飞跃说,“有人驾驶、远程控制、网络车和无人车需要统一起来,成为平行驾驶,根除无人驾驶的‘马粪问题’。如果一定要将这几种因素分开,恐怕就是用马车技术解决马粪问题。”

  在平行驾驶中,视觉感知作为基础环节,处于智能驾驶车辆与外界环境信息交互的关键位置。王飞跃认为,其关键在于使智能驾驶车辆更好地模拟人类驾驶员的感知能力,从而理解自身和周边的驾驶态势。而随着自动驾驶中人为干预度的不断减小,视觉感知获取环境信息的全面性、准确性和高效性要求越来越高,其始终属于智能驾驶的核心部分。

  他同时解释道,当前视觉感知依赖相机系统实现对环境的感知,在实际任务中会产生大量冗余的数据,从而导致计算复杂度和存储负担的增加、计算效率降低。“平行视觉则更加主动,基于描述学习构建软件定义的具有可控性的人工场景、基于预测学习完成人工场景中的计算实验、基于平行执行实现虚实互动,以解决虚拟与现实差异性问题。”

  目前,王飞跃团队采用Agent建模方法,模拟北京中关村区域和常熟智能车测试区域,在图形学工作站上建立人工场景,设计丰富典型的环境条件和目标运动,生成大量带详细标注信息的图像视频数据集。同时,部分研究工作采用生成式对抗网络聚焦于虚实交互过程中存在的领域迁移等问题,并生成了具有真实驾驶场景纹理和细节的合成图像。“现在,视觉感知已经从道路感知逐步向环境认知方向发展。它已成功应用于识别交通信号、道路标志和标线等静态环境信息,以及行人、车辆和其他移动的障碍物。接下来,将会进一步理解道路目标之间的交互关系和逻辑,进行意图分析、预测和决策,有效提升无人驾驶车辆的智能认知能力。”王飞跃说,“随着深度学习技术的进步和推广应用,对车载感知计算平台的性能有了更高要求,将来会在保证算力的情况下降低计算成本。”

  “上述成果让我们有信心布局平行视觉方法在中国智能车未来挑战赛上的应用。平行视觉是平行智能体系的重要一环,结合平行驾驶、平行测试和平行学习等重要理论研究,智能车先在人工世界试开,‘要在人工世界吃多堑,物理世界长多智’。”王飞跃有信心地表示。(袁一雪)

[ 责编:张梦凡 ]
阅读剩余全文(

相关阅读

您此时的心情

光明云投
新闻表情排行 /
  • 开心
     
    0
  • 难过
     
    0
  • 点赞
     
    0
  • 飘过
     
    0

视觉焦点

  • 习近平同埃及总统塞西会谈

  • 多方救援力量向核心区域挺进

独家策划

推荐阅读
全面了解我国管辖海域基础地质与海底构造特征,服务自然资源管理和国土空间规划“一张图”建设
2026-09-03 11:41
为更好地推动我国流感疫苗的预防接种,中国疾病预防控制中心近日发布《中国流感疫苗预防接种技术指南(2026—2027)》。
2026-09-03 11:39
高温超导带材有了更便宜、更结实的“骨架”。记者2日从中国科学院理化技术研究所获悉,该所科研团队成功研制出高温超导带材新型“骨架”——铁基合金基带(DW01)。用该基带制备的超导带材关键性能指标显著优于传统哈氏合金基带产品,标志着我国在实现高温超导带材核心材料自主可控上迈出重要一步。
2026-09-03 10:38
每天,我们的大脑都要承受成千上万条信息的狂轰滥炸。如果把这些经历和信息全盘照收,大脑很快就会像塞满垃圾文件的电脑一样“死机”。那么,大脑是如何在信息的海洋中去粗取精,只把最重要的事情存进长期记忆的硬盘呢?
2026-09-03 10:38
9月,昴星团伴月、月掩金星、中秋月、海王星冲日等天象将轮番登场。其中备受大家关注的中秋月,既不是“十五圆”,也不是“十六圆”,而是较罕见的“十七圆”。
2026-09-03 10:38
记者13日从国家管网集团获悉,国内首次成品油长输管道顺序输送甲醇现场试验在陕西省咸阳市顺利完成。这标志着我国成品油管道顺序输送甲醇技术实现从理论探索到工程验证的关键跨越,为跨区域绿色甲醇安全、高效输送提供了完整技术方案与实践示范。
2026-09-03 10:38
张国捷介绍,壁虎是研究性染色体演化得天独厚的类群。为此,研究团队选取了22种壁虎开展基因组学分析,其中20个物种的性别决定机制明确,包含3种环境依赖型、6种XY基因型、11种ZW基因型,另有两个外群物种作为对照。研究还发现,上述17个由基因型性别决定的壁虎物种拥有20条性染色体,这些染色体分别起源于17条不同的祖先染色体。
2026-09-03 10:28
开学第一天,浙江省温州市广场路小学“我的暑期科学发现”发布会现场,孩子们正轮流上场展示自己的暑期探究成果。
2026-09-02 12:09
恒星形成率降到约四成,作为重要“气罐”的中性氢却仍保有七成以上。宇宙为何“有气难成星”?
2026-09-02 12:06
9月1日,以“科技改变生活 创新赢得未来”为主题的2026年全国科普月活动全面启动。
2026-09-02 12:21
今年夏天,全国用电负荷持续高位运行,屡创新高。这份“负荷迎峰值、居民却无感”的反差并非偶然,而是得益于我国电力系统的稳定供应,彰显了我国新型能源体系建设的显著成效。
2026-09-02 12:20
作为装置“心脏”的超导磁体性能,往往决定了这些装置能在冲击极限的路上走多远。通上电流的瞬间,超导线圈要承受巨大电磁力的拉扯。此时,一根看上去不起眼的“金属带子”成了决定“心脏”承受力的关键。
2026-09-02 12:12
随着全球气候变化的加剧,干旱已成为威胁森林生态系统稳定与制约林木生长的主要环境因子。
2026-09-02 10:45
中共中央、国务院日前转发了《中央宣传部、司法部关于开展法治宣传教育的第九个五年规划(2026—2030年)》,标志着全民普法正式开启“九五”的新周期。
2026-09-01 09:42
开学季来临,从近红外光醒脑仪、α脑波音频智慧仪,到加入红光模块的哺光台灯、模拟户外远眺的雾视屏……各类宣称能“醒脑”“护眼”的产品在电商平台热卖。他进一步指出,儿童颅骨厚度、密度与成人差异显著,目前尚无任何一项权威神经科学研究支持健康儿童使用此类设备。
2026-09-01 09:36
2026中国国际大数据产业博览会上,观众围观机器人表演。文生图、文生视频、音乐生成等一系列智能服务背后,核心驱动便是词元。用国家数据发展研究院院长胡坚波的话说,词元的生产就是以算力作为底座、以数据作为语料、以模型作为中枢来开展智能的工作。
2026-09-01 09:31
长期以来,美国亚利桑那州布莱克河西支流的本土阿帕奇鳟和圆尾鳅,一直难以与入侵的溪红点鲑竞争。研究超级雄鱼的科学家已经锁定了另外10个目标,包括白斑狗鱼、玻璃梭鲈、斑点叉尾鮰,甚至牛蛙。
2026-09-01 09:29
UDP-葡萄糖从细胞质一侧进入亲水口袋,神经酰胺则从膜内侧“横向”滑入疏水通道,两条通道最终在催化中心汇合。在此基础上,他们进一步解析了UGCG与多种代表性抑制剂结合的结构,试图看清药物究竟如何把这道“总闸门”关小。
2026-09-01 09:26
冰川持续消融直接推动高原冰湖数量、面积大幅增长,极大加剧了冰湖溃决洪水、泥石流等灾害风险。
2026-08-31 10:00
“咩——”眼下,新疆籽用西葫芦陆续成熟,双河市石峪镇的千亩籽用西葫芦地里,来了群特殊的“帮手”。每年8月,山区牧场的牧草逐渐进入枯萎期,牧民便会和籽用西葫芦种植户们提前联系,协商把羊群转场到这里。
2026-08-31 09:59
加载更多