为配备集成处理器的 ADAS 域控制器构建多摄像头视觉感知系统
时间:2023-11-21 14:37来源:
摘要:当我们开车穿过社区和城镇并看到孩子们在步行和骑自行车时,我们会意识到道路安全的重要性。美国国家公路交通安全管理局(NHTSA)2021年的一项研究显示,在美国,平均每天有20名行人在交通事故中丧生——每71分钟就有一名行人死亡。
当我们开车穿过社区和城镇并看到孩子们在步行和骑自行车时,我们会意识到道路安全的重要性。美国国家公路交通安全管理局 (NHTSA) 2021 年的一项研究显示,在美国,平均每天有 20 名行人在交通事故中丧生——每 71 分钟就有一名行人死亡。世界卫生组织在 2022 年的一项研究中发现,每年有 130 万人因道路交通事故死亡其中一半以上是行人、骑自行车和骑摩托车的人。不幸的是,驾驶员分心是造成这些事故的主要原因之一,而这种分心的趋势似乎每年都在增加。
高级驾驶辅助系统 (ADAS) 有助于减轻驾驶分心的影响,从而为驾驶员、行人和弱势道路群体提供周全的保护。为了达到五星安全等级并满足监管要求,需要增加备用摄像头、前置摄像头和驾驶监控系统。因此,许多制造商正在改进其车辆架构,以在 ADAS 域控制器中集成各种主动安全功能。
域控制器通常需要:
· 与多种传感器连接的能力:数量、模式和分辨率。
· 用于感知、驾驶和停车应用的视觉、人工智能 (AI)和通用处理。
· 与低带宽和高速车载网络的连接。
· 功能安全和保障可防止关键器件遭到破坏。
ADAS 域控制器的处理和系统要求
对系统内存、计算性能和输入/输出 (I/O) 带宽日益增长的需求使系统设计变得更加复杂,并提高了系统成本。如今的高端 ADAS 系统使用多个不同分辨率的摄像头,并在汽车周围配备了各种雷达传感器,以提供驾驶环境的完整视图。对于从传感器收集的每组图像,AI 和计算机视觉支持的检测和分类算法都需要以每秒高帧率运行,以准确地解释场景。这给系统和软件设计人员带来了多项挑战,包括将这些传感器连接到处理系统、将其内容传输到存储器中,以及同步数据以供分类算法实时处理。
德州仪器 (TI) 的 TDA4VH-Q1 片上系统 (SoC)(如图 1 所示)集成了视觉预处理、深度和运动加速、AI 网络处理、汽车网络接口和安全微控制器 (MCU) 等功能。TPS6594-Q1 电源管理集成电路经过优化,可在需要满足汽车安全完整性等级 (ASIL) D 的应用中为 TDA4VH-Q1 供电,包括一些功能安全特性,比如电压监测、TDA4VH-Q1 SoC 的硬件错误检测,以及一个问答看门狗,用于监测 SoC 上的 MCU 是否存在导致锁定的软件错误。
图 1:TDA4VH-Q1 SoC 的简化图
支持多摄像头视觉感知
需要提高处理器性能的 ADAS 应用示例之一是多摄像头视觉感知。在汽车周围安装摄像头可提供 360 度视野,有助于防止正面碰撞,并帮助驾驶员对盲点和邻近车道的交通和行人活动保持警惕。
Phantom AI 利用 TI 的 J784S4 处理器开源软件开发套件 (SDK),为 TDA4VH-Q1 开发了一个多摄像头视觉感知系统。Phantom AI 的 PhantomVision™ 系统为 TDA4VH-Q1 处理器提供了一整套 ADAS 功能,从符合欧盟通用安全法规到符合美国汽车工程师学会 (SAE) L2 级和 L2+ 级标准。除了车辆、弱势道路群体、自由空间、交通标志和交通信号灯检测等基本功能外,PhantomVision™ 还包括了施工区域、转向灯和尾灯检测以及基于 AI 的自我路径预测等附加功能。其多摄像头感知系统由前视、侧视和后视摄像头组合而成,可全方位覆盖车辆的 360 度视野,有助于消除盲点(图 2)。
图 2:Phantom AI 使用的 360 度视野的摄像头位置
通过利用 TDA4VH-Q1 的高性能计算、深度学习引擎和用于信号和图像预处理的专用加速器的组合,Phantom AI 使实时操作成为可能。专用视觉预处理加速器可处理相机流水线,包括图像捕捉、色彩空间转换和多尺度图像金字塔构建。结合德州仪器的深度学习库,TDA4VH-Q1 的每秒数万亿次高速运算多核数字信号处理器和矩阵乘法辅助引擎可提供具有快速算法和最小 I/O 操作调度的高效神经网络,从而实现高精度和低延迟。在本视频中,您可以了解到使用 TDA4VH-Q1 处理器的 PhantomVision™ 系统的 ADAS 功能。
结语
为 SAE L2 级和 L2+ 级驾驶构建复杂的多传感器 ADAS 系统并不需要水冷式超级计算机。借助TI TDA4VH-Q1 这一类设计精良的 SoC,并由 Phantom AI 等专业汽车工程师进行设计和开发,可以向市场推出符合功能安全要求的高性价比系统。虽然我们对自动驾驶的未来充满热情,但设计符合功能安全要求的经济高效系统的真正目的是使我们的世界变得更加安全。使 ADAS 技术惠及更多汽车市场领域(使更多汽车配备更多 ADAS),为驾驶员和行人带来更好、更安全的体验。
关于德州仪器 (TI)
德州仪器 (TI)(纳斯达克股票代码:TXN)是一家全球性的半导体公司,致力于设计、制造、测试和销售模拟和嵌入式处理芯片,用于工业、汽车、个人电子产品、通信设备和企业系统等市场。我们致力于通过半导体技术让电子产品更经济实用,创造一个更美好的世界。如今,每一代创新都建立在上一代创新的基础之上,使我们的技术变得更小巧、更快速、更可靠、更实惠,从而实现半导体在电子产品领域的广泛应用,这就是工程的进步。这正是我们数十年来乃至现在一直在做的事。欲了解更多信息,请访问公司网站www.ti.com.cn
高级驾驶辅助系统 (ADAS) 有助于减轻驾驶分心的影响,从而为驾驶员、行人和弱势道路群体提供周全的保护。为了达到五星安全等级并满足监管要求,需要增加备用摄像头、前置摄像头和驾驶监控系统。因此,许多制造商正在改进其车辆架构,以在 ADAS 域控制器中集成各种主动安全功能。
域控制器通常需要:
· 与多种传感器连接的能力:数量、模式和分辨率。
· 用于感知、驾驶和停车应用的视觉、人工智能 (AI)和通用处理。
· 与低带宽和高速车载网络的连接。
· 功能安全和保障可防止关键器件遭到破坏。
ADAS 域控制器的处理和系统要求
对系统内存、计算性能和输入/输出 (I/O) 带宽日益增长的需求使系统设计变得更加复杂,并提高了系统成本。如今的高端 ADAS 系统使用多个不同分辨率的摄像头,并在汽车周围配备了各种雷达传感器,以提供驾驶环境的完整视图。对于从传感器收集的每组图像,AI 和计算机视觉支持的检测和分类算法都需要以每秒高帧率运行,以准确地解释场景。这给系统和软件设计人员带来了多项挑战,包括将这些传感器连接到处理系统、将其内容传输到存储器中,以及同步数据以供分类算法实时处理。
德州仪器 (TI) 的 TDA4VH-Q1 片上系统 (SoC)(如图 1 所示)集成了视觉预处理、深度和运动加速、AI 网络处理、汽车网络接口和安全微控制器 (MCU) 等功能。TPS6594-Q1 电源管理集成电路经过优化,可在需要满足汽车安全完整性等级 (ASIL) D 的应用中为 TDA4VH-Q1 供电,包括一些功能安全特性,比如电压监测、TDA4VH-Q1 SoC 的硬件错误检测,以及一个问答看门狗,用于监测 SoC 上的 MCU 是否存在导致锁定的软件错误。
图 1:TDA4VH-Q1 SoC 的简化图
支持多摄像头视觉感知
需要提高处理器性能的 ADAS 应用示例之一是多摄像头视觉感知。在汽车周围安装摄像头可提供 360 度视野,有助于防止正面碰撞,并帮助驾驶员对盲点和邻近车道的交通和行人活动保持警惕。
Phantom AI 利用 TI 的 J784S4 处理器开源软件开发套件 (SDK),为 TDA4VH-Q1 开发了一个多摄像头视觉感知系统。Phantom AI 的 PhantomVision™ 系统为 TDA4VH-Q1 处理器提供了一整套 ADAS 功能,从符合欧盟通用安全法规到符合美国汽车工程师学会 (SAE) L2 级和 L2+ 级标准。除了车辆、弱势道路群体、自由空间、交通标志和交通信号灯检测等基本功能外,PhantomVision™ 还包括了施工区域、转向灯和尾灯检测以及基于 AI 的自我路径预测等附加功能。其多摄像头感知系统由前视、侧视和后视摄像头组合而成,可全方位覆盖车辆的 360 度视野,有助于消除盲点(图 2)。
图 2:Phantom AI 使用的 360 度视野的摄像头位置
通过利用 TDA4VH-Q1 的高性能计算、深度学习引擎和用于信号和图像预处理的专用加速器的组合,Phantom AI 使实时操作成为可能。专用视觉预处理加速器可处理相机流水线,包括图像捕捉、色彩空间转换和多尺度图像金字塔构建。结合德州仪器的深度学习库,TDA4VH-Q1 的每秒数万亿次高速运算多核数字信号处理器和矩阵乘法辅助引擎可提供具有快速算法和最小 I/O 操作调度的高效神经网络,从而实现高精度和低延迟。在本视频中,您可以了解到使用 TDA4VH-Q1 处理器的 PhantomVision™ 系统的 ADAS 功能。
结语
为 SAE L2 级和 L2+ 级驾驶构建复杂的多传感器 ADAS 系统并不需要水冷式超级计算机。借助TI TDA4VH-Q1 这一类设计精良的 SoC,并由 Phantom AI 等专业汽车工程师进行设计和开发,可以向市场推出符合功能安全要求的高性价比系统。虽然我们对自动驾驶的未来充满热情,但设计符合功能安全要求的经济高效系统的真正目的是使我们的世界变得更加安全。使 ADAS 技术惠及更多汽车市场领域(使更多汽车配备更多 ADAS),为驾驶员和行人带来更好、更安全的体验。
关于德州仪器 (TI)
德州仪器 (TI)(纳斯达克股票代码:TXN)是一家全球性的半导体公司,致力于设计、制造、测试和销售模拟和嵌入式处理芯片,用于工业、汽车、个人电子产品、通信设备和企业系统等市场。我们致力于通过半导体技术让电子产品更经济实用,创造一个更美好的世界。如今,每一代创新都建立在上一代创新的基础之上,使我们的技术变得更小巧、更快速、更可靠、更实惠,从而实现半导体在电子产品领域的广泛应用,这就是工程的进步。这正是我们数十年来乃至现在一直在做的事。欲了解更多信息,请访问公司网站www.ti.com.cn
免责声明:本文若是转载新闻稿,转载此文目的是在于传递更多的信息,版权归原作者所有。文章所用文字、图片、视频等素材如涉及作品版权问题,请联系本网编辑予以删除。
我要投稿
近期活动
- 安森美汽车&能源基础设施白皮书下载活动时间:2024年04月01日 - 2024年10月31日[立即参与]
- 2023年安森美(onsemi)在线答题活动时间:2023年09月01日 - 2023年09月30日[查看回顾]
- 2023年安森美(onsemi)在线答题活动时间:2023年08月01日 - 2023年08月31日[查看回顾]
- 【在线答题活动】PI 智能家居热门产品,带您领略科技智慧家庭时间:2023年06月15日 - 2023年07月15日[查看回顾]
- 2023年安森美(onsemi)在线答题活动时间:2023年06月01日 - 2023年06月30日[查看回顾]
分类排行榜
- 汽车电子电源行业可靠性要求,你了解多少?
- 内置可编程模拟功能的新型 Renesas Synergy™ 低功耗 S1JA 微控制器
- Vishay 推出高集成度且符合 IrDA® 标准的红外收发器模块
- ROHM 发布全新车载升降压电源芯片组
- 艾迈斯半导体推出行业超薄的接近/颜色传感器模块,助力实现无边框智能手机设计
- 艾迈斯半导体与 Qualcomm Technologies 集中工程优势开发适用于手机 3D 应用的主动式立体视觉解决方案
- 维谛技术(Vertiv)同时亮相南北两大高端峰会,精彩亮点不容错过
- 缤特力推出全新商务系列耳机 助力解决开放式办公的噪音难题
- CISSOID 和泰科天润(GPT)达成战略合作协议,携手推动碳化硅功率器件的广泛应用
- 瑞萨电子推出 R-Car E3 SoC,为汽车大显示屏仪表盘带来高端3D 图形处理性能
编辑推荐
小型化和稳定性如何兼得?ROHM 推出超小型高输出线性 LED 驱动器 IC,为插座型 LED 驱动 IC 装上一颗强有力的 “心脏”
众所周知,LED的驱动IC担负着在输入电压不稳定的情况下,为LED提供恒定的电流,并控制恒定(可调)亮度的作用。无论是室内照明,还是车载应用,都肩负着极为重要的使命。
- 关于反激电源效率的一个疑问
时间:2022-07-12 浏览量:10208
- 面对热拔插阐述的瞬间大电流怎么解决
时间:2022-07-11 浏览量:8960
- PFC电路对N线进行电压采样的目的是什么
时间:2022-07-08 浏览量:9605
- RCD中的C对反激稳定性有何影响
时间:2022-07-07 浏览量:7217
- 36W单反激 传导7~10M 热机5分钟后超标 不知道哪里出了问题
时间:2022-07-07 浏览量:5988
- PFC电感计算
时间:2022-07-06 浏览量:4197
- 多相同步BUCK
时间:2010-10-03 浏览量:37874
- 大家来讨论 系列之二:开机浪涌电流究竟多大?
时间:2016-01-12 浏览量:43170
- 目前世界超NB的65W适配器
时间:2016-09-28 浏览量:60032
- 精讲双管正激电源
时间:2016-11-25 浏览量:128150
- 利用ANSYS Maxwell深入探究软磁体之----电感变压器
时间:2016-09-20 浏览量:107567
- 【文原创】认真的写了一篇基于SG3525的推挽,附有详细..
时间:2015-08-27 浏览量:100315