先进的安全车辆(ASV)配备基于摄像头视觉的高级驾驶员辅助系统(ADAS),这种趋势得到了日益迅猛的发展。
此类ADAS采用一个或多个车用摄像头(单目或立体摄像头)通过图像识别技术以检测并识别我们车辆四周的车辆、行人、交通标志等等,以及我们车辆内部的驾驶员和乘客状态。
东芝的图像识别处理器Visconti2(TMPV75系列)集成了RISC型MPE(媒体处理引擎)和图像处理加速器,适用于以上ADAS中的各种图像处理。MPE具有3粒度并行结构,分别是用于任务级并行的多核、用于指令级并行的VLIW(超长指令字)以及用于数据级并行的SIMD(单指令流、多数据流),所以获得了高的图像数据处理性能。图像处理加速器有助于在低功耗条件下进行实时图像处理。下面将举例介绍Visconti2(TMPV75系列)对于以上ADAS的各种图像识别处理应用。
Visconti2(TMPV75系列)和Visconti4(TMPV76系列)图像识别处理器能够实时处理来自1至4个摄像头的输入图像(并且允许同时连接最多8台摄像头)。Visconti2(TMPV75系列)和Visconti4(TMPV76系列)可以并行运行多个ADAS应用,以识别车辆四周的车辆、行人、交通线路、交通标识等。 可能的应用包括:车辆检测和防撞警告;行人检测和防撞警告;车道检测和偏离警告;交通标识识别和红灯信号检测。Visconti2(TMPV75系列)和Visconti4(TMPV76系列)同时具备高性能和低功耗特点。
因采用了单目摄像头的单视频输入接口通道,TMPV7502XBG同时具备高的图像识别性能和低功耗特点(东芝测得的典型值为0.6 W)。 所以,TMPV7502XBG可提供小型封装。它适用于后方监视器、电子后视镜和电子门镜应用,提供车辆和行人识别以及移动物体检测功能。
器件型号 | 系列 | CPU | MPE | 图像处理加速器 | 视频输入 | 主要特点 | 封装 |
---|---|---|---|---|---|---|---|
TMPV7608XBG | TMPV760 系列 |
两个东芝原创的 32-bit RISC |
8 | 仿射变换、过滤器、直方图、HOG、 增强型CoHOG、匹配、金字塔、SfM |
最多 8通道 |
片上存储器、存储器控制器、CAN、 I2CUART、SPI、PCM、定时器/计数器 外部MCU接口等 |
PFBGA796 |
TMPV7528XBG | TMPV752 系列 |
东芝原创的 32位RISC MeP和 ARM®Cortex®-A9 MPCore |
4 | 仿射变换、过滤器、直方图、 HOG、匹配 |
最多 4通道 |
片上存储器、存储器控制器、 PCI Express、CAN、I2C、 UART、SPI、 定时器/计数器、 外部MCU接口等 |
PBGA516 |
TMPV7506XBG |
TMPV750 系列 |
东芝原创的32位 RISC MeP |
|||||
TMPV7504XBG |
仿射变换、过滤器、直方图、匹配 | 最多 2通道 |
片上存储器、存储器控制器、CAN、 I2C、UART、SPI、PCM、定时器/计数器、 、外部MCU接口等 |
||||
TMPV7502XBG | 2 | 仿射变换、过滤器、直方图、 HOG、匹配 |
最多1通道 |
片上存储器、存储器控制器、CAN、 I2C、UART、SPI、PCM、定时器/计数器等 |
PLFBGA324 |
* TMPV7608XBG的视频输入接口具有4/8视频开关。
器件型号 | 电源 电压 |
DC-DC转换器电源 (输出电压/电流) |
平均负载 效率 |
监控特点 | I2C 通信 | 封装 |
---|---|---|---|---|---|---|
TC9580FTG | 工作 电压 范围: 4.5至5.5V |
DCDC1(降压): 1.15V/3.5A DCDC2(降压): 3.3V/1.0A DCDC3(降压): 1.25V或1.53V或1.84V/2.4A DCDC4(step-down): 1.2V或1.54V或1.84V/0.8A |
90%(典型值)* |
连续监 控电源 电路 |
上电和掉电、 电源电压设置、 电源故障检测、 上电顺序 |
VQFN48 |
*在东芝的测试条件下测量所得,因主板和外部部件条件的不同而有所不同。
器件型号 | 输出像素 | 光学格式 | 长宽比 | 帧速率(全)(fps) | 主要功能 | 封装 |
---|---|---|---|---|---|---|
TCM3221PBA | 1.3 M(Quad-VGA/720 p) | 1/4 inch | 4:3/16:9 | 30 fps/60 fps | HDR, |
PBGA |
*Arm和Cortex是Arm有限公司(或其子公司)在美国和/或其它国家的注册商标。
*MediaLB是Microchip Technology Inc.在美国和其它国家的注册商标。
*PCI Express和PCIe是PCI-SIG的注册商标。
*本文提及到的系统和产品名称可能是各自公司或组织的商标或注册商标。
如您需查询,请点击其中任何一个链接