从 ADAS 到 Robotaxi：视觉系统如何升级以满足新型移动出行用例（第二部分）

Markdown 内容：_本博客文章最初发表于[e-con Systems 网站](https://www.e-consystems.com/blog/camera/applications/from-adas-to-robotaxi-how-vision-systems-must-level-up-to-meet-new-mobility-use-cases/)。经 e-con Systems 许可，此处转载。 ### 关键要点 * 城市照明和运动如何定义 Robotaxi 的成像需求 * 哪些相机功能支持昼夜可靠感知 * 为何统一的 AI 视觉盒子能降低延迟并消除协调差距 * 集成视觉平台如何支持可扩展的 Robotaxi 车队 Robotaxi 使用相机来理解繁忙城市街道周围正在发生的事情。然而，每一次 Robotaxi 行程都意味着要应对直射阳光、建筑物深处的阴影、车灯眩光、隧道、镜头上的雨水以及来自车辆、自行车和行人的持续运动。因此，相机性能影响着车辆解释场景、服务乘客以及满足监管期望的能力。Robotaxi 还需要能够处理低光环境、快速运动、长工作周期等的相机解决方案。[AI 视觉盒子，例如 e-con Systems 的 Darsi Pro](https://www.e-consystems.com/smart-ai-vision-kit/ecu-compute-platform-nvidia-jetson-orin-nx-nano.asp) 是这些现代移动系统的完美匹配，因为它们将关键组件带入统一平台。在本系列博客的第一部分中，我们探讨了现代[mobility vision](https://www.e-consystems.com/mobility)需求、其挑战以及高级视觉解决方案如何克服这些挑战。在第二部分中，我们将了解哪些相机功能对 Robotaxi 最为重要，为何统一的 AI 视觉盒子至关重要，以及它们提供的独特优势。 Robotaxi 相机的 5 大成像特征 ------------------------------------------ #### 1. 高动态范围 (HDR)：在密集的城市驾驶中，相机必须处理同一路线内直射阳光、建筑物深处阴影、隧道和反光表面之间的快速转换。高动态范围在这些 abrupt 曝光变化期间保持车道标记、信号灯和弱势道路使用者的可见性。 #### 2. 低光性能：夜间操作对相机提出了不同的要求，车灯、路灯和店面照明提供了不均匀的照明。可靠的低光捕获在环境光线下降时保留了物体边缘和表面细节。 #### 3. 全局快门：城市十字路口引入了来自车辆、自行车和行人的快速、多方向运动。具有全局快门的相机在运动过程中保持物体的形状和位置，减少干扰跟踪的失真。 #### 4. 热和机械可靠性：商业 Robotaxi 部署使相机硬件处于长时间工作周期状态，而非短促的功能触发式使用。抵抗热量积聚、振动和环境暴露有助于随时间推移维持稳定的图像输出。 #### 5. 高带宽、低延迟接口：高带宽、低延迟接口（如 GMSL 和 FPD Link III）以高分辨率传输连续的相机和传感器数据。通过这些接口的可预测数据传输确保感知与实时运动保持一致，而不是延迟帧。 为何 Robotaxi 需要完全集成的统一 AI 视觉盒子 ------------------------------------------------------------ 移动系统在充满运动、眩光、户外暴露和不可预测环境的环境中运行。当相机模块、传感器和 AI 处理器位于单独的单元上时，[mobility platforms](https://www.e-consystems.com/mobility)会经历不必要的停顿，因为每个部分都以自己的速度响应。随着工作负载增加且系统运行长周期任务，这些差距变得更难管理。将所有内容置于一个视觉屋顶下有助于避免这些差距，并为移动系统提供从相机输入到 AI 驱动任务的更稳定路径。统一设置减少了集成步骤，简化了现场部署，并为开发人员提供了一个统一的工作参考点。 e-con Systems 的[Darsi Pro](https://www.e-consystems.com/smart-ai-vision-kit/ecu-compute-platform-nvidia-jetson-orin-nx-nano.asp)遵循这种方法，将相机连接、AI 处理、传感器支持和接口组合成一个专为移动用例设计的 Edge AI Vision Box。  #### 可扩展的多相机同步 移动系统依赖多个视角来理解仓库、工厂车道和户外路线中的运动。Darsi Pro 支持多达 8 个通过 FAKRA 连接器连接的 GMSL 或 GMSL2 相机，帮助移动系统在光照变化或运动加速时从多个视角保持一致的输入。 #### 高级 AI 处理 检测、跟踪和分类给移动工作负载带来巨大压力，特别是在长期运行的操作中。[Darsi Pro](https://www.e-consystems.com/smart-ai-vision-kit/ecu-compute-platform-nvidia-jetson-orin-nx-nano.asp)提供高达 100 TOPS 的 AI 性能，并可在 Super Mode 下运行以处理更高工作负载，帮助移动单元在连续视频输入期间保持平滑的图像输出。 #### 多传感器融合 移动系统依赖来自相机、LiDAR、雷达和 IMU 的输入来清晰解读运动。Darsi Pro 使用 Precision Time Protocol 与这些传感器协同工作，以便移动系统接收正确的输入，并且在时序保持一致时导航响应更加可预测。 #### 坚固的性能和接口支持 [Mobility robots](https://www.e-consystems.com/mobility)在延长操作周期期间面临灰尘、振动和温度变化。Darsi Pro 采用坚固的外壳、无风扇设计和宽工作温度范围，以及 Dual GbE with PoE、USB 3.2、HDMI、CAN 和无线支持等接口。它帮助移动系统使用单一统一单元处理长周期任务和真实环境中的部署。 e-con Systems 的最新 Robotaxi 统一 AI 视觉盒子 --------------------------------------------------------- 自 2003 年以来，e-con Systems®一直设计、开发和制造 OEM 相机。最近，我们推出了 Darsi Pro——这是我们最新的统一 AI 视觉盒子，为 Robotaxi 配备了尖端视觉能力。[了解更多关于 Darsi Pro 的信息。](https://www.e-consystems.com/smart-ai-vision-kit/ecu-compute-platform-nvidia-jetson-orin-nx-nano.asp) 更好地了解 e-con Systems 的[mobility camera](https://www.e-consystems.com/mobility)专业知识。 寻找其他内容？请访问我们的 Camera Selector Page 查看我们的端到端产品组合。 需要将最佳适配的统一相机解决方案集成到您的移动系统中吗？请发送邮件至 camerasolutions@e-consystems.com。 常见问题解答 (FAQs) ---- 1. **为何 Robotaxi 依赖统一的 AI 视觉盒子而不是单独组件？**如果 Robotaxi 依赖统一视觉系统，相机、同步和 AI 处理等组件紧密对齐。这最大限度地减少了连续运行期间的延迟、时序漂移和故障点。作为预集成包交付（包括相机），进一步降低了启动工作量，提高了车队一致性，并加快了部署速度。 2. **多相机输入如何融入 Robotaxi IoT 视觉设置？**Robotaxi 使用前向、后向和环绕覆盖进行 360°感知。IoT 视觉设置必须同时摄取多个相机流，以便在密集交互期间保持全场景感知的连贯性。统一系统有助于在连续运行期间保持这些流的协调。 3. **为何时间同步对 Robotaxi IoT 数据流很重要？**当多个相机和传感器为感知提供输入时，时序对齐决定了系统是否能在不同输入中解释同一时刻。紧密同步还消除了运动期间流之间的不匹配。这有助于感知在路线从明亮街道切换到阴影走廊再返回时保持稳定。 4. **哪些成像特征直接映射到 Robotaxi 城市驾驶条件？**Robotaxi 面临强烈的阳光、建筑物之间深深的阴影、夜间的车灯眩光以及镜头上的雨痕。HDR 和低光性能支持在这些过渡期间获得可用的图像。全局快门有助于在快速运动和密集场景中，其中滚动伪影可能会扭曲物体。 5. **哪些统一盒子的功能有助于 Robotaxi IoT 部署跨车队扩展？**车队部署受益于可重复的行为，即车辆对车辆、日复一日。统一盒子集中了采集、同步和处理，使得性能在许多单元之间保持一致。当相同的包部署到不同地点和气候时，它也减少了集成步骤。 Suresh Madhu, e-con Systems 产品经理