news 2026/6/10 5:13:20

自动驾驶—CARLA仿真(12)client_bounding_boxes demo

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
自动驾驶—CARLA仿真(12)client_bounding_boxes demo

📌测试用例

PythonAPI/examples/client_bounding_boxes.py

客户端侧 3D 边界框(Client-Side Bounding Boxes)可视化示例,用于:

  1. 手动驾驶一辆主车(WASD 控制)
  2. 实时计算并绘制周围车辆的 3D 边界框
  3. 所有边界框计算在客户端(Python)完成,不依赖 CARLA 服务端


🔑 主要模块解析

1.ClientSideBoundingBoxes类:3D 边界框核心引擎

这是脚本的核心技术模块,完全在客户端实现 3D→2D 投影。

核心方法:
  • get_bounding_box(vehicle, camera)

    • 获取车辆 8 个 3D 顶点的世界坐标
    • 通过世界→相机坐标变换相机内参投影归一化设备坐标
    • 返回 8 个 2D 像素点 + 深度值
  • _create_bb_points(vehicle)

    • 根据vehicle.bounding_box.extent生成局部坐标系下的 8 个顶点
    • 顺序:底面 4 点(顺时针)+ 顶面 4 点(对应底面)
  • 坐标变换链
    车辆局部坐标世界坐标相机坐标2D 像素

  • draw_bounding_boxes()

    • 使用pygame.draw.line绘制 12 条边(底面 4 + 顶面 4 + 竖边 4)
    • 颜色固定为BB_COLOR = (248, 64, 24)(橙红色)

关键优势
不依赖 CARLA 的实例分割传感器,仅需 RGB 摄像头 + 车辆列表即可生成 3D 框。


2.BasicSynchronousClient类:主控制循环

管理仿真、渲染和用户输入。

核心组件:
  • 同步模式

    self.set_synchronous_mode(True)
    • 确保每帧精确控制,避免传感器数据错位
  • 自定义摄像头

    • 分辨率:960x540(1920/2 x 1080/2)
    • FOV:90°
    • 位置:车后方 5.5 米,高度 2.8 米,俯角 -15°(第三人称视角)
  • 手动控制逻辑

    按键功能
    W前进(throttle=1, reverse=False)
    S倒车(throttle=1, reverse=True)
    A/D左/右转向(±0.05 增量)
    Space手刹
  • 图像同步机制

    self.capture=True# 请求下一帧# 回调中: if self.capture: self.image = img; self.capture = False
    • 避免多线程竞争,确保渲染与控制同步

3. **坐标系处理

脚本完整实现了CARLA 坐标系到标准计算机视觉坐标系的转换

步骤变换
1. 车辆局部坐标(x,y,z)(CARLA 标准)
2. 世界坐标通过vehicle.get_transform()
3. 相机坐标通过camera.get_transform().get_inverse_matrix()
4.CV 坐标系(x,y,z) → (y, -z, x)(关键!)
5. 2D 投影K * [y, -z, x]^T

💡 注释中的cords_y_minus_z_x正是这一步转换。


4.相机内参校准
calibration=np.identity(3)calibration[0,2]=VIEW_WIDTH/2.0# cxcalibration[1,2]=VIEW_HEIGHT/2.0# cycalibration[0,0]=calibration[1,1]=VIEW_WIDTH/(2.0*tan(FOV/2))# fx=fyself.camera.calibration=calibration
  • 手动构建3x3 相机内参矩阵 K
  • 用于get_bounding_box()中的 3D→2D 投影

🎯 与服务端方案对比

特性客户端方案(本脚本)服务端方案(instance_segmentation)
依赖仅需 RGB 摄像头 + 车辆列表需要 instance_segmentation 传感器
精度基于车辆真实 bounding_box基于像素分割,可能有锯齿
性能CPU 计算投影(Python)GPU 渲染分割图

⚠️ 注意事项

  1. 仅显示其他车辆

    • vehicles = self.world.get_actors().filter('vehicle.*')包含所有车
    • 但未过滤主车,主车自身也会显示边界框(可通过if vehicle.id != self.car.id过滤)
  2. 深度过滤

    bounding_boxes=[bbforbbinbounding_boxesifall(bb[:,2]>0)]
    • 移除相机后方的物体(深度 ≤ 0)
  3. 坐标系假设

    • 假设车辆 bounding_box 中心在(0,0,0)(CARLA 默认)
    • 若车辆模型偏移,需调整_vehicle_to_world

✅ 总结

该脚本是 CARLA客户端 3D 感知的经典实现,展示了:

  1. 如何从车辆物理属性(bounding_box)生成 3D 顶点
  2. 如何实现完整的 3D→2D 投影管线
  3. 如何在纯 Python 客户端实现 3D 边界框可视化

它是学习自动驾驶 3D 目标检测基础的绝佳起点,尤其适合理解坐标变换、相机模型、投影几何等核心概念。

版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/6/8 6:43:18

8、ISO 8601 日期和时间标准化原则解析

ISO 8601 日期和时间标准化原则解析 1. 日期和时间管理模型概述 ISO 8601 将管理划分为独立的日期和时间模型。日期值基于公历(民用国际标准),时间则通过 24 小时计时系统表示。其遵循最大时间粒度元素应位于最左侧的原则,后续较小元素依次位于前一个元素的右侧。例如,年…

作者头像 李华
网站建设 2026/6/9 5:24:50

Autoware Universe自动驾驶系统:从零开始的终极部署指南

Autoware Universe自动驾驶系统:从零开始的终极部署指南 【免费下载链接】autoware.universe 项目地址: https://gitcode.com/gh_mirrors/au/autoware.universe 想要快速上手开源自动驾驶系统却不知从何开始?Autoware Universe作为新一代自动驾驶…

作者头像 李华
网站建设 2026/6/9 18:18:21

Admin.NET通用权限开发框架终极完整指南:快速构建企业级后台系统

你是否正在寻找一个能够快速搭建企业级后台管理系统的解决方案?🤔 Admin.NET基于.NET 6/8和Vue3技术栈,为你提供了一套完整的权限管理开发框架。无论你是要开发OA系统、企业资源规划系统还是电商后台,这个框架都能帮你节省大量开发…

作者头像 李华
网站建设 2026/6/10 0:50:10

2025中国GEO服务商标杆企业测评报告

2025年,生成式AI技术加速渗透并规模化落地,彻底改写数字营销流量格局,GEO(生成式引擎优化)从企业非必需的营销补充项,跃升为突破流量瓶颈、实现长期增长的核心战略支柱。在此背景下,市场对GEO服…

作者头像 李华