可复现自动驾驶RL实验的关键：gym-carla同步模式与固定时间步实战-育师

可复现自动驾驶RL实验的关键：gym-carla同步模式与固定时间步实战

【免费下载链接】gym-carlaAn OpenAI gym wrapper for CARLA simulator项目地址: https://gitcode.com/gh_mirrors/gy/gym-carla

你是否遇到过"同一份强化学习代码，重跑一次训练曲线就完全不一样"的窘境？根子往往出在异步模拟上。gym-carla 是一款基于 OpenAI Gym 接口封装 CARLA 自动驾驶模拟器的第三方环境，本文带你用它的同步模式与**固定时间步（dt）**机制，把自动驾驶强化学习实验变成"可逐步控制、可完整复现"的离散时钟系统 ⏱️。

为什么自动驾驶RL实验不可复现：异步模拟的隐形坑

CARLA 默认以异步模式运行，模拟器和渲染窗口"各走各的"：

两次step()之间的仿真时长由机器渲染性能决定，没有任何两步时间相等；
自车每步前驶的距离随之漂移，累积误差越来越大；
相同的随机种子，轨迹却各不相同，奖励值互相失去可比性。

而强化学习要求环境是一个确定性马尔可夫决策过程：同样的状态 + 同样的动作 → 同样的下一状态。时间步一旦漂移，"同因不同果"，训练自然无法复现。

解法只有一条：把模拟器变成上发条的机械钟——每次step()固定前进 dt 秒，多一毫秒都不行。

gym-carla如何启用同步模式：30秒看懂核心机制

gym-carla 在环境主文件gym_carla/envs/carla_env.py中用 3 处关键代码完成同步切换：

锁定固定时间步：构造函数中把fixed_delta_seconds设为参数dt（默认 0.1 秒，约文件第 135 行）；
打开同步开关：reset()在全部场景生成完成后，将synchronous_mode = True并应用到世界（约第 246 行）；
逐步推进仿真：每次step()先给自车下发油门/转向控制，再调用一次world.tick()，仿真恰好前进一个 dt（约第 278 行）。

还有一个值得细品的细节：reset()开头会先关闭同步模式，完成车辆、行人、自车生成后再重新打开。这样复杂的 Actor 生成逻辑就不会被同步暂停机制卡住，对应的开关函数是_set_synchronous_mode（第 349-353 行）。

三步跑通CARLA强化学习环境

第一步：建环境、装依赖

基于 Ubuntu 16.04 + Python 3.6，克隆仓库后安装依赖与包本体：

git clone https://gitcode.com/gh_mirrors/gy/gym-carla cd gym-carla pip install -r requirements.txt pip install -e .

核心依赖版本已锁定（requirements.txt：gym 0.12.5、pygame 1.9.6、scikit-image 0.16.2）。安装后环境以carla-v0注册（见gym_carla/__init__.py），一行gym.make('carla-v0', params=params)即可创建。

第二步：启动CARLA服务器

解压 CARLA 0.9.6 并把其PythonAPI加入PYTHONPATH，然后二选一：

./CarlaUE4.sh -windowed -carla-port=2000 # 无头模式（服务器长时间训练强烈推荐） DISPLAY= ./CarlaUE4.sh -opengl -carla-port=2000

第三步：跑样例

执行python test.py，自车就会按固定参数在 Town03 地图上起步。所有环境参数都集中在test.py顶部的params字典里，改配置只动这一个地方。

固定时间步dt怎么调：一份速查表

dt在test.py中默认为0.1，配合max_time_episode: 1000，单条轨迹最长 100 秒仿真时间。常用参数这样权衡：

参数	含义	调太大	调太小
`dt`	每步仿真实长	物理跳变、控制跟不上	训练步数激增、变慢
`max_time_episode`	单回合最大步数	轨迹过长、信用分配难	任务中途被截断
`obs_range`	观测范围（米）	图像更大、渲染更重	视野受限、感知不足
`number_of_vehicles`	流量车数量	场景复杂、CPU吃紧	训练轻松但泛化差

经验值：起步就用dt=0.1（10Hz 控制频率），图像观测的深度强化学习完全够用。

4通道观测空间：给智能体的"眼睛"

gym-carla 默认返回字典型观测，这是它设计上的亮点——轻量状态与完整视觉观测同处一个环境，按需取用：

obs['camera']：前视相机图像（RGB，FOV 110°，采样间隔 0.02 秒）；
obs['lidar']：鸟瞰激光雷达图（32 通道、50 米量程、0.125 米分箱）；
obs['birdeye']：鸟瞰语义地图（路网 + 周边车辆 + 期望路线）；
obs['state']：4 维状态向量——车道中心横向偏差、航向误差、自车速度、前方安全距离内有无车辆指示。

state向量不依赖任何渲染，适合做快速的状态空间 RL 基线；birdeye与camera则面向端到端视觉方法。鸟瞰渲染由gym_carla/envs/render.py实现，路线点规划在gym_carla/envs/route_planner.py，车道距离等几何计算集中在gym_carla/envs/misc.py。