📚 课程目录第1章课程导入

1. 课程导入

在自动驾驶、机器人、无人机、工业测量与智能交通等领域，系统往往同时搭载相机、激光雷达、毫米波雷达、IMU、GNSS、轮速计等多种传感器。每个传感器都有自己的采样节拍、内部时钟和输出延迟。如果这些数据在融合时没有统一到同一时间基准，就会出现“空间上对齐、时间上错位”的问题：图像中的车辆位置与激光点云中的车辆位置相差半米，IMU积分轨迹与视觉里程计轨迹逐渐发散，最终导致感知误判、定位漂移甚至控制失稳。多传感器时间同步系统，正是为解决这一问题而设计的软硬件协同体系。

1.1 什么是多传感器时间同步系统

多传感器时间同步系统，是指在一个包含多个异构传感器的计算平台上，通过统一时钟源、时间戳生成、触发控制、传输延迟补偿和软件对齐等机制，使所有传感器数据能够被映射到同一时间坐标系的系统。它的核心目标不是让所有传感器“同时采样”，而是让每一帧数据都拥有可比较、可追溯、可补偿的准确时间标签。

从系统角度看，它包含三个层次：

时间基准层：提供全局参考时钟，如GNSS的PPS秒脉冲、PTP主时钟、系统单调时钟。
时间戳与触发层：在传感器曝光、雷达扫描或IMU采样时刻记录硬件时间戳，或通过外部触发信号统一启动采集。
软件对齐层：在数据进入融合算法前，完成时间戳校准、插值、外推、缓冲和队列管理。

时间同步的最终判据不是“时钟读数相同”，而是“同一物理事件在不同传感器数据中的时间标签一致，且误差小于融合算法可容忍的阈值”。

1.2 学习目标

完成本课程后，学习者应能够：

理解时间同步中的关键概念：时钟漂移、偏移、抖动、延迟、触发同步、时间戳同步与数据对齐。
掌握GNSS PPS、PTP、NTP、硬件触发、软件时间戳等常见同步方式的原理与适用边界。
能够为相机、LiDAR、IMU、雷达等传感器设计合理的时间戳采集与传输方案。
能够分析端到端延迟链路，定位同步误差来源，并给出补偿或标定方法。
能够设计多传感器数据缓冲、插值、外推与融合前对齐流程。
能够使用日志、示波器、时间误差统计和可视化工具验证同步效果。

1.3 整体知识框架

本课程按照“概念—时钟—硬件—软件—验证—应用”的主线展开，整体知识框架如下表所示：

模块	核心问题	关键内容
基础概念	时间同步到底同步什么	时钟模型、偏移、漂移、抖动、延迟
时钟源与协议	全局时间从哪里来	GNSS PPS、PTP、NTP、单调时钟
硬件同步	如何让采样时刻可控	触发线、曝光信号、扫描起始、PPS分频
软件时间戳	如何记录真实采样时刻	驱动时间戳、内核时间戳、ROS时间
数据对齐	如何把不同频率数据放到同一时刻	缓冲、插值、外推、最近邻、运动补偿
误差分析与验证	同步误差有多大、从哪里来	延迟链路、统计指标、标定、可视化
典型应用	不同场景如何取舍	自动驾驶、机器人、无人机、工业测量

下图给出多传感器时间同步系统的整体信号链与数据流关系。可以看到，全局时钟源同时作用于传感器触发、硬件时间戳和软件对齐模块，最终将多路数据汇聚到统一时间轴。

1.4 典型应用场景

不同应用对时间同步的精度要求差异很大，设计时必须先明确场景约束。

自动驾驶：相机、LiDAR、毫米波雷达、IMU、GNSS需要融合。相机曝光与LiDAR扫描之间的时间误差若超过10ms，高速场景下空间错位可达数十厘米。通常要求硬件触发加PPS同步，软件端再做运动补偿。
移动机器人：轮速计、IMU、激光雷达和视觉里程计需要紧耦合。室内无GNSS时，常以IMU或系统单调时钟为基准，重点解决驱动时间戳抖动和传输延迟。
无人机：IMU高频积分、相机触发、GNSS定位对时间同步极其敏感。GNSS PPS常作为全局基准，相机通过触发信号与PPS对齐。
工业测量与多相机阵列：多台相机需要同时曝光，通常使用硬件触发总线或PTP同步，误差要求可到微秒级。
车路协同与路侧感知：路侧相机、雷达与边缘计算单元之间通过PTP或GPS同步，保证跨设备目标关联的时间一致性。

1.5 常见误区与复盘

误区一：认为“所有传感器都用同一个系统时间”就等于同步。系统时间可能被NTP频繁调整，产生跳变；而传感器采样发生在驱动层甚至硬件层，两者之间还有传输和排队延迟。

误区二：只关注时钟偏移，忽略传输延迟和触发延迟。相机从收到触发到真正曝光、LiDAR从扫描起始到点云输出、IMU从采样到驱动读取，都存在固定或可变延迟。

误区三：用ROS时间戳直接当作采样时刻。ROS消息时间戳通常是驱动收到数据后打上的，若未做硬件时间戳或延迟补偿，会引入毫秒级甚至更大的误差。

复盘方法：先画出从“物理事件发生”到“数据进入融合算法”的完整延迟链路，再逐段测量或估算延迟，最后判断哪一段是主要误差来源。常用手段包括示波器抓取PPS与触发信号、驱动日志对比、时间误差统计直方图、以及静态场景下的重投影误差检查。

1.6 一个最小同步参数示例

下面给出一个典型的同步配置片段，用于说明实际系统中需要明确哪些参数。不同平台的具体值不同，但字段含义具有通用性。

sync_config:
  global_clock: "GNSS_PPS"        # 全局时钟源
  pps_frequency_hz: 1             # 秒脉冲频率
  ptp_domain: 0                   # PTP域
  camera:
    trigger_mode: "hardware"      # 硬件触发
    exposure_delay_us: 120        # 曝光延迟
    timestamp_source: "kernel"    # 内核时间戳
  lidar:
    scan_start_offset_us: 350     # 扫描起始偏移
    point_time_field: "time"      # 点级时间字段
  imu:
    sample_rate_hz: 200
    timestamp_source: "driver"
  alignment:
    buffer_size_ms: 200
    interpolation: "linear"
    max_time_error_ms: 5          # 融合允许的最大时间误差