4. 视频源接入方式
在无人机地面站的视频显示与录像开发中，视频源接入是整个链路的第一环。接入方式选错，后续的解码、渲染、录像、回放都会受到牵连。很多开发者习惯把“接口”和“协议”混为一谈，实际上它们是两个层面的问题：接口解决的是物理连接与电气信号如何进入计算平台，协议解决的是视频流如何封装、寻址、传输和控制。理解这两层关系，才能为地面站选择正确的采集与拉流方案。
一、核心原理：接口层与协议层的分工
无人机机载视频链路通常有三种典型形态：第一种是机载相机通过 HDMI 或 SDI 输出到图传发射机，地面站通过图传接收机还原为 HDMI/SDI 信号；第二种是机载编码板把视频压缩为 H.264/H.265 后，通过 RTSP 或 RTMP 推送到地面站；第三种是机载直接运行 WebRTC 或 RTSP 服务，地面站作为客户端拉流。不同形态决定了地面站是“采集卡输入”还是“网络流输入”。
接口层的关键参数包括分辨率、帧率、像素格式、色彩空间和同步方式。例如 HDMI 采集卡常见输出 YUY2、NV12、RGB24，SDI 采集卡则更强调广播级 1080p50/60 和嵌入式音频。协议层的关键参数包括传输协议、封装格式、延迟、抗丢包能力和鉴权方式。RTSP 通常搭配 RTP/UDP 或 RTP/TCP，RTMP 基于 TCP，WebRTC 基于 SRTP/DTLS，延迟和抗弱网表现差异明显。
二、方法流程：从视频源到地面站帧队列
无论采用哪种接入方式，地面站内部都应抽象出统一的“帧源”接口，向上层提供 open()、readFrame()、close() 三个基本动作。这样显示模块和录像模块不需要关心底层是采集卡还是 RTSP。推荐流程如下：
- 探测与枚举：本地接口枚举设备节点，网络协议解析 URL 并尝试连接。
- 协商参数：确定分辨率、帧率、像素格式、编码格式和传输方式。
- 建立缓冲：本地采集使用双缓冲或三缓冲；网络流使用 jitter buffer 对抗抖动。
- 解码与转换：H.264/H.265 走硬解或软解，统一转换为 RGBA 或 NV12。
- 分发：一帧同时送入显示队列和录像队列，录像队列可做关键帧对齐。
// 统一帧源接口示例（伪代码）
class IVideoSource {
public:
virtual bool open(const SourceConfig& cfg) = 0;
virtual bool readFrame(Frame& out, int timeoutMs) = 0;
virtual void close() = 0;
};
// HDMI/SDI 采集卡实现
class CaptureCardSource : public IVideoSource { /* DirectShow / V4L2 */ };
// RTSP 拉流实现
class RtspSource : public IVideoSource { /* FFmpeg avformat_open_input */ };
// WebRTC 实现
class WebRtcSource : public IVideoSource { /* PeerConnection + OnTrack */ };三、案例/场景：三种典型无人机地面站接入
| 场景 | 接入方式 | 关键配置 | 注意事项 |
|---|---|---|---|
| 手持地面站 + 图传接收机 | HDMI 采集卡 | 1080p60、YUY2、USB3.0 | 避免 USB2.0 带宽不足导致掉帧 |
| 广播级巡检地面站 | SDI 采集卡 | 1080p50、嵌入式音频、BNC | 注意同步锁相与色彩空间 |
| 4G/5G 远程指挥 | RTSP over TCP | H.265、GOP 1s、缓冲 300ms | 弱网下优先 TCP 抗丢包 |
| 浏览器端监控 | WebRTC | H.264、STUN/TURN、DataChannel | 需要处理 NAT 穿透与鉴权 |
| 第三方平台推流 | RTMP | H.264、AAC、推流地址 + 密钥 | 延迟较高，适合非实时回传 |
四、误区与复盘
最后给出一个选型清单，便于在项目初期快速决策：
- 延迟优先：SDI/HDMI 采集卡 > WebRTC > RTSP/UDP > RTSP/TCP > RTMP。
- 布线距离优先：SDI > IP/RTSP > HDMI > USB。
- 浏览器兼容优先：WebRTC > RTMP（需转 HLS/WebRTC）> RTSP（需网关）。
- 录像可靠性优先：本地采集卡 > RTSP/TCP > RTMP > WebRTC。
- 开发成本优先：USB UVC > RTSP（FFmpeg）> HDMI 采集卡 > SDI > WebRTC。
接入方式没有绝对优劣，只有与场景匹配与否。地面站架构上应坚持“帧源抽象 + 参数可配 + 健康度可观测”三条原则，这样无论未来增加 HDMI 采集卡、切换 RTSP 地址，还是引入 WebRTC 低延迟通道，都能以最小改动完成集成。