有人/无人协同作战（MUM-T, Manned-Unmanned Teaming）-多层级、多控制主体、多链路、多授权状态下的实时闭环控制系统

有人/无人协同作战MUM-T, Manned-Unmanned Teaming-多层级、多控制主体、多链路、多授权状态下的实时闭环控制系统一、控制模式分层四种控制场景Level 0设备自治-无人设备自己跑比如UAV巡逻机器狗巡检UGV路径跟踪人只发go to waypoint A设备闭环完成这是默认态。必须占 70% 以上。否则网络再强也扛不住。这是第一原则减少“连续人工操控”。Level 1近场 LOS 伴随控制典型队员直接控机器狗 / 小无人机。距离10~100m链路星闪 / WiFi Direct / 600M Mesh特点低延迟高交互。适合微操门口侦察狭小空间穿越Level 2小队 NLOS 控制典型小队通过 Mesh 控建筑内部机器人。距离100m~2km依赖600M Mesh特点带宽有限所以必须智能视频调度Level 3大队远程控制跨小队 / 跨区域依赖5G / SAT / relay mesh适合监督控制不是细粒度 teleop。这点很关键。半闭环操作员给速度/姿态建议设备本地控制器闭环执行。例如不是left stick - motor pwm而是move 0.5m/s left二、控制架构建议Authority Token Model每设备维护 Control FSMIDLE ↓ AUTONOMOUS ↓ CLAIM_REQUEST ↓ CONTROL_GRANTED ↓ SHARED_ASSIST ↓ PREEMPTED ↓ RECOVER控制优先级控制者优先级安全控制自动P0小队长P1授权队员P2大队远程P3默认抢占机制例如大队请求接管流程request → squad approve → token migrate → state sync → control handoff不是直接抢。除非Emergency Override三、对内自治控制操作者掉线模式1热备操作者机器人维护PrimarySecondaryPrimary掉线 500ms自动切换。模式2自治回退若无接管者进入Safe autonomy比如UAV-hover / return relay pointDog-hold local scanUGV-stop watchdog模式3邻近接管最近节点自动收到“Take Control Offer”四、视频链路才是真正瓶颈控制一定要视频辅助但不能 naïve 全帧高码率。必须Perception-aware Video Transport这是核心路线。推荐三层视频流Layer AControl Preview低码率始终在线参数480p10fps300~800kbps给态势连续性。Layer BFocus StreamROI高质量区域动态触发比如门口目标操作区域码率2~6MbpsLayer CForensic Stream高质量录像本地存储按需上传五、ROI 怎么做最合理Semantic ROI。即感知模块生成{ bbox: [x,y,w,h], class: door, priority: 0.92 }编码器依据 ROI map。适用于1. 手控区域-摇杆控制朝向区域自动增强2. 检测目标-人 / 门 / 热源 / 障碍3. 操作点-机械臂抓取位置六、动态编码策略Network-Adaptive Ladder优先级状态Green-链路富余1080p 30fpsYellow-轻拥塞720p 20fpsOrange-严重拥塞ROI onlyRed-控制保活模式240p metadata切换依据RTT loss jitter queue occupancy不是只看带宽。七、多人观控设计Single Control / Multi Observe即一个人控多人看例如UAV-3 Controller: Squad-2-A Observers: - SquadLeader - CommandHQ - Squad-2-B观察者能看、能标注、不能发控制可做Collaborative Pointer八、控制链路建议近场 LOS主星闪 / WiFi Direct辅600M编码低延迟 I-frame sparse小队 NLOS主600M Mesh辅5G编码ROI adaptive GOP大队远控主5G辅SAT / 1.4G控制高级命令,非底层 teleop九、控制软件路线1. Control Authority Manager令牌管理授权审计2. Stream Adaptation Engine动态码率ROI多流切换3. Handoff Manager控制切换状态同步4. Policy Engine规则uav: remote_direct_control: false squad_override: true自治优先 监督控制 Token授权 ROI感知视频 分层控制域设备自主执行人类只在关键时刻介入并且介入权被严格调度。