blackbird

723 Commits 2 Branches 0 Tags

3 Commits

Include renames

Author	SHA1	Message	Date
qing	cd4d512ecd	feat(pybot×actpred): R2 多 MPU6050 支持——8×N 姿态向量拼接与归一化平铺 - robot：_find_imus/_read_imus 按脚本块行序收集拼接 ≤4 个 MPU6050，_pad_imu 对齐 predictor.imu_dim - recorder/imu_norm/dataset/config：imu.npy 宽度 8×N，归一化除数按传感器数平铺 - 测试：双传感器闭环拼接/pad/truncate、宽布局录制、16 维归一化加载	2026-08-14 09:34:39 +08:00
qing	a2ba797410	feat(pybot×actpred): R2 姿态反馈方案一——MPU6050 独立 IMU token 全链路 - pybot：recorder 逐帧落盘 imu.npy（T×8，roll,pitch,ax,ay,az,gx,gy,gz，与帧/动作同调用对齐）；run_loop 对声明 imu_dim 的 predictor 以 predict(..., imu=) 调用（鸭子类型，旧两参调用向后兼容） - actpred：新增 --imu-dim；model 序列 [img×F, act×H, (IMU), PRED]（imu_dim>0 时 F+H+2，IMU token 位于 PRED 前）；dataset/train 读 imu.npy（缺失按零向量兜底）；predict/ONNX/Hailo 三后端与 export/gen_calibration/dfc_compile/_npu_test 部署链适配 imu 输入 - 姿态按物理量程固定缩放归一化（imu_norm.py，训练/推理共用，零状态） - 测试：actpred 128 passed / pybot loop+recorder 28 passed	2026-08-14 09:07:24 +08:00
qing	fe12dd7b33	feat(pybot): 进程内实时预测闭环（--loop）与帧源/节拍修复 - 新增 run_loop 闭环：F 帧+H 步历史双滑窗，冷启动重复同帧+零动作，每步采样→推理→执行→回写，hz 节拍控制，可选同步录制 - --loop CKPT/--hz/--loop-steps 参数，按 .hef 后缀选 Hailo/PyTorch 后端， actpred 软依赖（仅 --loop 时 import），保持 pybot 零依赖 - P1-2 帧源修复：闭环改从 camera 守护线程队列取最近 F 帧（低延迟），替代 capture() 同步曝光阻塞，framerate/capacity 配置真正生效 - P1-1 overrun 告警：超时步记录实际耗时，汇总 overrun 比例并给降频建议 - 剔除 Speaker.delay 发声阻塞，speaker 补 delay=0 非阻塞 - 新增 tests/test_loop.py 11 用例（冷启动/历史滑动/索引映射/帧源等）	2026-08-14 07:52:07 +08:00

Author

SHA1

Message

Date

qing

cd4d512ecd

feat(pybot×actpred): R2 多 MPU6050 支持——8×N 姿态向量拼接与归一化平铺

- robot：_find_imus/_read_imus 按脚本块行序收集拼接 ≤4 个 MPU6050，_pad_imu 对齐 predictor.imu_dim

- recorder/imu_norm/dataset/config：imu.npy 宽度 8×N，归一化除数按传感器数平铺

- 测试：双传感器闭环拼接/pad/truncate、宽布局录制、16 维归一化加载

2026-08-14 09:34:39 +08:00

qing

a2ba797410

feat(pybot×actpred): R2 姿态反馈方案一——MPU6050 独立 IMU token 全链路

- pybot：recorder 逐帧落盘 imu.npy（T×8，roll,pitch,ax,ay,az,gx,gy,gz，与帧/动作同调用对齐）；run_loop 对声明 imu_dim 的 predictor 以 predict(..., imu=) 调用（鸭子类型，旧两参调用向后兼容）

- actpred：新增 --imu-dim；model 序列 [img×F, act×H, (IMU), PRED]（imu_dim>0 时 F+H+2，IMU token 位于 PRED 前）；dataset/train 读 imu.npy（缺失按零向量兜底）；predict/ONNX/Hailo 三后端与 export/gen_calibration/dfc_compile/_npu_test 部署链适配 imu 输入

- 姿态按物理量程固定缩放归一化（imu_norm.py，训练/推理共用，零状态）

- 测试：actpred 128 passed / pybot loop+recorder 28 passed

2026-08-14 09:07:24 +08:00

qing

fe12dd7b33

feat(pybot): 进程内实时预测闭环（--loop）与帧源/节拍修复

- 新增 run_loop 闭环：F 帧+H 步历史双滑窗，冷启动重复同帧+零动作，
  每步 采样→推理→执行→回写，hz 节拍控制，可选同步录制
- --loop CKPT/--hz/--loop-steps 参数，按 .hef 后缀选 Hailo/PyTorch 后端，
  actpred 软依赖（仅 --loop 时 import），保持 pybot 零依赖
- P1-2 帧源修复：闭环改从 camera 守护线程队列取最近 F 帧（低延迟），
  替代 capture() 同步曝光阻塞，framerate/capacity 配置真正生效
- P1-1 overrun 告警：超时步记录实际耗时，汇总 overrun 比例并给降频建议
- 剔除 Speaker.delay 发声阻塞，speaker 补 delay=0 非阻塞
- 新增 tests/test_loop.py 11 用例（冷启动/历史滑动/索引映射/帧源等）

2026-08-14 07:52:07 +08:00