qing/blackbird
3
0 Fork 0
Code Issues Pull Requests Actions Packages Projects Releases Wiki Activity
601 Commits 2 Branches 0 Tags
4dd25486f830eb5330fa015a4007a6e0558ca7d2
Commit Graph
601 Commits
This Branch
This Branch
All Branches
Author SHA1 Message Date
qing 4dd25486f8 feat(actpred): 多帧注意力架构改造（Transformer 替换 concat 融合，支持多帧图像+历史动作序列） 2026-08-09 18:17:03 +00:00
qing 2959197597 docs(dnfs): 将已修复审计项合入 dnfs.py 注释并精简审计报告 2026-08-10 01:55:58 +08:00
qing c07ad7ac39 docs: 新增架构/模块文档与项目评估资料 
- docs/ARCHITECTURE.md: 系统架构说明
- docs/MODULES.md: 模块清单与职责
- docs/blackbird_project_profile.md: 项目画像
- docs/blackbird_project_evaluation.md: 项目评估
- docs/reports/fsys_public_frontend_research_20260810.md: fsys 公开前端调研
 2026-08-10 01:27:48 +08:00
qing 685c5c1754 refactor(libmsg): 将审计结论合入代码注释并精简审计报告 
- 在 libmsg 各头文件修复位置补充 [libmsg-audit <编号>] 标签（27 处），
  覆盖 16 条安全审计发现（P0-1/P0-2/P1-1~3/P2-1~8/P3-1~3），
  将已完成修复锚定到源码
- 从审计文档删除 335 行逐条详细发现（问题描述/修复方案/触发场景/代码块），
  替换为 16 行「已解决发现」紧凑台账 + 源码定位指针
- 文档保留：严重等级表、修复进度汇总、已有安全机制、已知限制 L-1~L-12、
  变更记录、审计结论
 2026-08-10 01:26:10 +08:00
qing 373045f0a3 pymsg: 将已修复安全审计项合入源码注释, 精简审计报告 
- 将 P0-1/P0-2/P1-1/P1-2/P1-3/P1-5 共 6 条已修复发现作为
  [SECURITY AUDIT ... ✅ 已修复] 注释合入 pymsg 源码对应位置
- 重写 pymsg 审计报告, 删除已合并条目, 仅保留 10 条未修复项待跟踪
 2026-08-10 01:08:55 +08:00
qingandWorkBuddy dbc79c52f3 docs(security): 合并 gateway 审计文档并新建 ca 审计索引 
- 三份 gateway 审计（20260801/0807/0809）合并为单一 docs/security/gateway_SECURITY_AUDIT.md
- 已完成修复已合入 gateway/src/main.cpp 注释，认证相关项标注迁 ca
- 新建 docs/security/ca_SECURITY_AUDIT.md，同步迁入 P2-3/P1-7/A2 等开放项
- 更新 docs/INDEX.md 审计表、ca/README.md 引用、auth_service_plan/libhttp 文档链接

Co-Authored-By: WorkBuddy <workbuddy@tencent.com>
 2026-08-10 00:56:21 +08:00
qing b634f192ea docs: 新增 Blackbird 暖色调 Logo 并嵌入根 README 
- 导出 logo.png（2x PNG，金铜渐变徽章 + 几何黑鸟）
- 副标改为 "Powered by UniServe Framework"
- README 标题下方居中嵌入 Logo
 2026-08-10 00:03:06 +08:00
qing 59c5fe1feb feat(core): confs2 合并入 core，内嵌 confs 配置服务 v0.1.0 
- 新增 ConfsTask（ITask，与 HttpTask 同构）：ConfigStore + INI/JSON 取值
  + get/list/reload/health 四路由，协议与 Python confs 逐字节兼容
- 新增 ConfsLogC 异步日志客户端（沿用 confs2 LogC，服务名 confs）
- main.cpp 新增 --confs <port> 选项与 CONFS_* 环境变量；不传则行为不变
- Makefile 链接 -lus_msg，版本 0.0.4 → 0.1.0
- _run.sh 启用 --confs 8010；_set.sh 自建 configs → ../confs/configs 链接
- init.txt 移除 confs2 自启动行（由 core 内嵌承担）
- 黑盒对比测试 16/16 通过（tests/blackbox/test_core_confs.py）
 2026-08-09 15:36:32 +00:00
qing 1b282c6f1a feat: confs2 C++20 重写替代 Python confs，时间戳改系统时区 
- 新增 confs2/：C++20 重写统一配置服务（libmsg RpcServer）
  - main.cpp: ConfigStore + 4 路由(get/list/reload/health) + INI/JSON 按键取值
  - LogC.hpp: 异步日志客户端（含 P2-3 日志注入防护）
  - 安全机制：TOCTOU 防护、路径遍历防护、扩展名白名单、1MiB 大小限制、缓存防污染
  - 21/21 对比测试全部通过，性能 3x（0.33ms vs 1.01ms），RSS -66%
- confs/confs.py + log_client.py: 时间戳从 timezone.utc 改为系统时区
- confs2/src/main.cpp + LogC.hpp: 同步改为系统时区（localtime + %z）
- core/init.txt: confs/_run.sh → confs2/_run.sh
 2026-08-09 14:18:57 +00:00
qing c13d11aafb docs: 更新 INDEX 索引并补充 confs2 C++ 重写开发文档 2026-08-09 13:40:49 +00:00
qing 407ce3c366 feat(ca): 认证独立化 CA 模块 v1.0.0 + gateway v0.9.0 纯转发瘦身 
拓扑：waf:443 → ca:8443（认证+前置转发）→ gateway:8445（仅 loopback 纯转发），
WAF upstream 不变，core/dnfs2/前端零改动。

ca v1.0.0（新模块）：
- 认证资产逐字搬迁自 gateway v0.8.0（9 条认证路由、Token 双轨吊销、
  PBKDF2、限流、WS 代理鉴权、wrapperHttp、优雅关闭）
- handleForward 前置转发层：固定上游 gateway:8445；无 Target-Url 公开直转，
  有则本地验签后注入 X-Auth-User/X-Auth-Admin/Authorization（strip-then-set）
- is_special_header 新增剥离 x-auth-user/x-auth-admin；上游不可达统一 502
- confs/configs/ca.ini 新增（[Upstream] gateway + UPSTREAM_GATEWAY env）

gateway v0.9.0（2470→约 560 行）：
- 删除全部认证代码，退居 127.0.0.1:8445
- 启动 loopback 强制自检（非 loopback 拒绝启动）
- X-Auth-User 存在性不变量：显式 Target-Url 无该头一律 401
- gateway.ini 精简至 [Server]/[Proxy]/[Downstream db]

验收：黑盒 34 断言对 8443 原样全绿（32 passed/2 skipped，与基线一致）；
探针实测伪造 X-Auth-User 经 CA 被剥离（echo 实证）、直连 8445 无头 401、
白名单外 403、gateway 宕机 CA 502。core/init.txt 加入 ca/_run.sh。
 2026-08-09 12:15:35 +00:00
qing bbea1ee9d8 test(gateway): 黑盒测试重写 34 断言 + v0.8.0 增量审计闭环文档 
- tests/blackbox/test_gateway.py 重写为 6 段 34 断言（输入校验/whoami+admin.verify/
  captcha-image 代理/路径遍历矩阵/限流随机XFF隔离/CORS+脱敏回归），实测 32 passed/2 skipped
- helpers.py 新增 random_xff/assert_no_internal_leak/db_execute
- docs/security/gateway_SECURITY_AUDIT_20260809.md：A1-A8 增量复审（已全部修复）
- docs/reports/libhttp_remote_addr_dev_doc.md：A4 根治方案（X-Remote-Addr 可信头注入）
- docs/INDEX.md：security 29 篇/reports 12 篇同步
 2026-08-09 12:15:32 +00:00
shufeng2012 7342de421b Merge branch 'main' of ssh://git.cancerai.top:2000/qing/blackbird 2026-08-09 18:31:25 +08:00
shufeng2012 ab6e247bc3 🔨 更新core中的_run.sh：添加LD_LIBRARY_PATH的设置 2026-08-09 18:31:22 +08:00
qing 35e8d747e1 feat: smtp3 C++20 重写 + 安全审计修复 (P0×2/P1-2/P2/P3 全部已修复) 
- 新增 smtp3: pymsg/TCP :8008 邮件验证码服务 (smtp_v2.py 重写, 零新增依赖)
- 审计实证并修复 2 项 P0: SMTP 响应解析颠倒 (发送 100% 失败)、base64 符号扩展
- 修复 P1-2 SIGPIPE、P3-1 日志注入脱敏、P3-3 IPv6、P3-4 模偏差、P3-5 LogC 长连接复用
- 剩余 P1-1 (TLS 证书校验) 与端到端发信验证待 smtp.ini 凭据就绪
- 新增审计报告 docs/security/smtp3_SECURITY_AUDIT_20260809.md 并更新 INDEX
 2026-08-09 06:44:33 +00:00
qing 6bd0fcaf9b fix(captcha2): 修复验证码字符垂直定位错误导致显示不全 
generate_image() 中 y_dist(2,12) 在 Python 原版是顶部留白语义，
C++ 重写时误用为字符中心 y 坐标（cy = y - rh/2），
旋转后位图高度 rh 约 25~46px，cy 为负值导致字符上半部被裁掉。

修复：恢复 y 为顶部留白语义（cy = y），加边界钳制确保字符完整
落在 160×50 画布内。同步修复 test_gen.cpp 中的同款代码。
 2026-08-09 04:58:41 +00:00
qing 6cf535eb79 build: 添加 captcha2 依赖 libfreetype-dev / freetype-devel 到 setup 脚本 2026-08-09 04:37:21 +00:00
qing 546394b681 feat: captcha C++20 重写 + 安全审计修复 (P0/P1/P2/P3, 10/11 已修复) 
captcha2 — C++20 验证码服务（FreeType + stb_image_write）:
- 完整实现: 图片生成、CaptchaStore、RateLimiter、pymsg RPC 路由
- 协议完全兼容 Python 原版，gateway 零改动

审计修复 (captcha2_SECURITY_AUDIT_20260809.md):
- P0-1: 存储答案小写化 (对齐 Python 版语义)
- P1-1: gateway 按 IP 限流 10/min + captcha2 全局限流 600/min 兜底
- P2-1: generate_text mt19937 → std::random_device
- P2-2: ::tolower UB → unsigned char lambda
- P3-1: parse_int 辅助函数, stoi 异常可诊断
- P3-2: 显式 #include <iomanip>
- P3-3: 补齐 CAPTCHA_LEN/TTL/RATE_LIMIT 环境变量
- P3-4: LogC 日志超时 5.0→1.0s
- P3-5: 限流/满容抛异常, gateway 映射 429/503
- P3-6: 清理死代码

集成:
- core/init.txt: captcha → captcha2
- confs configs/captcha.ini: 新增 max_store/rate_limit_per_min
- docs: 开发方案、安全审计报告、交叉引用更新
 2026-08-09 04:26:09 +00:00
qing 29e4f96061 docs: 合并 smtp 安全审计复审(0809)进初版(0801) 
- 将 0809 复审新增的 7 项发现(P1-F1/P2-F2/P2-F3/P3-F4~F7)及测试盲区章节
  并入 smtp_SECURITY_AUDIT_20260801.md，形成统一合并版(保留初版验证记录与
  已修复结论)
- 重复的 0809 复审文档(本地未被 git 跟踪)已删除
- docs/INDEX.md smtp 行指回合并版并标注'初版+复审合并版'
 2026-08-09 12:03:36 +08:00
qing 63cfdd2066 actpred: 两轮代码审计修复与文档合并 
- 第 1 轮安全审计修复: F-1~F-10（路径校验、预训练架构修正等）
- 第 2 轮复审修复 11 项: 3 项上轮修复不完整（R01 checkpoint 键校验/
  R02 fused_hidden_dim 值域/R03 pretrained=False）+ 8 项新问题
  （actions.npy 形状校验、帧数警告、CLI 值域校验、stats 形状与路径、
  onnxscript 依赖、归一化语义、解析去重）
- 单元测试由 17 扩展至 51 用例（50 通过 + 1 环境性跳过）
- 审计文档两轮合并至 actpred_CODE_AUDIT_20260808.md，更新 INDEX
 2026-08-08 19:37:41 +00:00
qing 23a855963b actpred: 预训练与推理测试报告 
新增: docs/reports/actpred_pretrain_test_20260808.md (312行)
- action_dim=18变更验证（17项测试通过）
- .mt脚本解析器测试（13文件，22样本）
- 预训练结果（val_loss 2125→190，-91%）
- 推理基准（1.61ms / 622 FPS）
- PyTorch NPU/向量计算单元支持调研
更新: docs/INDEX.md reports计数8→9
 2026-08-08 17:29:56 +00:00
qing 45e019952e actpred: action_dim改18 + .mt脚本预训练入口 
- config.py: action_dim默认值 8→18（对齐bot4cj 18列）
- mt_parser.py: 轻量级.mt @Action解析器（支持-占位符前向填充）
- pretrain_mt.py: 预训练入口（零图像占位，checkpoint兼容现有推理）
- _run.sh: 新增pretrain子命令
- README.md: 新增预训练文档 + action_dim说明
- test_actpred.py: 测试断言更新为18
 2026-08-08 17:09:14 +00:00
qing 37206daf13 bot4cj: 代码审计报告（15项发现，待修复） 
新增审计: docs/reviews/bot4cj_CODE_AUDIT_20260808.md
- P0(3项): submitLine运算符优先级bug(DoesNotSync从不触发)、
  print(s)调试残留、扬声器仅sleep未发声
- P1(5项): r"\n"转义不一致、MPU6050地址重复、readI2cReg返回Int8、
  Lua路径硬编码、README D6/D8滞后
- P2(7项): 无测试、注释代码、I2C锁O(n)扫描、Makefile警告关闭等
- 交叉引用旧分析报告D1-D29，新发现S01根因(D11仅说信息不清晰)
更新: docs/INDEX.md reviews计数3→4
 2026-08-08 16:40:04 +00:00
qing 397970edc3 docs: 归档 actpred 与 bot4cj 对比研究报告到 reports/ 2026-08-09 00:21:05 +08:00
qing 2151dd5e72 docs: 添加 Blackbird 推广文案包 
含主推长文、短平快版本、Slogan 弹药库、配图建议
 2026-08-09 00:19:21 +08:00
qing 3d03f7a1ce actpred: 代码审计（16项发现全部修复）+ 文档更新 
审计报告: docs/reviews/actpred_CODE_AUDIT_20260808.md
- P0(2项): episode索引错位(dataset.py)、推理归一化静默失败(predict.py)
- P1(6项): 空训练集校验、图像自然排序、空样本防御、形状校验、
  MobileNet下载错误提示、stats路径校验
- P2(8项): README示例修正、公共属性、glob优化、版本约束、
  单元测试(17项)、GPU安装说明、BooleanOptionalAction、ONNX验证

新增文件: actpred/test_actpred.py (17项单元测试, 全部通过)
更新文档: README.md配置表扩充、INDEX.md、审计报告修复总结
 2026-08-08 16:05:01 +00:00
qing 1e34348d6c docs: 整理文档模块——归位散落文件、修复双扩展名、补全 INDEX 索引 
- 移动 docs/ 根目录散落文件到 reports/（auth_service_plan、aibox_file_network_cli_refactor、blackbird_promo_full）
- 修复 blackbird_research_report.md.md 双扩展名 → blackbird_research_report.md
- INDEX.md 补全缺失条目：dnfs2/fsys/libsqlite3/libth 安全审计，blackbird_research_report、aibox_open_dev_plan 等报告，dnfs2/fsys/libmsg/libtry README
- 更新目录树结构（security 25 篇、reviews 3 篇、reports 8 篇）
- 修正模块描述（BotOps、lci 说明更准确）
- 收录此前未跟踪的 actpred_CODE_AUDIT_20260808.md
 2026-08-08 15:55:21 +00:00
qing 0af9019af8 docs: 分发 CHANGELOG 内容到各模块文档并删除 CHANGELOG.md 
- gateway/README.md: 新增 0.8.0 版本条目（P0 安全修复、进程退出 bug 修复、完整特性列表），修正版本号 0.7.0→0.8.0
- libhttp/README.md: 新增 v3.4.4 版本条目（Listener::close、doAccept 递归修复、stop() 改进）
- README.md: 修正 gateway 版本号 v0.5.3→v0.8.0
- docs/INDEX.md: 移除 CHANGELOG 引用行
- 删除 CHANGELOG.md（内容已分发，安全审计详情已在 gateway_SECURITY_AUDIT_20260807.md 完整覆盖）
 2026-08-08 14:49:21 +00:00
qing 17bc69c45e docs: 添加权限系统独立化计划书 2026-08-08 14:30:44 +00:00
qing c27bd1a161 docs: 新增 core 模块注册中心功能扩展开发文档 
- 新增 docs/reports/core_service_registry_dev_doc.md
  包含：服务注册/发现/健康守护/自动重启的完整设计方案
  含 ServiceEntry 数据结构、ServiceRegistry 接口、HealthMonitor 策略、
  HTTP API 定义、Python/C++ SDK、services.yaml 声明式配置、分阶段实现计划
- 更新 docs/INDEX.md 添加文档索引条目
 2026-08-08 14:18:29 +00:00
qing 73b72d6889 fix(actpred): 修复归一化统计不一致等 5 项问题并增强可复现性 
- train/val 归一化统计量改为仅用训练集计算并落盘复用，修复 val loss 不可信
- predict.py 统计文件路径改用 os.path 处理，修复跨平台与无分隔符路径问题
- dataset.py jpg/png 混合时统一按文件名排序，保证时间顺序
- 新增 --seed 全局随机种子（含 DataLoader generator），训练可复现
- 新增 --max-grad-norm 梯度裁剪（默认 1.0），防 GRU 梯度爆炸
- get_episode_count 与数据集目录过滤条件对齐，避免无效目录导致索引错位
- 空验证集返回 inf 并保底保存最终权重，避免伪造 best 模型
- 清理 export_onnx.py 重复分支死代码
 2026-08-08 14:00:49 +00:00
shufeng2012 85e5a4a054 🚧 临时提交 2026-08-08 19:09:54 +08:00
shufeng2012 b851a96a66 🚚 移动前端 2026-08-08 19:09:36 +08:00
qing c8f2152d0a 调整输出 2026-08-08 16:10:41 +08:00
qing eab58b61f3 更新安装列表和自启动列表 2026-08-08 16:08:48 +08:00
qing bb5e3b973f docs(fsys): 修正 README 缓存/兼容性措辞，测试页补 video Range 用例，审计报告勘误 2026-08-08 07:52:18 +00:00
qing b6a1cadf25 docs(security): libhttp 审计补充下游反馈（P2-7 peer IP / P2-8 流式响应 / P3-3 .so 脱节） 2026-08-08 06:58:24 +00:00
qing 78bf74b067 feat(fsys): C++ 重写 static 模块（libhttp/libmsg 实现 + 安全审计 + 测试页） 2026-08-08 06:58:09 +00:00
qing 575c2a27a4 feat(actpred): 动作预测模块入库（PyTorch 训练/预测/ONNX 导出） 2026-08-08 06:25:06 +00:00
qing f93ae59521 feat: 切换 dnfs 到 dnfs2 启动与安装配置 2026-08-08 13:24:30 +08:00
qing f59988ceda Merge branch 'main' of https://git.cancerai.top/qing/blackbird 2026-08-08 08:34:58 +08:00
qing 546b19aece refactor(static): 重写首页，统一设计语言提升视觉和谐感 
- index.html: 品牌树 SVG 扩展为 4 层节点，新增径向渐变光晕底衬；
  About 面板新增同心圆装饰 SVG；CTA 树水印重绘为紧凑 7 节点版本
- css/index.css: 统一渐变方向为 135deg；光晕/点阵透明度更克制；
  卡片 hover 阴影更柔和；树动画幅度降低周期放慢；间距节奏统一
- js/index.js: IntersectionObserver 选择器适配新 section 命名
 2026-08-08 00:28:30 +00:00
qing 3708a9ca0c Merge branch 'main' of https://git.cancerai.top/qing/blackbird 2026-08-08 05:50:31 +08:00
qing 79b2e5b4be Merge branch 'main' of https://git.cancerai.top/qing/blackbird 2026-08-08 02:57:22 +08:00
qing 7ec5d71e06 docs: 添加 blackbird 项目深度研究报告 
覆盖架构、安全、代码质量与部署运维五大主题，含 15 个引用来源
 2026-08-08 02:47:02 +08:00
qing 00ce3eac6a fix(waf): 修复P3安全审计缺陷 
P3-1: logclient 复用 TCP 长连接，失败时重建，消除 TIME_WAIT 堆积
P3-2: TLS 显式限定 CipherSuites + CurvePreferences，排除弱加密套件
P3-3: CheckInput query 编码改用 url.Parse + Query().Encode()

修复率 76% -> 94%（P3 全部清零，仅剩 P0-3 为设计依赖）
 2026-08-08 02:39:22 +08:00
qing dd9f8e51ff fix(waf): 修复P1/P2安全审计缺陷 
P1-1: IPv6 地址解析改用 net.SplitHostPort，修复 XFF 带方括号致限流失效
P1-2: 捕获 ProcessResponseHeaders 返回值，命中记录 WARNING 告警
P1-4: 新增 SIGINT/SIGTERM 优雅关闭 + logclient.Flush()
P1-5: 标准日志输出到 stderr，保留 panic 堆栈
P2-1: 规则文件加载前校验大小（1 MiB 上限）防 OOM
P2-2: logclient db 地址支持 LOG_DB_ADDR 环境变量
P2-5: 日志失败输出到 stderr 而非 stdout

修复率 35% -> 76%（P1/P2 全部清零）
 2026-08-08 02:36:22 +08:00
qing bcec529761 fix(static): 第2轮审计修复12项安全缺陷 
修复 P1 路径遍历前缀 bypass、代理错误信息泄露、大文件 OOM、邮箱枚举与 CORS 通配；P2 Range 边界、hash 参数校验、db 连接复用、favicon 端口校验、日志批丢、端口解析异常。CSP/SSL 标记为已知限制。审计文档同步更新，修复率 36% → 88%。
 2026-08-08 02:21:08 +08:00
qing 1d1b80a049 docs: 修正宣传文案中 7 处不准确描述 
- 请求链路补上 redirect80（7步→8步），ai_review 触发条件改为新增节点前
- 模块地图补全 redirect80/db2/dnfs2/BotOps/lci，libtry 归入共享基础库
- core 管理接口修正为实际路由 /list /exec /kill（需管理员 Token）
- 安全评级改为各模块独立评级（gateway A- / dnfs2 A），不再暗示整体升级
- 快速上手 /status 改为 POST /list，init.txt 补全全部模块并强调顺序
- CTA 去掉安全评级从 A 推向更高的表述
- 共享基础库列表补入 libtry
 2026-08-08 02:18:31 +08:00
qing 1ed48a1f48 build(db2,dnfs2): 补齐 Dockerfile 支持容器化部署 
- db2/Dockerfile: 多阶段构建(libmsg+db2)，含 schema 初始化 entrypoint
- dnfs2/Dockerfile: 多阶段构建(libhttp+libmsg+dnfs2)，curl 健康检查
- .dockerignore: 豁免 libhttp/libmsg 供 C++ 服务构建

两者均基于 ubuntu:24.04(boost 1.83 含 json.hpp)，可平替 Python 版
 2026-08-08 01:59:48 +08:00