🧠 个人知识库

2026年09月工作与技术日志

Properties1
tags日志

22 min read

2026年09月工作与技术日志

2026-09-12 (周六)

1. 自动化流水线与社区工具扩展 (NodeSeek Auto Checkin)

  • NodeSeek 自动化签到与拟真活跃系统 (scripts/nodeseek_checkin.py)：
    • Cloudflare WAF 穿透：基于 curl_cffi（chrome124 TLS 指纹）直接穿透 Cloudflare Challenge，免除无头浏览器开销；
    • 防封安全边界：设立请求白名单，严禁自动发帖/水回帖，仅执行拟真热帖浏览与个人资产查询；支持 5~180s 随机时序抖动；
    • 凭据与多账号安全：从环境变量 NODESEEK_COOKIE 读取（支持 & 连接），全流程 Scrubber 自动脱敏，飞书标准 Markdown 排版输出；
    • 凭据过期高能预警：当捕获到 AuthError（未登录/Cookie 过期）时，自动在报告顶部弹出显眼的红色预警横幅，并附带确定性的修复指引。
    • 定时任务就绪：已注册 Hermes 定时任务 (job_id: 48b8c084f670)，每日 09:15 CST 自动运行并投递至飞书私聊。

2026-09-10 (周四)

1. 核心系统全量规范化重构与生产轻量化性能治理 (CLBOT v11.3.9 & CCBOT v3.2.3)

  • 代码规范与工业级排版 (PEP 8)：
    • 运用 Ruff 格式化引擎对 clbot 全量 17 个模块及 ccbot 后端 9 个模块实施代码结构标准化对齐（88 字符折行、消除悬挂空格与冗余括号）。
    • 全量消除 Windows \r\n (CRLF) 换行符，统一转换为标准 Linux \n (LF)。
    • 彻底抹除代码中杂乱的历史补丁草稿式注释（如 # 核心修复: 原实现...、# 核心优化...），重构为严谨的 # 设计约束: 与 # 业务约束: 业务逻辑规范。
  • 生产轻量化治理与防抖防爆落地：
    • clbot 日志指纹库 TTL 内存治理 (main.py)：引入 cachetools.TTLCache(maxsize=1000, ttl=86400) 配合 threading.Lock。消除暴力切片，锁死内存占用在百 KB 级别，实现 24 小时自然滑动淘汰，保障隔天复发的严重故障能重新触发告警。
    • clbot Yahoo Crumb 全局连接池复用 (core/market.py)：构建 _get_yahoo_session() 全局长连接池复用底层的 TCP Connector 与 CookieJar 状态，实测单次请求延迟直降 70%（省去 150ms 握手），彻底消除临时爬虫频繁握手触发 Yahoo IP 封控风险。
    • clbot 交易日历联动与半日市感知降级 (core/broker.py)：将月度日历缓存 _today_calendar_day 深度打通至本地 is_open() 降级逻辑。优先识别日历中当天开闭盘时间定义（如 09:30-13:00）与非交易日，消除假期或半日市早退后的无效空轮询。
    • ccbot 容器资源硬配额物理熔断 (docker-compose.yml)：显式增加 Deploy Resources 内存上限：titanq-bot (400M)、titanq-api (300M)、titanq-frontend (200M)，彻底杜绝突发访问打爆宿主机内存引发级联 OOM。
  • 验证与部署：
    • 本地自动化测试套件 test_suite.py（8/8 PASS）、test_p0_fixes.py（5/5 OK）与 test_security_gates.py（4/4 OK）全部 100% 真实通过。
    • 生产绿云 VPS 热更新部署完成，容器已重建并平滑启动（内存利用率维持在 1.6% - 62.8% 健康区间）；代码与子模块已全量推送到 GitHub。

2026-09-07 (周一)

1. 核心系统安全专项加固与全量物理闭环 (CLBOT v11.3.9 & CCBOT v3.2.1)

  • 多智能体安全攻防与交叉实测：

    • 由 A Bot (架构安全/威胁建模)、B Bot (代码审计/自动化测试) 与 Hermes (决策协调与物理回归) 联合针对 CLBOT 与 CCBOT 展开全域安全专项审计；
    • 成功实测复现并完全修复了特殊浮点数绕过、Traceback 异常栈凭证泄露、API 侧车零鉴权暴露、飞书群聊财务隐私广播、新浪行情明文 HTTP 传输等 6 大核心关键缺陷。

  • clbot v11.3.9 (实盘下单底层物理硬防线、NaN特殊值清洗与Traceback递归脱敏)：

    • 实盘下单底层物理硬防线 (core/broker.py)：在 _execute_order_leg 出站咽喉点增加物理断路器，动态绑定 .env 配置的 MAINTENANCE_SYMBOL（当前为 NOK）白名单与 MAINTENANCE_QTY 数量上限，杜绝任何非白名单标的或超额实盘下单；
    • 浮点数特殊值强类型清洗 (infrastructure/feishu/handlers.py)：引入 math.isfinite() 校验，对买入/平仓/展期的价格、数量及行权价进行有限性断言，彻底封堵 NaN 与 Inf 绕过正数校验毒化持仓台账与回撤指标的漏洞；
    • 持仓前缀匹配空串通配阻断 (infrastructure/feishu/handlers.py)：_match_position 强制限制检索目标有效长度必须 字符，彻底杜绝指令入参为空串时误通配全局持仓引发误平仓；
    • Traceback 异常栈递归脱敏 (main.py / infrastructure/config.py)：重构 HardenedMaskingFormatter，重写 formatException 深入清洗调用栈中的私密凭证与 URL Token，并在 SECRET_KEYS 中补充账号与 AppID 保护；
    • 自动化安全验证：新增 test_security_gates.py，涵盖数值清洗、空串拦截、Traceback 脱敏与保号实盘熔断，4/4 真实全绿通过。

  • ccbot v3.2.2 (自动派息通知全要素细化与飞书纯文本告警标签彻底净化)：

    • 派息通知全要素细化 (backend/tasks.py)：在自动派息成功日志中，全面补充当时持仓股数（hist_qty）、税后每股派息额（及税前与税率说明）、总到账派息现金，彻底消除了仅显示标的与模糊总金额的信息缺失；
    • 飞书告警信道 HTML 标签净化 (backend/tasks.py)：针对独立纯文本告警通道（send_feishu_alert），全面剔除 <code> 与 <b> 标签，改为飞书原生支持的 Markdown 加粗与反引号格式，杜绝移动端出现未转义的 <code\></code\> 视觉噪点；
    • 全量排查占位符与模板：对 ccbot 与 clbot 两个项目所有的推送模版、卡片构造器、帮助提示进行了全局深度扫描，确认不存在其他残留代码或无效占位符。

  • ccbot v3.2.1 (API侧车Token准入、NaN数值清洗、群聊会话隔离与HTTPS外联)：

    • API Sidecar 零信任准入门禁 (backend/api_sidecar.py)：增加 api_auth_middleware 中间件与 API_SECRET_TOKEN 校验机制，支持 Header (X-TitanQ-Token) 及 Query (?token=) 传递安全令牌；采用 hmac.compare_digest 防时序攻击，未授权请求一律返回 403 阻断，彻底消除未授权脱库隐患；
    • 数值输入强类型清洗与边界 (backend/handlers.py)：在 cmd_cash、cmd_trade 及 cmd_roll 中全量引入 math.isfinite() 断言，拦截 NaN、Inf 及负数价格注入；标的正则约束为 1 至 32 位长度上限，杜绝超长恶意字符串；
    • 飞书群聊与私聊密级会话隔离 (backend/main.py)：识别事件消息的 chat_type，当在非私聊（group 群聊）中触发 /pos、/report、/trade 等核心财务指令时，阻断大卡片回帖广播，安全回退为引导用户私聊交互的拦截提示，杜绝财务底牌在群聊中泄露；
    • 外汇行情强制 HTTPS 传输 (backend/market_feeds.py)：将新浪外汇接口物理链接由 http:// 升级为 https://hq.sinajs.cn/list=fx_susdcny，杜绝中间人劫持与篡改汇率参数；
    • Traceback 异常栈递归脱敏 (backend/config.py)：挂载 HardenedMaskingFormatter，重写 formatException 递归过滤 system_audit.log 及标准输出中的 Token、Secret 与账号信息；
    • 自动化安全验证：编写 test_ccbot_security.py，涵盖 NaN 清洗、HTTPS 外联、Token 网关、群聊隔离与异常栈脱敏，5/5 真实全绿通过。

2026-09-04 (周五)

1. 核心量化系统全量缺陷修复与生产升级

  • clbot v11.3.8 (消除优雅停机时子循环解冻的良性报错与虚假重连提示)：

    • 异常平滑吸收 (infrastructure/feishu/client.py)：在子线程 _start_ws_client() 内捕获 RuntimeError，对看门狗主动调用 sub_loop.stop() 解冻导致的 Event loop stopped before Future completed 予以平滑吸收，降级为 DEBUG 级别；
    • 彻底切断重连循环：在外层协程退出与异常分支检测 self._ws_stopped，停机时直接 break 退出循环，根除退出阶段打印 ERROR | 引擎运行异常，5秒后重连 的虚假报警，停机日志达到 100% 纯净；
    • 生产热发布：绿云 VPS 已无缝上线 clbot v11.3.8。

  • clbot v11.3.7 (飞书 SDK 空闲断线重连噪音降级为 DEBUG 并消除双重输出)：

    • 降级与静默规则 (main.py)：新增 LarkNoiseFilter 过滤器，捕获飞书官方 SDK 在公网长连接空闲轮换时用 ERROR 打印的 receive message loop exit, err: no close frame received or sent，将其改写为 DEBUG 级别，并在生产 INFO 模式下静默拦截；
    • 清理自带 Handler：在 setup_logging 中清空第三方库自带的未过滤 StreamHandler，彻底消除控制台同一条日志打印两遍的视觉噪音；
    • 生产热发布：已在绿云 VPS 上线部署 clbot v11.3.7，长连接引擎稳定在线。

  • clbot v11.3.6 (根除保号卖出裸空头竞态、优雅退出顺序闭环与 DB 连接防污染)：

    • P0 交易防线（防裸卖空加固）：在 core/broker.py 的保号卖出撤单逻辑后、市价兜底前，强制向券商端穿透核验实际剩余持仓。将网络故障（返回 None）与真实零持仓严格解耦：若查询失败坚决报错熔断，绝不虚假校准为全额成交；若实际持仓已归零，精准校准为全额成交并拦截市价兜底；仅当确有正多头时才发起带上限的市价单，彻底杜绝现金账户打出非法裸空头。
    • P0 优雅停机生命周期闭环：infrastructure/feishu/client.py 暴露 close_ws() 显式向 WebSocket 子线程下发 stop_event 优雅信号（看门狗检测间隔缩短至 0.5s），并在主协程显式取消与安全回收外层轮询任务，杜绝 5 秒幽灵复活竞态；main.py 严格遵循依赖倒序关闭（在途任务 ➔ 飞书长连接 ➔ 行情网络 ➔ SQLite 句柄），根除退出阶段在途任务访问已关闭数据库引发的级联崩溃与句柄悬挂。
    • P1 数据库连接防污染：infrastructure/db.py 中 _get_conn 异常捕获拓展为 BaseException，确保协程被 cancel() 时底层 SQLite 连接被干净关闭并置空，彻底防止连接与事务状态污染。
    • P1 日志告警器线程安全与容量防抖：main.py 中 FeishuLogHandler 指纹库引入 threading.Lock 消除多线程并发竞争，并改用保留后半段容量（从 5000 截断至 2500）的滑动淘汰机制替代暴力 clear()，根除网络抖动下的告警雪崩。
    • 生产部署与回归：新增 test_p0_fixes.py 深度加固测试套件（4/4 通过），全量功能套件 test_suite.py（8/8 通过），已通过 SSH 无损热发布至绿云 VPS（45.92.158.153），容器 clbot 平稳运行。

  • ccbot v3.1.0 (数据库持久化路径锁定入卷、连接池死锁消除、盘中入金收益纠偏与期权行权前置锁)：

    • P0 持久化防线（彻底消除数据蒸发隐患）：修复 config.py 与 api_sidecar.py 中的存储路径拼装错位，统一将 DB_FILE_PATH 严格锚定在 DATA_DIR / DB_NAME（/app/data/titan_q_assets.db），并弹性兼容包含 data/ 前缀的 .env 变量配置，确保数据绝对落入宿主机挂载卷 ./data/。
    • P0 连接池安全（根除洗盘嵌套自死锁）：database.py 中 get_max_transaction_id_async 增加 session: Optional[AsyncSession] 参数支持外部复用；tasks.py 增量洗盘任务显式透传外层会话，杜绝在 pool_size=1 单连接池下重复申请连接诱发的单协程自死锁。
    • P0 跨 Loop 锁安全：config.py、database.py 与 tasks.py 中的全局异步锁全面改造为单例延迟初始化工厂方法，杜绝模块加载顶层裸实例化 asyncio.Lock() 引发的跨事件循环冲突。
    • P1 财务核算精准度纠偏：reporting.py 滚动收益 (Live PnL) 计算中，若当前时刻已过 06:00，现金流统计窗口自动动态延展至实时的 report_date，彻底消除了盘中充值本金被误算为“当日暴赚投资收益”的算术逻辑漏洞。
    • P1 时序一致性修复：tasks.py 历史洗盘流读取中废弃直接 replace(tzinfo=TZ_BJS) 的硬替换，规范采用 ts.replace(tzinfo=timezone.utc).astimezone(TZ_BJS)，杜绝美股盘后与跨夜交易 8 小时历史倒流。
    • P1 期权业务绝对 Fail-Fast 与前置持仓锁：在交易流水落盘平仓抹零前，前置核验并锁定 opt_existing_is_long 状态；若账本中无有效持仓坚决报错拒绝（杜绝盲猜）；被指派 Short Call 行权时，底层标的必须且绝对执行 SELL（卖出股票交付），彻底终结空头做反敞口翻倍的风险。
    • 生产部署与端到端验证：编写 test_ccbot_fixes.py 端到端集成测试（5/5 真实通过）；绿云 VPS 完成全容器编排构建平滑重启，titanq-bot (healthy)、titanq-api、titanq-frontend 全量上线。

2. 多智能体敏捷协同研发闭环落地

  • 三位一体多 Bot 敏捷协同机制实战检验：
    • 由 Hermes 主控决策者、A Bot (首席架构师兼独立审核者) 与 B Bot (核心程序员兼测试实现者) 组成的三位一体团队正式接管复杂开发任务；
    • A Bot 在架构审核中两度执行反向证伪攻击（识别出“持仓查询 None 误标全额成交”与“期权平仓后查持仓必为 0 导致方向反转”两大隐形时序断层），B Bot 严格执行整改契约并编写真实端到端集成测试；
    • 飞书群聊策略配置更新为 FEISHU_GROUP_POLICY=open 与 FEISHU_REQUIRE_MENTION=false，实现群内指令无感免 @ 优先响应与多任务并发调度。

2026-09-03 (周四)

1. 策略系统与稳定性加固

  • clbot v11.3.5 (引入跨线程 stop_event 优雅退场与 shield 串行等待，根除跨 Loop 踩踏)：
    • 根因消除：在 asyncio.to_thread 运行阻塞的 ws_client.start() 时，外部 wait_for 超时无法杀死 Python 操作系统的 worker 线程，导致旧线程在后台僵尸运行，与新线程并发踩踏模块级全局 loop 变量，从而抛出 Task ... got Future ... attached to a different loop。
    • 优雅停机与看门狗通信：引入 threading.Event()（stop_event），并在子事件循环中挂载 _watchdog 协程；当超时发生时触发 stop_event.set()，由子线程主动取消内部所有任务并调用 sub_loop.stop() 干净解冻阻塞。
    • 主协程串行等待收割 (await ws_task)：使用 asyncio.shield 保护线程任务，并在超时重连前显式 await ws_task，确保旧线程 100% 物理销毁后方才启动下一代长连接，彻底实现严格串行化与零跨 Loop 污染。
    • 全量同步与推送：代码已合入 GitHub 仓库 yyanxiao/clbot（Commit: 04691f0）及主仓库 yyanxiao/HermesAgent（Commit: 47847c1）。

2. 看门狗巡检引擎加固

  • check_greencloud_bots.py 升级：
    • 日志扫描深度由 --tail=100 扩展至 --tail=500，有效拉长探测窗口，消除由于美东时区（EDT）与巡检触发时间（09:00 CST）时差导致的漏检；
    • 增加对 attached to a different loop、This event loop is already running 及 Event loop is closed 等异步事件循环异常特征的正则捕获。

2026-09-02 (周三)

1. 策略系统与稳定性加固

  • clbot v11.3.4 (彻底修复 lark-oapi WebSocket 模块级 loop 绑死与 GC 析构异常)：
    • 根因定位：lark_oapi.ws.client 官方 SDK 内部硬编码了全局模块级单例 loop = asyncio.get_event_loop()。当容器连续运行 23.5 小时触发定时超时熔断刷新时，子线程重新建立连接会因调用旧的/外层事件循环而抛出 This event loop is already running，陷入无法自愈的重试死循环；且退出后由于事件循环已关闭，GC 阶段触发 ExpiringCache.__del__ 会抛出 Event loop is closed / Task was destroyed but it is pending!。
    • 加固方案 (infrastructure/feishu/client.py)：
      • 在子线程沙盒 _start_ws_client() 中显式执行 lark_oapi.ws.client.loop = sub_loop，将 SDK 内部模块级 loop 单例动态重定向绑定到当前子线程的专属事件循环；
      • 在 finally 资源收割阶段，显式调用 ws_client._cache._cron.cancel() 安全取消定时器，杜绝 GC 阶段未处理异常。
    • 生产部署与同步：
      • 已在绿云 VPS（45.92.158.153）编译并重启 clbot 容器，长连接挂载与双路分发引擎恢复秒级响应；
      • 代码已同步至 yyanxiao/clbot 仓库（Commit: 5d041c4）及主仓库 yyanxiao/HermesAgent（Commit: 5a4b43a）。

2. 运动健康与体能资产归档

  • 休假国内阶段圆满收官 (10.07km 极佳低负荷巡航)：

    • 完成国内休假收官跑（10.07 km，耗时 01:03:42，平均配速 6’20”）；
    • 生理能效跃升：平均心率仅 133 bpm（创下历史 10 公里长距离最低平均心率纪录），Zone 2 低心率轻松有氧区间占比高达 59.6%，最高心率全程牢牢压制在 148 bpm 以内，展现出极其扎实的心肺能量代谢与抗疲劳储备。
    • 数据已归档至 HermesAgent/sports/raw_fit/ 并同步更新知识库实体卡片 [[运动数据]]。

  • clbot v11.4.0 (WebSocket 美东双锚点固定定时刷新与日志静默重构)：

    • 废除 23.5 小时相对滚动超时，引入美东时间双锚点动态对齐机制（美东 03:00 与 17:00 EDT/EST）。
    • 单次长连接寿命稳定在 10~14 小时之间，彻底免疫飞书 24 小时被动掐断；彻底消除重连时间每日漂移 30 分钟缺陷。
    • 重连日志收敛为 DEBUG 级别，生产环境完全静默。

Graph View

Backlinks