- 统一一个BEGIN IMMEDIATE事务包裹所有写操作,替代独立写函数调用 - 5次重试 + 指数退避 (1s,2s,4s,8s,16s),原3次+固定2s - 重试耗尽后自动 emergency WAL checkpoint(TRUNCATE)释放死锁 - try/except确保连接始终释放,修复conn泄漏 - 三副本同步:profile/scripts + MoFin/scripts + MoFin/root
11 KiB
11 KiB
analyst-knowledge-log.md
[2026-07-09 22:00] 全市场主力建仓扫描 + 五级过滤 + LLM九维分析
新增组件
| 组件 | 功能 | 调度 |
|---|---|---|
accumulation_scanner.py |
全市场5207只A股量价异常扫描(每10分钟13秒) | */10 9-15 |
candidate_filter.py |
五级过滤管道(S2量价/S3技术/S4资金/S5基本面) | */30 9-15 |
promote_candidates.py |
自动提拔高分候选入自选 | */30 9-15 |
batch_reassess.py |
批量LLM九维分析补全(逐只处理间隔15秒) | 一次性 |
系统架构变更
[2026-07-10 11:42] 知微XMPP Bot离线自愈修复
发现
自愈执行器报告知微XMPP Bot离线。调查发现:
- Bot进程(PID 422464)被bash包装器手动启动,非systemd管理
- systemd xmpp-zhiwei.service 因PID文件冲突僵在
activating (auto-restart) - 孤儿bot在11:40:48断线后无法恢复连接
修复
- 杀死孤儿进程
kill -TERM 422464 - 删除PID文件
rm -f /home/hmo/.hermes/zhiwei_bot.pid /tmp/xmpp_zhiwei_bot.pid - systemd自动重启,bot干净上线
- 验证:presence available、加入coregroup、bridge正常
教训
bash包装器启动bot会绕开systemd管理,导致:
- systemd状态监测不准确(显示restarting而非running)
- 孤儿进程断开后无法被systemd接管
- 已有
xmpp-bot-infrastructureskill 记录了孤儿进程陷阱,自愈系统可直接参考执行
自选统一:**
- 自选数据统一存储在
holding_strategies(decision_type='自选策略') watchlist_stocks表已废弃(is_active=0)read_watchlist()改为从holding_strategies读取
DB统一:
~/.hermes/profiles/position-analyst/data/mofin.db→ 软链接 →/home/hmo/MoFin/data/mofin.db
去小果化:
xiaoguo_scanner/xiaoguo情感分析/xiaoguo信号消费全部停用- 替代为
accumulation_scanner.py(纯数据驱动,0 LLM成本)
九维分析
per_stock_reassess.py 重评时自动调用LLM(gateway API)生成完整九维分析:
- 数据源全部随需随拉(腾讯API实时价/PE/市值 + DB大盘/基本面/消息)
- LLM输出信号+买入区间+止损止盈+仓位百分比
- 超时自动降级为代码生成
冷却期机制
per_stock_reassess:reassessed_at追踪,交易时段1小时/非交易24小时price_monitorzone breach:_can_push()同股同区间30分钟冷却
仓位规则
- 仅「买入」信号输出仓位建议
- 仓位公式:RR×大盘调整×品种调整,范围5%~20%
- 关注/观望/卖出信号仓位为空
数据清理
-
DROP TABLE: stock_weekly, stock_monthly(无人读取的死表)
-
DROP TABLE: portfolio_state(无人读写的僵尸表)
-
holdings: 清除shares=0的5只持仓
-
watchlist_stocks: 全部标记is_active=0(已迁移)
-
发现: candidates表有15条历史候选数据但promoted=0的都被手动标记了dropped=1(超7天未更新)。自动推广管道从未实现。
-
修改: 新建
scripts/promote_candidates.py— 扫描 candidates(promoted=0+dropped=0) → stock_quote验价 → write_holding_strategy → 标记promoted -
新建cron: 候选股自动推广-盘中(e415846d4fb6) | 0,30 9-15 * * 1-5 | no_agent | 静默模式
-
效果预期: 新候选股在30分钟内自动进入自选+带策略,不再依赖LLM prompt
[2026-07-09 10:40] 自愈执行器升级处理:KOSDAQ-4.1% HIGH信号
- 发现: 自愈执行器上报盘中自检发现宏观风险HIGH(KOSDAQ-4.1% + 中信证券研报)
- 判断: 系统无故障,已知市场条件延续。KOSDAQ-4.1%是昨日KOSPI暴跌的延续,非新事件。中信证券研报是采集器误报(正常行业研报)。
- 数据验证: 中国各指数全面脱钩改善(上证-1.26%→+0.02%,恒生-0.51%→+1.69%,科创50+0.28%→+0.62%)。持仓止损距均>3%。
- 操作: 标记已知状态,无需新推送。08:30 LLM深度分析已覆盖并修正。
- 涉及文件: macro_risk_state.json(已由consumer更新为processed)
[2026-07-09 14:xx] 自愈执行器升级:信号堆积38条
- 发现: 盘中自检触发「信号堆积: 38条未处理(需<30)」告警,自愈执行器无自动修复方案,升级到LLM处理
- 调查: 38条为 xiaoguo 来源信号,属4h时效内积压。当前已完成消费(xiaoguo_signal_consumer每30分运行),积压自愈
- 监控盲区发现: intraday_health_check.py 和 system_audit.py 均只监控
source LIKE 'xiaoguo%',忽略 divergence_watch(80)、trend(46) 等来源的126条未处理信号 - 修复: 两处均增加全量未处理查询,区分 xiaoguo 和其他来源分别报告
- 涉及文件: scripts/intraday_health_check.py, scripts/system_audit.py, CHANGELOG.md
[2026-07-09 14:xx] 自愈执行器升级:信号积压126条(divergence_watch/trend无consumer)
- 发现: 自愈执行器上报「其它来源信号积压: 126条未处理(divergence_watch/trend等无consumer)」
- 调查: divergence_watch 80条全部未处理 — divergence_detector.py写入signal_news但已自写macro_divergence_state.json,signal_news仅归档副本。trend 46条未处理 — 废弃系统的死数据,summary为空
- 修复: divergence_detector.py — INSERT时加processed=1(归档性质不需要consumer)。DB — 80条divergence_watch + 46条trend历史标记为processed。同步cron目录MD5一致
- 效果: signal_news 1077条全量已处理,健康检查PASS,后续不会再次积压
- 涉及文件: scripts/divergence_detector.py, data/mofin.db, CHANGELOG.md
[2026-07-10 10:25] 自愈:知微XMPP Bot离线 — 孤儿进程阻塞systemd
- 发现: 盘中自检报警「知微XMPP Bot离线」,TODO 83 created(无fix_action,升级到LLM处理)
- 调查:
- systemd
xmpp-zhiwei.service陷入无限重启循环(重启计数器110+) - 根因:外部bash wrapper脚本在10:04启动了一个孤儿bot进程(PID 252975),该进程占用了
/tmp/xmpp_zhiwei_bot.pid和端口5805 - systemd每次尝试启动都因PID检查
xmpp_zhiwei_bot already running (PID 252975), exiting.而退出 - 实际上PID 252975的bot是正常运行的(已加入群聊coregroup,HTTP桥5805正常响应),只是不受systemd管理。wrapper触发源不明(可能自愈系统之前的升级操作)
- systemd
- 修复:
kill -TERM 252975杀掉孤儿进程- 清理旧PID文件
/tmp/xmpp_zhiwei_bot.pid和/home/hmo/.hermes/zhiwei_bot.pid - systemd 10秒RestartSec后自动启动新实例
- TODO 83 标记为completed
- 验证: systemd active(running) since 10:25:43,bot加入群聊coregroup就绪,gateway health ok,HTTP桥5805正常
- 效果: systemd恢复管控bot,重启循环归零
- 涉及文件: /home/hmo/xmpp_zhiwei_bot.py (PID_FILE机制)
[2026-07-13] XMPP Bot非阻塞修复 + 深套股规则重构 + 换股规划
XMPP Bot修复
- 问题1: bot调用gateway同步等600秒,阻塞事件循环 → XMPP心跳发不出 → 被踢下线 → 重试→turn堆积→更慢
- 修复: 45s短超时 + "处理中"预回复 + 后台300s轮询 + 不再阻塞心跳
- 问题2: 远程XMPP服务器(120.78.123.183:5222)网络不通,bot连不上
- 修复: bot.connect(host='127.0.0.1', port=5222) 改连本地XMPP代理
- 问题3: xep_0045 MUC插件未注册导致崩溃
- 修复: __init__加 self.register_plugin('xep_0045')
- 涉及文件: /home/hmo/xmpp_agent_core.py
price_monitor通知噪音修复
- 问题: _push_cooldown 是内存dict,price_monitor每2分钟新进程运行 → cooldown每次重置 → 同股同区间反复推送
- 修复: cooldown持久化到 /home/hmo/.hermes/.price_push_cooldown.json
- 涉及文件: scripts/price_monitor.py
深套股规则重构(Dad铁律确认)
- 删除:
is_deep_loss对止损/止盈/买入区/质量检查的全部6处guard - 删除:
action_note="深套持有"强制覆盖 - 删除:
position_advice="不补不割"/time_horizon="长期" - 保留:
stock_category="深套"仅作标签 - 原则: 一切根据客观判断,该加就加该割就割
- 涉及文件: scripts/strategy_lifecycle.py
换股规划功能
python3 strategy_lifecycle.py swap-plan [--need 金额]- 五维评分: 亏损程度25% + 仓位20% + 技术趋势25% + 流动性15% + 前景15%
- 按评分排序输出可替换优先级,--need 参数自动计算卖几只够
- 涉及文件: scripts/strategy_lifecycle.py
技术分析增强
- weekly/monthly趋势/MA/支撑阻力注入mtf_context
- 健康Tab写无读警告从3个归零(stock_weekly/monthly/watchlist_log加manual_readers)
- 每日汇总只发一次(16:35 + sent标记防重复)
- cron_health_monitor新增数据实体完整性检查
- 涉及文件: scripts/technical_analysis.py, scripts/strategy_lifecycle.py, scripts/mofin_health.py, scripts/cron_to_xmpp.py, scripts/cron_health_monitor.py
2026-07-14 — 系统检查:Dad未收到任何消息的诊断
发现问题
- cron_to_xmpp.py Bug: body提取
content.split("## Response")用parts[1]取到的是skill内容中的 ## Response(第一个),而不是agent实际回复的 ## Response(最后一个)。导致开盘简报等LLM报告的正文取错,被误判为[SILENT]静默拦截。 - price_monitor.py SQLite写锁死锁: 多个cron脚本(price_monitor + mofin_health等)同时BEGIN IMMEDIATE写 mofin.db,进程卡在D状态,WAL文件膨胀到2.7MB,后续全部超时。
- mofin_db.py版本不同步: cron版本和MoFin版本有差异(cron版本多了保留full_analysis/reassessed_at的代码)。
修改了什么
cron_to_xmpp.py— 改parts[1]→parts[-1](取最后一个Response节)mofin_db.py(MoFin目录) — 同步cron版本的reassessed_at列处理和full_analysis保留逻辑price_monitor.py— 添加debug时序追踪,临时kill D状态进程+WAL checkpoint.silent_daily_count.json— 纠正静默计数(-1因为开盘简报被误拦)
文件
- Modified: /home/hmo/.hermes/profiles/position-analyst/scripts/cron_to_xmpp.py
- Modified: /home/hmo/MoFin/scripts/mofin_db.py
- Modified: /home/hmo/.hermes/profiles/position-analyst/scripts/price_monitor.py
2026-07-14 — price_monitor DB写锁死锁根治(跟进修复)
发现问题
上次诊断只做了临时修复(kill D状态进程 + WAL checkpoint),Dad要求直接根治。
修改了什么(三副本同步)
- price_monitor.py (profile/scripts): 统一 BEGIN IMMEDIATE 包裹所有写操作,替代调用 write_holdings_batch/write_portfolio_summary/write_live_prices。5次重试+指数退避(1s→2s→4s→8s→16s)。重试耗尽后自动 emergency WAL checkpoint。try/except 确保 conn 始终释放。
- MoFin/scripts/price_monitor.py — 同步修复
- MoFin/price_monitor.py — 同步修复(保留其 cash_log 优先的现金读取逻辑)
- CHANGELOG.md — 新增2026-07-14条目
文件
- Modified: /home/hmo/.hermes/profiles/position-analyst/scripts/price_monitor.py
- Modified: /home/hmo/MoFin/scripts/price_monitor.py
- Modified: /home/hmo/MoFin/price_monitor.py
- Modified: /home/hmo/MoFin/CHANGELOG.md