 simon
|
e9f8ef13ef
|
fix: Xvfb 管道挂死根因修复 + 日报窗口 mtime 兜底 + 翻译切换 dashscope
- domestic_crawl_8g.sh: Xvfb 启动脱离管道 fd（</dev/null + 重定向日志 + disown）。
修复 2026-09-06 事故：Xvfb 常驻进程继承 'bash crawl | tee' 管道写端，
tee 永远收不到 EOF → domestic_full.sh 卡死 M1 → 日报永不生成
- scheduler/reporter.py: _load_events_window 对 'publish_time 过期' 的文件
增加 mtime 兜底（本次窗口内新翻译的事件不被低质量 publish_time 误伤）。
修复空日报：date-only/美式日期错位的 publish_time 使窗口 articles=0
- configs/system.yaml: M4 翻译 provider 切换 deepseek → dashscope(qwen3.7-flash)，
降低翻译成本（输出单价约降 ~9 倍）；daily_report 保持 deepseek 不变
|
2026-09-06 11:52:31 +08:00 |
|
|
simon
|
c72a5ed13a
|
feat: AI 模型按场景独立配置（llm_scenes）+ 去重多来源合并
- system.yaml 新增 llm_scenes（translation / daily_report，含用途/方法/模型要求说明）
- load_llm_config(scene=...) 场景覆盖；日报摘要 temperature 0.3 硬编码 → 配置
- M3 去重：唯一篇记录 source_ids（跨源重复合并，首个来源为 source_id）
- source_ids 经翻译透传至 events，日报事件 source 多来源拼接展示（≤3 个）
- 已部署 pi5：merge 实证 10 源合并；日报 report_id=224 正常入库
|
2026-08-12 09:56:55 +08:00 |
|
|
simon
|
9aa44e610d
|
feat: LLM/Embedding 重试次数纳入 system.yaml 统一配置
- system.yaml: llm.max_retries(死配置) 改为 llm.max_attempts；embedding 段新增 max_attempts
- llm/client.py: LLMConfig 新增 max_attempts（默认 3 兜底），load_llm_config 读取配置
- llm/extractor.py: translate_and_extract(_async) max_attempts=None 时取 config.max_attempts
- embedding/client.py: load_embedding_config 读取 embedding.max_attempts
- scheduler/reporter.py: _call_llm_simple max_retries=None 时取 max_attempts-1
- 新增 2 个配置读取测试；已同步 pi5 验证
|
2026-08-05 08:48:43 +08:00 |
|
|
simon
|
fe8b417ab6
|
初始化
|
2026-07-18 16:13:52 +08:00 |
|