docs: 多源入库与生产迁移说明
- README: 多源记录补充 M4/日报/DB(news_event.sources)透传说明 - continuation.md: 记录多源入库、阶段/AI 显性输出、AI 摘要崩溃修复与生产迁移
This commit is contained in:
@@ -217,7 +217,8 @@ uv run python -m scripts.run_dedup --reset
|
||||
**多源记录**:同一内容被多个新闻源发布时,去重后只保留一条唯一新闻,但会记录全部来源
|
||||
(主源居首)。指纹库 `source_ids` 列为跨日累积的权威记录;`uniques/{url_hash}.json` 的
|
||||
`sources` 字段与 `data/deduped/{YYYYMMDD}/sources.json`(本次去重涉及内容组的源汇总,
|
||||
含跨日命中)为当日产物,展示/下游可按需读取多源列表。
|
||||
含跨日命中)为当日产物;M4 事件、日报与 DB 入库(`news_event.sources` 列)均透传多源,
|
||||
展示/下游可按需读取多源列表。
|
||||
|
||||
日志:`logs/dedup.log`
|
||||
|
||||
|
||||
Reference in New Issue
Block a user