feat: 股息率案例口径 + 策略库与图表统一 + 回测存档完整化

汇总三轮未提交的开发(每轮均在本机 MariaDB + 真实浏览器上验证):

1) 股息率案例(全市场股息率最高 n 只,默认 20,每 m 月择股)
   - 新增日频估值表 daily_basic + 迁移;股息率因子(dv_ratio / dividend_yield / TTM)
   - 名称历史表 stock_name_history:剔除 ST 按**择股日当时名称**判定,消除
     「曾高股息后 ST」的股息陷阱(实测 3.70pp 偏差)
   - 区间择股/调仓双周期(m 择股 / y 调仓)、指数成分与白名单、停牌近似剔除
   - 复权因子口径核对(4,164,742 行、缺失 0.0%)、收盘价成交与涨跌停拦单
   - 案例实测:2020-01-01~2026-09-04 总收益 +24.86%(年化 3.52%、回撤 -28.58%)

2) 策略库与前端统一
   - strategy 表 + CRUD/PUT 原地更新 + `describe_strategy` 按 spec 真实推导
     「一句话说明 + 计算公式 + 执行步骤 + 注意事项」(与引擎实执行规则同源)
   - 任何出现股票代码处都成对显示名称且可点击进个股页
   - 全站图表基座统一 TradingView Lightweight Charts(ECharts 依赖、
     锁文件、组件与文档标注一并清除),买卖点标记只落在真实交易日上

3) 回测存档完整化(可往复查看)
   - 同步端点(POST /api/backtests、/api/factor-tests)此前完全不落库 → 现在同样归档,
     归档 id 经响应头 X-Experiment-Id 返回(不破坏 response_model)
   - data_version 首次真实写入(数据快照指纹:最新交易日 + 各表规模)
   - 个股收益曲线默认**全量保存**(此前硬截断 60 只);超出体积预算才裁剪,
     并写 archive_meta(机器可读)+ unimplemented(人可读)如实标注
   - 列表 kind/q 过滤 + X-Total-Count(此前 limit=50 静默截断)、DELETE 归档
   - 只读归档页 /experiments/{id}(Server Component,SSR 直出**选股条件**与
     **交易执行依据**);结果视图按 kind 分发(backtest/factor_test/selection),
     非回测归档不套用回测口径
   - 新增 CLI:prune_experiments(保留策略,默认 dry-run)、
     restore_experiment_from_job(从 Job 副本按原 id 重建被删的历史归档,默认 dry-run)

门禁:pytest 388 passed、ruff All checks passed、tsc 0 错误、图表单测 7 passed、
next build 成功、契约脚本 verify_strategy_workspace 59/59(含按 kind 逐类验证归档页)。
This commit is contained in:
Simon
2026-09-20 07:31:04 +08:00
parent 7e15b7251e
commit 23972e7063
112 changed files with 17908 additions and 3893 deletions
+46 -5
View File
@@ -2,20 +2,23 @@
把 ResearchService.filter_stocks 的语义规则化并集中于此:
- 当前日与历史日(as_of)都必须正确:退市股(delist < as_of)、上市时间(list_date)
- exclude_st 按**当前名称快照**含 ST 判定(历史可追溯数据;历史改名无法回溯,属近似,
见结果 unimplemented 说明)
- exclude_st 优先用**时点名称**(`name_at` 映射,来自 stock_name_history)判定;
未提供或该股无记录时回退最新名称快照(历史改名无法回溯,属近似,见 unimplemented 说明)
- exclude_suspended 依赖停牌数据表(尚未建模),此处不做剔除,由上层显式标注
- symbols 白名单:非空时仅这些 symbol 参与(自选池 / 测试用)
"""
from __future__ import annotations
from collections.abc import Sequence
import logging
from collections.abc import Mapping, Sequence
from datetime import date
from app.domain.entities.market import Stock
from app.domain.entities.research import UniverseSpec
logger = logging.getLogger(__name__)
def resolve_members(index_repo, universe: UniverseSpec, as_of: date) -> set[str] | None:
"""若 universe 指定指数成分 → 取 as_of 当日历史成分;否则 None(不过滤)。"""
@@ -29,10 +32,15 @@ def filter_stocks(
universe: UniverseSpec,
as_of: date,
members: set[str] | None = None,
name_at: Mapping[str, str] | None = None,
) -> list[Stock]:
"""按股票池口径过滤,返回 as_of 时点应纳入的股票列表。
members:指数历史成分集合(resolve_members 结果);提供时取交集。
name_at:各股票在 as_of **时点生效的名称**(stock_name_history 查询结果)。
提供时 `exclude_st` 用它判定,缺失的股票回退 `stock.name`(最新快照)。
这是「股息陷阱」能否被正确纳入的关键:用最新名称会把「后来才 ST」的标的
在整段历史上提前排除(实测影响约 3.70pp 收益,见 DEV_PLAN §10.5)。
"""
symbols = set(universe.symbols) if universe.symbols else None
out: list[Stock] = []
@@ -43,8 +51,10 @@ def filter_stocks(
continue
if s.delist_date is not None and s.delist_date < as_of:
continue
if universe.exclude_st and s.name and "ST" in s.name.upper():
continue
if universe.exclude_st:
name = (name_at or {}).get(s.symbol) or s.name
if name and "ST" in name.upper():
continue
if (
universe.min_listing_days
and s.list_date
@@ -53,3 +63,34 @@ def filter_stocks(
continue
out.append(s)
return out
def names_as_of(
stocks: Sequence[Stock],
as_of: date,
name_repo,
) -> tuple[dict[str, str] | None, tuple[bool, int]]:
"""装配 as_of 时点的名称映射,供 `filter_stocks(exclude_st=True)` 使用。
返回 `(name_at, (是否时点口径, 覆盖只数))`:
- `name_repo` 为 None(未注入 / 表为空)→ `(None, (False, 0))`,
调用方回退 `stock.name`(最新快照,旧行为),结果页据此标注残余偏差;
- 否则返回时点名称映射,`filter_stocks` 逐股优先取时点名称、缺失回退最新名称。
时点语义(无未来函数):取 `start_date <= as_of <= end_date` 的生效名称区间。
名称自 `start_date` 起即对市场可见,故不构成前视;`ann_date` 仅作留痕。
"""
if name_repo is None:
return None, (False, 0)
try:
name_at = name_repo.names_as_of([s.symbol for s in stocks], as_of)
except Exception: # noqa: BLE001 —— 名称历史缺失不应让选股/回测整体失败
logger.warning("名称变更历史查询失败,回退最新名称快照判定 exclude_st", exc_info=True)
return None, (False, 0)
if not name_at:
# 表存在但**无任何生效区间**(未执行 sync namechange / 表被清空):
# `filter_stocks` 会逐股回退最新名称,因此口径仍是快照,**不得**声称时点,
# 否则结果页会把「未被修正的股息陷阱偏差」当成已修正上报(AGENT.md §24)。
logger.warning("名称变更历史为空(as_of=%s),exclude_st 回退最新名称快照", as_of)
return None, (False, 0)
return name_at, (True, len(name_at))