实验库¶
实验库记录训练、回测、调参、客户项目测试和排行榜,必须保证结论可复现。
台账¶
台账文件:registries/experiments.csv
核心字段:
| 字段 | 含义 |
|---|---|
experiment_id |
实验唯一 ID |
project_id |
归属项目 |
station_id |
归属场站 |
dataset_id |
数据版本 |
model_version |
模型版本 |
rule_id |
使用的评测规则 |
code_commit |
评测代码版本 |
metrics_json |
指标结果 |
rank |
排名 |
conclusion |
结论 |
SOP¶
- 实验只能引用冻结数据集、明确模型版本和生效规则。
- 运行前记录代码 commit、参数和环境。
- 自动生成指标、图表、日志和报告。
- 结论同步到算法模型库。