Files
YG_FT/docker/compute/data/yg-ft
wuyongtao 6cd1e46e86 feat: 添加 compute 数据目录结构,配置 gitignore 规则
- docker/compute/data/yg-ft/ 下创建 models、datasets、outputs、logs 目录
- 保留目录结构和 README,忽略子目录实际内容(日志、模型、数据集等)
- 修正 gitignore 全局 logs/ 规则为 /logs/,避免误伤

Co-Authored-By: Claude <noreply@anthropic.com>
2026-07-22 20:47:05 +08:00
..

YG-FT Compute 数据目录说明

本目录挂载到 yg-ft-compute-api 容器的 /data/yg-ft,用于持久化存储训练相关的数据。

目录结构

data/yg-ft/
├── datasets/     # 数据集存储目录
├── models/       # 模型文件存储目录
├── outputs/      # 训练/推理输出结果目录
└── logs/
    ├── compute/  # 计算服务运行日志
    └── training/ # 训练任务执行日志

各目录说明

datasets/

训练和评估所使用的数据集文件,包括 JSON、JSONL、CSV 等格式。数据集由用户上传或通过平台创建,供 LLaMA-Factory 等训练引擎读取。

models/

存放模型文件,包括:

  • 预训练基座模型(如 LLaMA、Qwen 等)
  • 微调后的自定义模型权重
  • 合并后的部署模型

outputs/

训练任务和推理任务的输出结果,包括:

  • 训练过程中的 checkpoint 文件
  • 评估结果和指标报告
  • 推理生成的结果文本

logs/compute/

计算服务compute-api的运行时日志用于排查服务启动、GPU 调度、健康检查等问题。

logs/training/

各训练任务的执行日志,记录训练过程状态、报错信息等,便于追踪单个任务的运行情况。