39 lines
1.2 KiB
Markdown
39 lines
1.2 KiB
Markdown
|
# YG-FT Compute 数据目录说明
|
|||
|
|
|
|||
|
|
本目录挂载到 `yg-ft-compute-api` 容器的 `/data/yg-ft`，用于持久化存储训练相关的数据。
|
|||
|
|
|
|||
|
|
## 目录结构
|
|||
|
|
|
|||
|
|
```
|
|||
|
|
data/yg-ft/
|
|||
|
|
├── datasets/ # 数据集存储目录
|
|||
|
|
├── models/ # 模型文件存储目录
|
|||
|
|
├── outputs/ # 训练/推理输出结果目录
|
|||
|
|
└── logs/
|
|||
|
|
├── compute/ # 计算服务运行日志
|
|||
|
|
└── training/ # 训练任务执行日志
|
|||
|
|
```
|
|||
|
|
|
|||
|
|
## 各目录说明
|
|||
|
|
|
|||
|
|
### datasets/
|
|||
|
|
训练和评估所使用的数据集文件，包括 JSON、JSONL、CSV 等格式。数据集由用户上传或通过平台创建，供 LLaMA-Factory 等训练引擎读取。
|
|||
|
|
|
|||
|
|
### models/
|
|||
|
|
存放模型文件，包括：
|
|||
|
|
- 预训练基座模型（如 LLaMA、Qwen 等）
|
|||
|
|
- 微调后的自定义模型权重
|
|||
|
|
- 合并后的部署模型
|
|||
|
|
|
|||
|
|
### outputs/
|
|||
|
|
训练任务和推理任务的输出结果，包括：
|
|||
|
|
- 训练过程中的 checkpoint 文件
|
|||
|
|
- 评估结果和指标报告
|
|||
|
|
- 推理生成的结果文本
|
|||
|
|
|
|||
|
|
### logs/compute/
|
|||
|
|
计算服务（compute-api）的运行时日志，用于排查服务启动、GPU 调度、健康检查等问题。
|
|||
|
|
|
|||
|
|
### logs/training/
|
|||
|
|
各训练任务的执行日志，记录训练过程状态、报错信息等，便于追踪单个任务的运行情况。
|