Compare commits
10 Commits
6f599a8a23
...
85f41bba58
| Author | SHA1 | Date | |
|---|---|---|---|
| 85f41bba58 | |||
| d6b0e416db | |||
| 4dcfed6b6d | |||
| 1e8cfacd8e | |||
| d6cca90496 | |||
| 031e0dc7a8 | |||
| af6f501a5a | |||
| 94da35d152 | |||
| 5b92f129d2 | |||
| 87d4ae1c18 |
2
.gitignore
vendored
Normal file
2
.gitignore
vendored
Normal file
@@ -0,0 +1,2 @@
|
||||
.DS_Store
|
||||
__pycache__/
|
||||
@@ -1,11 +1,7 @@
|
||||
FROM modelhubxc-4pd.tencentcloudcr.com/xc_agent_platform/python:3.11-slim
|
||||
|
||||
ENV PYTHONUNBUFFERED=1 \
|
||||
USER_ACCOUNT="zhoushasha@4paradigm.com" \
|
||||
USER_PASSWORD="4pdpassword" \
|
||||
CONTEST_API_TOKEN="ef1ef82f3c9efee413d602345fbe224d" \
|
||||
CONTRIBUTORS="zhoushasha" \
|
||||
GPU_TYPE="Cambricon_mlu-370-x8"
|
||||
ENV PYTHONUNBUFFERED=1
|
||||
|
||||
|
||||
WORKDIR /app
|
||||
|
||||
|
||||
32
README.md
32
README.md
@@ -1,5 +1,31 @@
|
||||
# xc_validation_strategy
|
||||
# xc_validation_strategy_gguf
|
||||
|
||||
信创自动化模型适配平台 — 验证策略服务
|
||||
GGUF 模型下载 + 验证任务提交流水线策略服务:批量创建 GGUF 模型下载任务(最大并发 8),
|
||||
每个模型下载成功后立即提交 hygon / bi150 两个验证任务,之后保持 HTTP 服务存活供平台探活。
|
||||
|
||||
从 HuggingFace 周期性抓取新模型,自动完成同步、下载、提交验证任务的全流程,常驻运行在 xc_agent_platform 上。
|
||||
## 功能
|
||||
|
||||
- 自动登录 ModelHub 获取 Token(失败时回退到预设 Token)
|
||||
- 按流水线批量创建 GGUF 模型下载任务(HuggingFace 源,最大并发 8)
|
||||
- 每个模型下载成功后,立即提交 hygon_k100-ai 与 Iluvatar_bi-150 两个验证任务(llamacpp 框架)
|
||||
- 下载成功的模型 ID 写入 `downloaded_success_models.txt`
|
||||
- 暴露 `/health` 和 `/status` 接口满足平台运行时契约
|
||||
|
||||
## 项目结构
|
||||
|
||||
```
|
||||
.
|
||||
├── main.py # 主入口:HTTP 服务 + 下载/提交流水线
|
||||
├── Dockerfile # 平台镜像构建配置
|
||||
├── requirements.txt # Python 依赖
|
||||
└── downloaded_success_models.txt # 运行后自动生成,记录下载成功的模型
|
||||
```
|
||||
|
||||
## 平台契约说明
|
||||
|
||||
本项目满足平台对策略镜像的全部必要约束:
|
||||
|
||||
- Dockerfile 位于仓库根目录,基于官方轻量基础镜像
|
||||
- 暴露 8080 端口并实现 `GET /health`
|
||||
- 通过环境变量 `STRATEGY_ID` 获取策略 ID
|
||||
- 正确处理 `SIGTERM` 信号,支持优雅停机
|
||||
|
||||
Reference in New Issue
Block a user