全文目录
本知识库分 7 个主段(外加本索引段)。下列为各段全部文档。
01-架构原理
- CubeStudio 平台简介与整体架构
- 商业版与开源版功能清单
- 平台架构 - Kubernetes 基础与 CRD
- 基础组件介绍(命名空间、开源软件版本与依赖)
- 平台架构 - ML 任务流(Pipeline 编排)
- 平台架构 - 分布式训练与加速
- 平台架构 - 推理服务
- 算力统筹与分布式存储
- 流量代理与网关
- RDMA 网络与分布式训练
- Prometheus 与 Operator 架构
- 机器与容器监控(node-exporter / kubelet / dashboard)
- 入口流量与三方中间件监控
- 自定义指标与自研 pushgateway
- ServiceMonitor 配置与调试
- 告警(Alertmanager)与 Grafana 可视化
- 监控体系总览(Prometheus + Grafana)
02-部署安装
- 部署安装总览(部署方式选择指南)
- 部署后初步验证(pipeline/notebook/推理/超参/AIHUB/数据智能/标注)
- 平台版本升级(老版本升级到新版本)
- NVIDIA vGPU 切分虚拟化(HAMi)
- 昇腾 NPU 基础部署(驱动 / 运行时 / k8s 插件 / 监控)
- 昇腾 vNPU 虚拟化(静态切分)
- 昇腾 MindIE 多机分布式推理
- 华为昇腾 NPU 适配总览
- 国产GPU/NPU 与 ARM64 适配总览
- 壁仞 GPU 适配(biren:驱动 + k8s 组件 + 占用测试)
- 寒武纪 MLU 适配(Cambricon)
- 摩尔线程 GPU 适配(mthreads / MUSA)
- 昆仑芯 XPU 适配(百度昆仑芯)
- 沐曦 GPU 适配(C500:驱动 + device plugin + mx-exporter)
- 海光 DCU 适配(驱动 + k8s device plugin + vDCU 虚拟化)- NFS 共享存储部署- 替换基础组件与镜像(对接自有 istio/prometheus/minio/mysql 等)
- FRP 内网穿透(把内网 CubeStudio 暴露到公网)
- RDMA 高速网络部署(InfiniBand / RoCE / Mellanox)
- GPU 节点接入与初始化
- Jetson 边缘 GPU 节点初始化
- 节点安装 Containerd 容器运行时
- 节点安装 Docker
- RKE2 + Rancher 方式部署 K8s 集群
- Windows 部署 CubeStudio(WSL2)
- k3s 单机部署 CubeStudio
- kubeadm 安装 k8s 组件
- KubeKey 环境准备与安装 k8s
- 在 KubeKey k8s 上部署 cube-studio
- KubeKey 离线部署 k8s
- KubeKey 节点扩缩容、高可用与卸载
- KubeKey 部署 CubeStudio 总览
- KubeSphere 多机部署(一)主机环境初始化与系统优化
- KubeSphere 多机部署(二)安装 KubeSphere 与 K8s 集群
- KubeSphere 多机部署(三)在集群上部署 cube-studio
- KubeSphere 多机部署 CubeStudio(概览)
- Rancher RKE 机器初始化与镜像准备
- 部署 Rancher Server 与 K8s 集群
- Rancher 运维与故障处理
- Rancher 扩容、多用户、节点清理与重建迁移
- Rancher + RKE 部署 K8s 集群总览- 单机 k8s 部署(rancher / 已有 k8s / 隔离内网)
- docker-compose 本地部署(前后端 + mysql + redis)
- 本地开发与调试(IDE 断点 / 前端构建 / 镜像升级 / Q&A)
- 单机部署与 docker-compose 部署(概览)
- 多机/多集群/多资源组部署
- 离线/内网部署
- 边缘集群部署 - 原理与适用场景
- 边缘集群部署 - 一键脚本(install/kubernetes/kubeedge)
- 边缘集群部署 - 云端环境准备(K8s + NFS)
- 边缘集群部署 - 云端部署 CubeStudio 与 CloudCore
- 边缘集群部署 - 边缘节点接入与项目组配置
- 边缘集群部署 - 端到端验证与最大坑(label 硬编码)
- 边缘集群部署 - 踩坑速查与版本命令
- 边缘集群部署(KubeEdge 云-边)概览
- 部署总览与前置要求
03-平台使用
- 新人指南-基础认识与视频教程
- 新人指南-加入项目组与权限
- 新人指南-在线 notebook 开发
- 新人指南-在线构建镜像
- 新人指南-pipeline 配置/调试/定时运行
- 新人指南-NNI 超参搜索
- 新人指南-内部服务
- 新人指南-推理服务
- 新人用户使用指南(总览与目录)
- 用户和角色(权限体系)
- 项目空间(项目组)使用与权限
- 存储资源配置
- 整体资源(全局资源视角与 Pod 管理)
- 机器/算力租赁(rental)
- 机器资源配置
- cube-studio Python SDK 使用
- 在 Notebook 镜像中部署本地大模型版 Claude Code
- 在线 IDE(Notebook / VSCode / RStudio / Matlab)
- 手动安装 Hadoop 生态:Spark 配置与测试
- 手动安装 Hadoop 生态:Flink 配置与测试
- 基于 Dockerfile 的 Hadoop 生态集成镜像(bigdata)
- Hadoop 生态对接:其他辅助文档
- 本地 Jupyter 对接 Hadoop 生态(总览)
- 镜像仓库(凭据管理与拉取/推送策略)
- 镜像在线构建和管理
- SQLLab 在线数据库查询
- 库表(离线元数据库表管理)
- 指标(数据资产指标管理)
- 数据 ETL 任务流
- 数据集导入与管理
- 维表(维度表资产)使用
- 任务可视化 echart 数据格式说明
- 任务流(Pipeline)编排与调度
- NNI 超参搜索
- 内部服务(数据库 Web 管理端 / 桌面等)
- 推理服务 ml-server(sklearn / xgboost / R-pmml)
- 推理服务 TFServing(TensorFlow Serving)
- TorchServe 推理服务
- Triton 推理服务
- 推理服务 - 大模型(LLM)推理(vllm / ollama / mindie / triton-llm)
- 大模型 OpenAI 服务网关
- 模型管理与推理服务
- 标注平台功能介绍与操作流程
- 标注平台数据导入格式说明
- 标注平台 - 内置 LLM 自动标注后端接入
- 标注平台总览
- AIHUB 模型市场使用指南
- 私有知识库使用说明
- 计量计费与资源账单
- 03-平台使用 段导航(按上手路径)
04-运维管理
- 运维注意事项与通用约定
- 管理员操作指南
- 平台配置文件管理(config.py / entrypoint.sh / project.py / kubeconfig)
- CubeStudio 端口使用情况
- 平台元数据库配置(MySQL / PostgreSQL)
- 分布式存储目录结构(/data/k8s)
- 私有镜像仓库 Harbor 安装
- Redis 哨兵模式部署与故障切换验证
- 达梦数据库(DM8)部署与 MySQL 迁移
- 认证与单点登录(SSO)配置
- 平台 HTTPS 配置(istio gateway / nginx 代理 / 自签证书)
- 加密与安全加固(交付加固清单 + containerd 镜像加密)
- 多租户隔离(ENABLE_MULTI_TENANT)
- 平台定时任务与自动清理(Celery beat)
- 监控部署与看板(Prometheus + Grafana)
- 监控指标推送与报警代理(cloud-pushgateway)
- 故障恢复 - Rancher RKE 集群时间回拨
- 常见问题 FAQ
05-任务模板
- 任务模板/算子总览索引
- 数据导入导出类任务模板(datax / dataset / model-download / label-studio-import)
- 数据处理类任务模板(data-process / hadoop / spark / ray / volcano / nlp-process / feature-process)
- 机器学习任务模板(sklearn 算法族 / ray-sklearn 分布式)
- 深度学习分布式训练任务模板(TF / PyTorch / 多框架)
- 大模型任务模板(训练 / 蒸馏 / 剪枝 / 量化 / 评测)
- 模型服务化任务模板(转换/注册/部署/评估/离线推理)
- 多媒体/CV/语音任务模板(视频音频/图像/语音/YOLO/OCR)
- 超参搜索任务模板(NNI / Ray Tune)
- 开发并注册新任务模板
- 基础命令模板(自定义镜像/逻辑节点/python 节点)
- 数据导入导出模板(datax/dataset/label-studio/model-download)
- 数据处理模板(hadoop/volcanojob/ray/sparkjob)
- 数据预处理模板(去重/缺失/单一值/填充/统计量/异常值)
- 特征处理模板(离散化/标准化/采样/降维/拆分/转换/编码/索引/排序/SQL/合并/特征重要性/特征组合/相关性)
- 机器学习算法模板(RF/LR/LightGBM/KNN/KMeans/GBDT/决策树/贝叶斯/XGB/AdaBoost/超参搜索/AR/ARIMA/回归)
- 深度学习分布式训练模板(tfjob/pytorchjob/mxnet/paddlejob/mindspore)
- 模型处理模板(model-evaluation 模型评估 / model-convert 模型转换)
- 模型服务化模板(离线推理/服务部署/模型注册)
- 多媒体类模板(媒体下载/视频抽帧/视频提音频)
- 分布式加速模板(horovod)
- 任务模板使用手册(总览)
06-二次开发
- 代码结构与模块地图
- FAB 后端开发框架(Flask-AppBuilder)
- 新增视图页面与数据库升级
- 更换 Logo 与水印
- 弹窗报警与提醒格式(前端协议)
- 登录认证与消息推送扩展
- 推理服务 JWT 认证(统一鉴权)
- AIHub 算法应用开发
- LabelStudio 标注平台二次开发
- GPT 知识库实现原理(RAG / llama_index)
- SQLLab 计算引擎对接(二次开发)
- 数据 ETL 调度引擎对接(二次开发)
- API 接口总览(路由前缀 + 特殊接口索引)
- 数据集预览/详情渲染协议
- 标准化接口-通用约定与 $view 路径对照表
- 标准化接口-标准 CRUD(_info/list/show/add/edit/delete)
- 标准化接口-操作/图表/收藏(action/multi_action/echart/favorite)
- 标准化接口-文件上传下载(download_template/upload/download/upload_files)
- 标准化接口-Python 客户端调用示例
- 标准化接口(MyappModelRestApi 基类)概览
- 标准化接口参数详情-项目与权限
- 标准化接口参数详情-资源计费与日志
- 标准化接口参数详情-数据治理
- 标准化接口参数详情-镜像与 notebook
- 标准化接口参数详情-数据开发
- 标准化接口参数详情-训练
- 标准化接口参数详情-模型与服务
- 标准化接口参数详情-aihub 与智能体
- 标准化接口参数详情(各模型字段)概览
- 特殊接口 - 平台基础(导航/用户/项目组/审批)
- 特殊接口 - 镜像与开发环境(镜像构建/Notebook/Docker)
- 特殊接口 - 训练任务流(Pipeline/固化/Task/Workflow/NNI)
- 特殊接口 - 数据开发任务流(ETL/运行实例/服务化任务流)
- 特殊接口 - 模型与服务(模型定义/训练模型/推理服务/内部服务/AIHub)
- 特殊接口 - 智能体与对话(aitalk/钉钉/微信/企业微信/LLM网关)
- 特殊接口 - 数据治理(数据集/维表/血缘/LabelStudio/SQL查询)
- 特殊接口 - 运维系统(消息/K8s/仪表盘/账单/整体资源)
- 特殊接口详情(非标准 CRUD)总览
- 菜单与导航接口(/myapp/menu 与 navbar)
- 通用血缘链路接口(通用关系图 commonRelation 与 /blood 数据血缘)
- 数据库结构 - 权限与用户
- 数据库结构 - 项目计费与账户
- 数据库结构 - 数据治理
- 数据库结构 - 镜像与开发环境
- 数据库结构 - 数据开发 ETL
- 数据库结构 - 训练任务流与分布式训练
- 数据库结构 - 模型与服务
- 数据库结构 - 智能体与系统
- 数据库结构总览
- Windows 桌面容器镜像(KVM)
- 数据分析运行镜像与算子开发(data-analysis runner)
- 自定义 Notebook 镜像构建
- 镜像构建总览