CSGHub v1.6.0 带来了多项核心功能升级与性能优化,显著增强了对大模型推理、微调、评估等流程的支持,并进一步完善了推理服务与用户交互体验。
插件化推理与训练引擎框架
推理、微调和评估引擎现已全面模块化,支持通过配置文件灵活接入多种引擎(如 vLLM、TGI、Slang、Llama Factory、Swift 等),用户可根据需求自由拓展。
新增 Model Control Protocol (MCP) 应用空间
新增的 MCP 应用空间 使部署和管理 MCP 服务变得更便捷,支持多模型、多后端的统一控制与分发。
全新上线 AI Gateway 服务
推出 AI Gateway 网关服务 ,可无缝连接 CSGHub 上的无服务(serverless)与专属推理服务节点,现已支持聊天功能,后续将集成 Embedding 与外部工具能力。
Space Docker 构建器正式开源
CSGHub Runner 服务现已内置开源的 Space Docker 镜像构建器 ,便于用户定制和构建 AI 应用运行环境。
️ Inference Playground 新增图文混合生成支持
支持 图像-文本到文本(image-text-to-text) 的推理任务,进一步拓展多模态 AI 应用能力。
直达链接
https://github.com/OpenCSGs/CSG