1. 项目缘起为什么我要从零开始搭 AI 工程“ai-engineering-from-scratch”这个项目名一眼就能看出它的核心主张——不依赖现成的机器学习平台不套用封装好的训练框架而是把 AI 工程化的整条链路从数据管道到模型服务一点一点亲手搭建起来。我最初接触 AI 工程时走的其实是另一条路用现成的框架写好配置文件调一调超参数模型就训练起来了。表面看很顺利但一旦遇到问题就抓瞎。模型不收敛不知道去哪排查推理延迟高不晓得瓶颈在哪数据分布变了也毫无感知。说白了工具太便利反而把底层逻辑给藏住了。所以这个项目我给自己定了一条规矩核心链路全手写。数据处理自己写管道模型结构自己搭训练循环自己实现服务部署自己设计。不是否定现有框架的价值而是先搞清楚每一层在做什么再决定要不要用工具。这个项目适合两类人。一类是刚入行的算法工程师想弄清楚训练框架
1. 项目缘起为什么我要从零开始搭 AI 工程“ai-engineering-from-scratch”这个项目名一眼就能看出它的核心主张——不依赖现成的机器学习平台不套用封装好的训练框架而是把 AI 工程化的整条链路从数据管道到模型服务一点一点亲手搭建起来。我最初接触 AI 工程时走的其实是另一条路用现成的框架写好配置文件调一调超参数模型就训练起来了。表面看很顺利但一旦遇到问题就抓瞎。模型不收敛不知道去哪排查推理延迟高不晓得瓶颈在哪数据分布变了也毫无感知。说白了工具太便利反而把底层逻辑给藏住了。所以这个项目我给自己定了一条规矩核心链路全手写。数据处理自己写管道模型结构自己搭训练循环自己实现服务部署自己设计。不是否定现有框架的价值而是先搞清楚每一层在做什么再决定要不要用工具。这个项目适合两类人。一类是刚入行的算法工程师想弄清楚训练框架
