机器学习学习路线图

从认知地基到前沿突破,一条可执行的自学路径。
覆盖理论根基、算法体系、大模型全栈、工程落地与产业战略视野。

🎯 6 个阶段 📚 30+ 主题模块 🕐 建议周期 6-12 月 🔬 每月精读 1 篇顶会论文

📊 学习进度

计划中 学习中 已完成

🧭 入门导航:先看清全貌再出发

开始系统学习前,先破除偏见、了解赛道、确立方向。这些内容帮你回答"我适合走哪条路"。

🔨 打破天才神话:普通人的 AI 之路

诚实面对智商差距 + 四大突围路径 + 人生发现阶段指南 + 全岗位薪资/强度/环境真实数据。AI 行业 90% 岗位不需要天才。

必读 职业生涯 📖 详解

📚 AI 教育选专业指南

全量认知地图法 + 高中三年行动计划 + 大学双轨详解(研究路线 vs 应用路线)。含选科建议、暑假规划、自问清单、院校推荐。

必读 教育规划 📖 详解

🌐 AI 的真相与未来:从泡沫到落地

四层产业共识:算力瓶颈与泡沫本质、企业落地性价比、传统软件为何不会被取代、人才与教育方向。穿越幻想回归 ROI。

必读 产业思考 📖 详解
🏆 竞赛赛道指南(可选,面向初高中学生)

💻 NOI 竞赛路线指南:信息学奥赛

竞赛金字塔(CSP→NOIP→省选→NOI→IOI)、训练时间线、核心算法技能体系、NOI→AI 能力转化对照表。

信息学竞赛 📖 详解

🤖 机器人竞赛路线指南:从搭建到智能

FRC/VEX/RoboMaster 三大赛事对比、机械+电子+编程三合一体技能体系、NOI vs 机器人终极对比。

机器人竞赛 📖 详解

认知地基 · 建立正确的 AI 世界观

破除技术黑箱,理解底层原理,站对位置再出发

🧠 AI ⊇ 机器学习 ⊇ 深度学习

厘清包含关系是入门第一课。AI 是大愿景,ML 是实现路径,DL 是当前最有效的一类 ML 方法。包含 5 篇深度子页面:AI完整版图、ML范式革命、DL奥秘、三代对照、决策框架。

必学 核心概念 📖 详解

⚙️ 大模型不是黑箱

参数 → 自回归 → Token → 概率。大模型本质是"文字接龙"——基于上文语境,通过数学公式计算概率,精准预测并输出下一个 Token。

必学 底层认知

GPU vs CPU:算力的底层逻辑

为什么 GPU 是大模型的命根子?CPU = 一个数学天才一次做一道,GPU = 一千个小学生同时做一千道。理解并行矩阵乘法的核心地位。

必学 硬件基础 📖 详解

🎛️ 模型参数:AI 大脑里的旋钮

每个参数是一个可调整的小数(如 -0.847、0.003)。7B 模型有 70 亿个这样的旋钮。从 FP32 到 INT4 量化,理解参数如何存储与优化。

必学 基础概念 📖 详解

📐 能力密度 vs 参数量暴力堆砌

现代 AI 竞争早已脱离单纯"参数量堆砌"。行业共识转向"能力密度"——通过算法优化让每一个参数蕴含更高的智慧与效率。

行业认知

🗺️ ML 知识体系思维导图

一张图看懂机器学习全貌:监督/无监督/强化学习、传统算法、深度网络、前沿分支的完整版图与概念索引。

推荐 全景地图 📖 详解

经典机器学习 · AI 大厦的核心地基

数据、模型、算力的底层三角,掌握监督/无监督学习核心范式

📦 数据、模型、算力:底层三角关系

数据是燃料,模型是引擎,算力是跑道。理解三者的相互制约和协同关系,是所有 ML 工程决策的出发点。

必学 基础理论

📈 回归家族:从线性到逻辑

线性回归 → 逻辑回归。从预测连续值到判断概率,理解"从回归到分类的思维跃迁"中损失函数的关键角色。

必学 核心算法

🌳 树模型的演义

决策树 → 随机森林 → XGBoost。从一棵树到一片森林,再到极致工程优化的梯度提升。理解 Bagging 与 Boosting 的核心思想。

必学 核心算法

📏 SVM:最大间隔的几何之美

支持向量机的数学直觉:在高维空间中找到最优分类超平面。核技巧的优雅与威力。

核心算法

🎯 距离的三种用法:KNN / K-Means / DBSCAN

最近邻分类、均值聚类、密度聚类——同一个"距离"概念,三种截然不同的应用范式。

核心算法

🔧 特征工程:数据到智慧的桥梁

归一化、标准化、类别编码、特征交叉。降维视角:PCA 的方差最大化,t-SNE 的可视化魔力。

必学 工程实践

✅ 模型评估:不只是准确率

交叉验证、混淆矩阵、ROC/AUC、精确率与召回率。过拟合的诊断与正则化治疗(L1/L2/ElasticNet)。

必学 方法论

🛠 Scikit-learn 实战流水线

Pipeline + ColumnTransformer,构建可复用的端到端 ML 工作流。从数据预处理到模型部署的一条龙自动化。

动手实践

深度学习 · 神经网络与架构创新

从反向传播到 Transformer,理解现代 AI 的算法引擎

🧬 神经网络本质

前向传播的层层变换、反向传播的链式法则、梯度下降三种变体(SGD / Momentum / Adam)。激活函数为何必须非线性。

必学 核心理论

👁 CNN:卷积的视觉直觉

卷积核就是"模式探测器"——边缘→纹理→部件→对象。经典架构:LeNet → ResNet 残差飞跃 → EfficientNet 效率哲学。

核心架构

📜 序列建模的进化:RNN → LSTM → GRU

循环神经网络的记忆困境,门控机制的优雅解决方案。理解为什么 RNN 最终被 Transformer 取代。

核心架构

Transformer:开启革命的架构

Self-Attention 直觉、Multi-Head 分工、Positional Encoding。从"Attention Is All You Need"开始的范式转移——RNN 是排队发言,Transformer 是同时举牌打分。

必学 核心架构 📖 详解

🔀 MoE 架构:算法驱动效能

混合专家模型——"以数学补物理"的关键技术。稀疏激活让参数规模暴涨的同时计算成本可控。中美在 MoE 路线上各有千秋。

前沿架构 中国路径

🎨 生成模型三剑客

GAN 的博弈之美(生成器 vs 判别器)、VAE 的隐空间优雅、Diffusion 的渐进生成哲学——从随机噪声到逼真图像的一步步去噪。

生成模型

🏋️ 训练技巧工具箱

学习率调度(Warmup + Cosine)、BatchNorm vs LayerNorm 适用场景、Dropout 的集成学习视角、迁移学习的实践智慧。

必学 工程实践

大模型与前沿 · LLM 全景技术栈

从 Tokenizer 到 RLHF,从 RAG 到 Agent,完整理解现代大模型

🧩 LLM 完整技术栈

Tokenizer(BPE/SentencePiece)→ Embedding(词向量到上下文)→ Transformer 层叠 → RLHF / DPO(对齐)。每环节的设计决策都影响最终能力。

必学 核心技术

🏗️ LLM 训练全流程

从裸数据到 AI 助手的完整管线。预训练(Tokenization → 数据处理 → Scaling Laws → 成本估算)+ 后训练(SFT → RLHF/PPO → DPO)。基于斯坦福 CS 讲座内容深度扩展。

必学 核心技术 📖 详解

🎙️ LLM 训练讲座精读

跟随讲者原话走进 LLM 训练管线。保留即兴问答、精妙比喻和独特洞察(BPE 彩色演示、SFT 幻觉假说、数据净化七步)。每段附扩展解读。

推荐 讲座精读 📖 详解

CTM 连续思维机器深度分析

Transformer 论文原作者 Llion Jones 提出的新架构:把时间还给神经元。技术原理、硬件困境、地缘格局、中国布局——一场可能重构 AI 产业价值链的范式颠覆。

前沿分析 范式转移 📖 详解

📐 AI ⊇ ML ⊇ DL 认知地基专题

5 篇深度子页面:AI完整版图、ML范式革命、DL奥秘、三代实战对照、ML vs DL决策框架。建议在深入 LLM 前完成。

推荐 认知地基 📖 详解

🔍 RAG:检索增强生成

给 LLM 装上"外部记忆"。向量数据库 + 语义检索 + 上下文注入。解决幻觉问题的最实用方案。含完整架构图与代码示例。

应用技术 📖 详解

🤖 Agent 与工具调用

从"问答机"到"能干活的助手"。Function Calling、ReAct 模式、多 Agent 协作。OpenClaw 本身就是学习 Agent 架构的最佳样本。

前沿应用

🌐 多模态:视觉与语言的统一

CLIP 的对齐魔法、GPT-4V 原理推断、文生图/文生视频技术栈。图像和文本在同一个语义空间中的相遇。

前沿架构

✍️ 提示工程实战

Few-shot / Chain-of-Thought / 结构化 Prompt / System Prompt 设计。把模型从"随便回答"调教成"精准输出"。提示工程是每个 AI 从业者的基本功。

必学 应用技巧

📊 LLM 评估体系

MMLU、HumanEval、Chatbot Arena Elo、GSM8K 等主流基准。理解评估指标背后的设计哲学与局限性。知彼知己,百战不殆。

必学 评估方法

🧪 微调方法对比:LoRA / QLoRA / Full Fine-tune

全量微调 vs 参数高效微调(PEFT)的取舍。LoRA 低秩分解原理、QLoRA 量化加速、实际场景中的选型决策。

必学 训练技术

📊 中美差距:2.7% 意味着什么

顶尖模型综合评分差距已缩至微小。国产模型在长程任务、硬核编程等赛道实现单点反超。ICLR/NeurIPS Oral 论文占比仍是差距指标。

产业格局

📄 论文精读能力

ArXiv 速览 → 摘要筛选 → 方法精读 → 实验复现。追踪 ICLR / NeurIPS / ICML / ACL。每月精读 1 篇,建立"论文嗅觉"。

研究方法 贯穿全程

工程落地 · 从实验室到生产环境

推理优化、模型服务化、数据管道、存储工具链与 MLOps 全流程

🚀 推理优化:从实验室到生产

量化(INT8/INT4/GGUF)、vLLM 的 PagedAttention、投机采样、Flash Attention。让大模型在消费级硬件上也能跑起来。

必学 工程部署

🏗 模型服务化

FastAPI + Docker 部署推理服务。批处理优化、请求队列、负载均衡。把训练好的模型变成可调用的 API。

工程实践

🔄 MLOps 全生命周期

实验追踪(MLflow/W&B)→ 模型注册 → CI/CD 流水线 → A/B 测试 → 线上监控与告警。机器学习工程化的完整闭环。

必学 工程实践

📡 数据管道构建

数据采集、清洗、标注到特征存储。Garbage In, Garbage Out 的永恒真理——数据的质比量更重要。

工程实践

🗂️ Qdrant 向量数据库

轻量高性能,Rust 编写,Docker 一行部署。向量分片、过滤、降噪去重。含 Python 代码示例。RAG 项目首选向量存储。

工具链 📖 详解

🕸️ Neo4j 图数据库

节点+关系+属性,储存逻辑脉络而非数据罗列。Cypher 查询 + 知识图谱。多跳查询毫秒级响应。

工具链 📖 详解

⚖️ 向量库 vs 图库 全方位对比

向量库做"像不像",图库做"通不通"。普通 RAG 只需向量库,高阶智能需两者联动。含三维决策指南。

推荐 决策对比 📖 详解

🔬 端到端项目实战

选一个你关心的领域(教育/自动驾驶/内容生成/A股量化),走完数据→训练→评估→部署完整闭环。代码比笔记更诚实。

必做 项目实战

跨界融合与未来视野 · 人工智能+

跨学科融合、治理伦理、教育生态、开源共同体——AI 人才的宏观格局

🔗 "人工智能+" 交叉融合

国家推动 AI 与产业、文化、民生深度融合。AI + 教育、AI + 医疗、AI + 金融、AI + 制造——跨学科视角是未来 AI 人才的核心竞争力。

国家战略

🛡 安全、对齐与伦理

RLHF/DPO 的对齐原理、红队测试、越狱攻防、数据隐私保护、算法偏见治理、生成内容合规。技术狂奔的同时必须筑牢伦理屏障。

必备素养

⚖️ AI 治理与法规

中国《生成式 AI 管理办法》、欧盟 AI Act、美国行政令。理解各国监管思路的差异与产业影响。合规是 AI 产品的生命线。

法规意识

🏫 全学段一体化教育

"师—生—机—环"四元互动的教学生态。理解 AI 教育从基础教育到高等教育的贯通设计,把握时代趋势。

教育视角

🌍 开源生态与社区

HuggingFace / GitHub / ModelScope 的开源力量。理解开源对 AI 发展的推动作用,学会参与和贡献。一个人的力量有限,社区的力量无穷。

开源协作

🧭 持续学习路线

AI 领域半年一大变。如何建立信息渠道(Twitter/X、Reddit r/ML、ArXiv、公众号)、保持技术敏感度、规划下一步学习方向。

学习策略

🔄 贯穿全程的修行

📄

论文阅读

每月精读 1 篇顶会论文
从读懂到复现

🔬

动手项目

每阶段 1 个完整项目
代码比笔记更诚实

📝

每周复盘

本周学了什么
卡在哪里 下周计划

🌐

分享输出

费曼学习法
教别人是最好的学

← 返回晨星俱乐部