写代码,也写自己
  • 实现导图
  • 手搓 LLM
    • 从零构建大模型连载
      读《从零构建大模型》,把每一层都拆开看
  • 源码图谱
    • 图谱总览专栏
      长期源码阅读地图(规划中)
    • Qwen 源码图谱家族
      Qwen 家族模块级阅读地图
    • DeepSeek 源码图谱家族
      DeepSeek 家族模块级阅读地图
    • 混元源码图谱家族
      混元家族模块级阅读地图
    • Moonshot 源码图谱家族
      Moonshot 家族模块级阅读地图
    • 智谱源码图谱家族
      智谱家族模块级阅读地图
  • AI 随想
  • 工程实践
    • 工程手记专栏
      工程中的判断、取舍与踩坑
    • 生产排查 Skill 诞生记连载
      从排查困境到一个 Skill 的打磨过程
    • 系统扫描 Skill 诞生记连载
      把看懂一个系统变成可复核的流程
  • 读书笔记
  • 归档
  • 关于

标签

按标签浏览文章
  • Activation Checkpointing 1
  • Agent 3
  • AI 15
  • AI-Infra 2
  • AI炒股 1
  • AMP 1
  • Attention 2
  • Bootstrap 1
  • BPB 1
  • BPE 3
  • CLI 1
  • CoT 2
  • CS336 1
  • CUDA 2
  • DataLoader 1
  • DeepSeek 1
  • Diy-Llm 5
  • DPO 2
  • DSpark 1
  • Embedding 1
  • Engram 1
  • Evaluation 1
  • GPT 2
  • GRPO 1
  • I0 1
  • I1 1
  • I2 2
  • I3 1
  • I3番外 1
  • I4 4
  • I5 1
  • KV Cache 2
  • LayerNorm 1
  • LLM 37
  • LLM-as-Judge 3
  • LoRA 3
  • Lvchat 1
  • M5 1
  • M6 1
  • Memmap 1
  • Model_v3 1
  • MoE 1
  • Nanochat 2
  • PyTorch 2
  • Qwen 1
  • Qwen2.5 1
  • Qwen3 1
  • RLVR 1
  • RoPE 1
  • SDPA 1
  • SFT 7
  • Skill 4
  • SSE 1
  • SSH 1
  • Tokenizer 2
  • Torch.compile 2
  • Web UI 1
  • Weight-Space Programming 2
  • WSL2 1
  • 残差流 1
  • 草稿 3
  • 程序员 1
  • 读书笔记 2
  • 多轮对话 1
  • 多模型 1
  • 分类微调 1
  • 工程化 3
  • 后训练 4
  • 回归测试 1
  • 伙伴 3
  • 家庭实验室 1
  • 架构 1
  • 交叉熵 1
  • 可解释性 1
  • 立项 3
  • 量化 1
  • 吕炘嵘 1
  • 面试 1
  • 模型兼容性 1
  • 模型配置 1
  • 模型权重 2
  • 默写 1
  • 脑暴 5
  • 偏好优化 1
  • 评估 1
  • 企业级编程 1
  • 生产排查 2
  • 实验 1
  • 手搓LLM 1
  • 书单 2
  • 数据工程 1
  • 思考 1
  • 思考方式 1
  • 思维链 1
  • 四则运算 1
  • 算力 1
  • 特别篇 1
  • 投机解码 1
  • 推理 1
  • 推理优化 1
  • 系统扫描 2
  • 学习 3
  • 学习笔记 35
  • 学习方法 1
  • 预训练 1
  • 长文 2
  • 职业 2
  • 指令微调 3
  • 重写 1
  • 专用模型 1
  • 资源核算 1
GitHub 邮箱 RSS
© 2026 吕炘嵘的博客 · Powered by Hugo & PaperMod