深入浅出大语言模型:从”Token模拟器”到”Agentic智能体”的进阶之路
教程视频链接:https://www.youtube.com/watch?v=7xTGNNLPyMI 深入浅出大语言模型:从”Token模拟器”到”Agentic智能体”的进阶之路近期深入学习了前 OpenAI 科学家 Andrej Karpathy 关于大语言模型(LLM,如 ChatGPT)底层原理的详尽拆解 [00:00]。对于致力于探索 Agentic 工作流、本地优先 (Local First) 部署以及跨平台自动化的开发者而言,理清 LLM 是如何从海量无序的文本中诞生,并一步步蜕变为能调用外部工具甚至自主思考的智能体,是极为关键的底层认知。 基于这门课程的核心内容,我将 LLM 的训练生命周期梳理为三大核心阶段:预训练(Pre-training)、监督微调(SFT)与强化学习(RL / RLHF)。 阶段一:预训练 (Pre-training) —— 压缩互联网,打造基座模型这是整个 Pipeline 中算力消耗最为庞大的一环 [01:00:40]。如果把训练 AI 比作教小孩,这个阶段相当于让其通读全世界所有的公开书籍以获取背景知识。 数据采集与清...
MinerU + LlamaIndex + LangChain:构建 PDF 文档问答系统的踩坑记录
MinerU + LlamaIndex + LangChain:构建 PDF 文档问答系统的踩坑记录项目简介本文记录如何使用 MinerU(PDF 转 Markdown)、LlamaIndex(文档索引与检索)和 LangChain(问答链编排)搭建一个小型文档问答系统。完整流程如下: 123456本地 PDF (pcm5102a.pdf, 44页) → MinerU Flash API → Markdown 文本 (56k 字符) → LlamaIndex MarkdownNodeParser → 37 个语义节点 → HuggingFaceEmbedding (bge-small-zh-v1.5) → VectorStoreIndex → 自定义 LangChain Retriever → RetrievalQA + DeepSeek V4 → 中文回答 测试问题:“这个芯片的工作电压范围是多少” 环境依赖12pip install mineru-open-sdk llama-index llama-index-embed...
重新审视 LangChain:从黑盒重构走向 LCEL 与 LangGraph 的现代化演进
2026年重新审视 LangChain:从黑盒重构走向 LCEL 与 LangGraph 的现代化演进💡 引言:大模型应用的“范式转变”如果对 LangChain 的认知还停留在旧教程里的 LLMChain、ConversationBufferMemory 或是满屏幕飞舞的 format_instructions,那么在面对生产级项目时,极易陷入底层黑盒难调试、并发性能差、逻辑无法精细控制的泥潭。 大模型应用开发正经历一场颠覆性的范式转变:全面抛弃硬编码的黑盒组件,转向高度透明、流式友好的 LCEL(声明式编程)和 LangGraph(图智能体架构)。 以下是对现代 LangChain 核心演进与底层机制的深度复盘日志。 一、 重新理解大模型与工具(Tool Use)的边界在构建 Agent 时,一个最底层的误区是:大模型自己去运行了工具函数。 1. 思考与执行的解耦 大模型(脑):只负责决策与表达意图。它在训练中被注入了工具调用的能力,但它没有手和脚,既不能联网,也不能操作数据库。 Agent 框架(手脚):负责脏活累活与真实执行。 2. 底层交互机制:函数内省与 JSO...
技术日志:折腾 Hexo + Netlify 踩坑与全自动化部署记
2026年6月22日 夜 宜:推代码、码字 今天终于把个人博客的底层架构给彻底落实了。对比了半天各种静态生成器和动态 CMS,最后还是决定用基于 Node.js 的 Hexo,配合 Markdown 写作最契合我的习惯。 踩坑记录刚开工就在 Mac 上踩了 npm 全局变量的经典老坑。全局安装完 hexo-cli 居然提示找不到 hexo 命令,好在直接用 npx 守护运行或者去 .zshrc 补上环境变量就能轻松搞定。中间执行 npm install 时还被 npm fund 的那几行滚动提示虚惊了一场,后来才知道那纯粹是开源作者的”赞助广告”,依赖早就稳稳安好了。 现代化 CI/CD 工作流为了后续写得省心,这次直接搭了一套非常优雅的自动化流程: 源码隐私:果断在 GitHub 开了 Private(私人)仓库。未发布的草稿、站点配置文件还是藏起来最安全。 云端自动化:直接绑定了 Netlify。彻底告别了本地手动打包上传的老姿势。以后只要本地一推代码,云端自动悄悄抓取并编译,1分钟内全自动上线。 域名与解析:把手里的阿里域名拿出来派上用场。为了不和未来的其他系统...
网站上线测试公告
网站正式上线啦!这是我的个人博客,本篇文章是第一篇测试公告。 部署信息 托管平台:Netlify 静态生成器:Hexo 部署状态:✅ 工作流测试通过 如果你能看到这篇文章,说明整个部署流程已经跑通了:从本地编写 Markdown → Hexo 生成静态文件 → Git 推送 → Netlify 自动构建部署,全部正常工作。 后续计划博客会持续更新技术笔记、项目总结和生活随笔,敬请期待。