#LLM工程
共 4 篇相关文章

·8 分钟
构建多模型故障转移路由:打造零停机AI工作流
如何用 n8n 和 Python 构建多模型故障转移路由,实现零停机 AI 工作流。覆盖四种故障模式、优先级列表、冷却机制与输出校验器的完整实现,附代码示例与常见踩坑指南。
阅读全文 →

·9 分钟
流式中断不是免费重试:用游标断点续写省下重复token成本
LLM流式请求被中断后重发整个prompt等于重复付费。本文介绍一种轻量运维习惯:用token游标断点续写,中断后只续写剩余部分,并区分输入与输出成本、幂等副作用及适用边界,有效避免重复token开销。
阅读全文 →

·9 分钟
构建带人工审批的客服邮件分流AI Agent实战
手把手教你用 Node.js 构建带人工审批的客服邮件分流 AI Agent:让模型只负责分类起草、执行器只运行已批准操作,通过审批队列、幂等键和陈旧检查守住退款、改账户等不可逆操作的安全底线。
阅读全文 →

·9 分钟
构建更可靠的RAG系统:检索优化的四大核心杠杆
深入解析构建生产级RAG系统的四大核心杠杆:检索前后处理、文档分块、嵌入与向量库调优、以及效果评估。涵盖查询改写、HyDE、重排序、混合检索等实用工程技巧。
阅读全文 →