共 139 篇相关文章

详解如何将散落的自动化脚本整合为本地AI Agent智能中枢。涵盖Function Calling核心机制、Ollama+Qwen2.5本地部署方案、工具编排架构设计及完整落地路线图,适合独立开发者和小团队。

24GB内存Mac Mini运行本地大模型太慢?本文分析14B模型在Mac Mini上慢的原因,推荐适合Home Assistant等场景的3B-8B模型选型方案,并提供Ollama推理速度优化的实用建议。

详解如何用500美元预算搭建多功能家用服务器,涵盖Jellyfin流媒体、Ollama本地AI推理、Web应用托管和Pi-hole广告拦截的硬件选型、双RTX 3060显卡方案及内网穿透部署建议。

深入解析LTX 2.3视频生成模型与ComfyUI节点式工作流的组合方案,涵盖本地部署优势、显存需求、社区生态及实际生成效果评估,帮助创作者快速上手开源AI视频生成。

详解如何用Ollama本地部署大模型,结合Qwen-Agent构建私人AI助手。涵盖RAG知识接入、语音交互、权限隔离等核心技术,提供完整实现路线图,兼顾能力与安全的本地AI Agent架构设计。

哈佛与UIUC团队提出预训练第三条轴线,声称实现6.2倍样本效率提升与250倍生成式AI推理加速。本文深度解析这一新范式的技术内涵、潜在意义及需要审慎对待的关键问题。

深入解析如何从零构建并自托管代码审查AI Agent,涵盖技术架构拆解、上下文管理、模型选型、噪声控制等关键环节,助力团队在保障数据隐私的前提下实现自动化代码审查。

Google Gemini出现身份混乱,自称其他AI模型引发热议。深入解析大语言模型为何会认错身份,训练数据污染如何导致AI幻觉,以及这对AI产品可信度意味着什么。

本地部署大模型在Agent框架中频繁崩溃或卡顿?问题可能出在num_gpu参数设置过高。本文解析num_gpu的真实含义(GPU层卸载而非显卡数量),揭示显存争夺导致KV Cache溢出的机制,并提供实用调优方案。
每日AI新鲜事·07月29日午间版:GPU涨价与存储芯片暴跌
2026年07月29日午间版 AI新闻速递+热点深度讨论

Redis作者antirez开发纯C推理引擎DS4「矮星」,通过不对称量化将DeepSeek V4 Flash从500GB压缩至80.8GB,实现128GB统一内存本地部署,每秒生成26.7个Token。本文深度解析MoE架构优势、三档部署现实与本地大模型的真正门槛。

开发者发现llama.cpp中一个潜藏多年的CUDA精度Bug,仅影响NVIDIA Tesla P100(sm_60架构)。三行代码修复后,KL散度中位数降低约2300倍,首选token一致性从96.5%提升至99.9%,且性能不损反增。本文深入解析Bug根源、测量数据与市场影响。

大模型微调是什么?本文用通俗语言讲清微调的本质原理、适用场景与企业实战路径,帮助零基础开发者理解何时需要微调、微调改变了什么,掌握AI大模型应用开发的完整技能体系。

阿里通义千问Qwen 3 Max深度评测:2.4万亿参数、即将开放权重,八项测试综合得分81.25%高居榜单第二,超越Claude Opus、Kimi K3和GPT-4系列,国产大模型迎来重要突破。

实测对比4张V100 16G原生PCIe与2张V100 32G SXM转接PCIe方案的推理性能。从预处理速度、输出速度到性价比,深度解析多卡堆叠的功耗墙与带宽瓶颈,帮你找到本地大模型部署的最优解。

AI创业公司Prismo宣称将270亿参数模型压缩至4GB,在iPhone 17 Pro上实现全参数本地运行,支持离线复杂对话、代码生成与自主编程代理。本文深度解析其压缩技术原理、与苹果MoE方案的差异,以及端侧AI的真实能力边界。

阿里千问第五代模型Qwen3全面解析:6款Dense与MoE架构模型覆盖0.6B至235B,全球首款开源混合推理模型,旗舰235B性能追平Gemini 2.5 Pro,开发者与企业部署的完整参考指南。

通过MCP协议将本地Zotero文献库与AI大模型连接,彻底解决AI幻觉引用问题。本文详解UV工具链安装、Zotero权限开启、OpenCode客户端配置全流程,配合免费DeepSeek模型,让AI基于真实文献生成可靠学术综述。