跳到正文
原文
AIbase· AI Base·· 19 天前AI 评分58

开源本地大模型运行工具 Strata 0.2 发布:硬件门槛降至 27.6GB,新增图形界面

开源工具 Strata 0.2 重磅发布:硬件门槛再降 16GB,本地流畅跑千亿大模型

AI 摘要

开源本地大模型运行工具 Strata 发布 0.2.0 测试版,内存与显存合计最低 27.6GB 即可运行本地大模型,并新增独立图形界面。硬件要求整体降低 8GB 到 16GB:IQ2_XS 推荐档从 48GB 降至 40GB,IQ3_XXS 档从 64GB 降至 48GB,12GB 显存显卡搭配 20GB 系统内存即可满足最低部署。

正文 · 中文整理稿

开源本地 AI 大模型运行工具 Strata 迎来了 0.2.0 测试版的重磅更新。作为一款致力于让普通家用电脑流畅运行 Qwen3.8-Flash-Next、Qwen3.6-35B-A3B 等大语言模型的开源利器,Strata 在本次升级中不仅推出了全新的独立图形界面,还进一步大幅降低了本地部署的硬件门槛。

在硬件配置要求上,新版本对内存与显存(RAM + VRAM)的综合占用进行了深度优化。内存与显存合计最低仅需 27.6GB 即可流畅运行本地大模型。这意味着如果用户配备一张 12GB 显存的显卡,搭配 20GB 的系统内存即可满足最低部署要求。在具体的模型推荐档位中,原本需要 48GB 配置的 IQ2_XS 推荐档降至 40GB,而原本需要 64GB 的 IQ3_XXS 高质量推荐档则大幅降至 48GB,整体硬件要求降低了 8GB 到 16GB 不等。

除了硬件门槛的下探,Strata 0.2.0 在推理性能上也实现了全方位的硬件加速。其中:

  • NVIDIA 阵营:RTX30 系列显卡文本生成速度最高提升约 13%(实测 RTX3060 提升 10.2%,RTX A4000 提升 13%);
  • AMD 阵营:RX9000 系列显卡在部分模型上的提示词处理速度接近翻倍;
  • Intel 阵营:Arc A750 显卡的提示词处理速度同样获得了约 42% 的显著提升。

在交互体验与生态扩展方面,Strata 0.2.0 摆脱了以往依赖命令行编译部署的复杂繁琐,全面支持 Windows、macOS 以及 Linux 平台,并新增了原生中文图形界面与智能化安装指导。更值得一提的是,新版图形界面中还深度集成了一款 AI 编程 Agent,支持文件读取与修改、联网搜索以及自动化任务执行;同时,针对 NVIDIA 和 AMD 显卡默认启用了图片理解功能,并对模型下载机制进行了多线程并发与断点续传的优化。

来源:AIbase · aibase.com

00