AIbase更新于 原文 · 中文

开源工具 Strata 0.2 重磅发布:硬件门槛再降 16GB,本地流畅跑千亿大模型

开源工具Strata发布0.2.0测试版,RAM+VRAM合计最低27.6GB即可流畅运行Qwen3.8-Flash-Next、Qwen3.6-35B-A3B等大模型。新版本仍属测试阶段,各显卡提速数据为实测口径。

开源本地 AI 大模型运行工具 Strata 迎来了0.2.0测试版的重磅更新。作为一款致力于让普通家用电脑流畅运行 Qwen3.8-Flash-Next、Qwen3.6-35B-A3B 等大语言模型的开源利器,Strata 在本次升级中不仅推出了全新的独立图形界面,还进一步大幅降低了本地部署的硬件门槛。

在硬件配置要求上,新版本对内存与显存(RAM + VRAM)的综合占用进行了深度优化。内存与显存合计最低仅需27.6GB 即可流畅运行本地大模型。这意味着如果用户配备一张12GB 显存的显卡,搭配20GB 的系统内存即可满足最低部署要求。在具体的模型推荐档位中,原本需要48GB 配置的 IQ2_XS 推荐档降至40GB,而原本需要64GB 的 IQ3_XXS 高质量推荐档则大幅降至48GB,整体硬件要求降低了8GB 到16GB 不等。

除了硬件门槛的下探,Strata0.2.0在推理性能上也实现了全方位的硬件加速。其中:

NVIDIA 阵营:RTX30系列显卡文本生成速度最高提升约13%(实测 RTX3060提升10.2%,RTX A4000提升13%);

AMD 阵营:RX9000系列显卡在部分模型上的提示词处理速度接近翻倍;

Intel 阵营:Arc A750显卡的提示词处理速度同样获得了约42% 的显著提升。

在交互体验与生态扩展方面,Strata0.2.0摆脱了以往依赖命令行编译部署的复杂繁琐,全面支持 Windows、macOS 以及 Linux 平台,并新增了原生中文图形界面与智能化安装指导。更值得一提的是,新版图形界面中还深度集成了一款 AI 编程 Agent,支持文件读取与修改、联网搜索以及自动化任务执行;同时,针对 NVIDIA 和 AMD 显卡默认启用了图片理解功能,并对模型下载机制进行了多线程并发与断点续传的优化。


原始出处

AIbase

内容说明

原始发布及相关权利归来源方。