‹ r/LocalLLaMA

有人对Qwen-3.8 27b @ 8bpw和Qwen-3.8-FN @ 4bpw进行过深入比较吗?

原文:Has anyone done a in-depth comparison between Qwen-3.8 27b @ 8bpw and Qwen-3.8-FN @ 4bpw?

r/LocalLLaMA 未缓存正文

标题说明了一切,我在 int8A16 上运行双 3090(查看我的帖子以了解我的设置),并且一直想知道我是否错过了 QFN。 Reddit 上有一些令人作呕的帖子,其中包含在异构系统上运行的低 bpw 分层解决方案,但我对这些不感兴趣 - 我想要高精度。我正在考虑出售我的设置并购买 DGX Spark,因为它可以在 nvfp4 上使用大型 c 运行 QFN

正文没能搬到本站:该站禁止服务器(机房 IP)抓取,返回 site,换任何浏览器标识都拿不到。在手机上打开原站往往又慢又卡,下面先把收录到的内容给你。

打开原文 ↗

本站会持续尝试重新抓取;也可以收藏这条,正文抓到后会永久保留。

打开原文 ↗

正文由本站服务器抓取保存(已自动过滤广告、推荐位与追踪图片),排版与原站可能不同;版权归原站所有。

相关报道同一事件 / 同分类