智算多多联系我们

官方邮箱:service@zsdodo.com

公司地址:北京市丰台区南四环西路188号总部基地三区国联股份数字经济总部
关注我们

公众号

视频号
◎2025 北京智算多多科技有限公司版权所有 京ICP备 2025150592号-1
京公网安备11010602202532号
京公网安备11010602202532号 在刚刚落幕的 WWDC 2026 上,LM Studio 与苹果完成了一场令人瞩目的技术演示——仅用四台 Mac Studio 组成的集群,就成功运行了月之暗面的万亿参数大模型 Kimi K2.6。这一成果打破了“万亿模型必须依赖云端 GPU 集群”的固有认知,让消费级硬件承载前沿 AI 算力成为现实。
Kimi K2.6 总参数规模高达 1 万亿,采用 MoE 架构,激活参数为 320 亿,支持长上下文、多模态输入及智能体任务处理。此次演示中,四台 Mac Studio 通过苹果的内存共享和互联技术组成集群,统一内存总量约达 1.5TB,足以满足这一巨型模型的推理需求。此前开发者测试显示,在类似配置下 Kimi K2.6 可达到约 28 tokens/s 的生成速度,而功耗远低于传统 GPU 方案。
更值得关注的是,演示中还展示了 LM Studio 的 LM Link 远程访问功能。用户可以在 MacBook Neo 笔记本和 iPhone 上安全地远程连接到 Mac Studio 集群,与正在运行的模型实时交互,而所有数据和通信始终保持本地化处理,不走云端。
LM Link 已更新至 LM Studio 的 Mac 应用和 Locally AI 的 iOS 应用中,支持端到端加密连接。这一设计让用户即使手握轻量设备,也能随时调用集群级的 AI 算力,同时不必担心隐私泄露风险。
配合苹果 Thunderbolt 5 RDMA 等多设备内存共享技术,整个生态在 AI 本地化部署方面的技术闭环正在加速成型。
此次合作释放了一个清晰信号:本地部署万亿参数大模型不再是遥不可及的实验室概念,而是正在走向开发者案头的工程现实。随着苹果硬件互联能力的持续进化,消费级设备承载大规模 AI 推理的边界,有望被进一步拓宽。
