2025年最好的 Shimmy 替代方案
-

-

TalkCody: The open-source AI coding agent. Boost developer velocity with true privacy, model freedom & predictable costs.
-

-

-

LM Studio 是一款操作简便的桌面应用程序,专为探索本地和开源大型语言模型(LLM)而设计。LM Studio 跨平台桌面应用程序让您能够从 Hugging Face 下载并运行任何 ggml 兼容模型,并提供了一个简洁而功能强大的模型配置和推理用户界面(UI)。该应用程序在可能的情况下会充分利用您的图形处理器(GPU)。
-

CogniSelect SDK:构建可在浏览器中私密运行 LLM 的 AI 应用。 享受零成本运行时、完全数据隐私和即时可扩展性。
-

Bodhi App 允许您在本地运行大型语言模型。享受隐私保护、易于使用的聊天界面、简单的模型管理、OpenAI API 兼容性以及高性能。免费、开源,非常适合开发者、AI 爱好者和注重隐私的用户。立即下载!
-

借助 ChatFrame,精简并优化高级AI工作流。整合多款大型语言模型(LLM),通过本地RAG技术保障专有数据安全,并在桌面端呈现复杂输出。
-

显著降低 LLM 成本,同时大幅提升隐私保护。RunAnywhere 的混合式 AI 能够智能地将请求路由至端侧或云端,兼顾最佳性能与安全性。
-

-

LlamaEdge 项目让您能够轻松运行 LLM 推理应用程序,并在本地为 Llama2 系列的 LLM 创建与 OpenAI 兼容的 API 服务。
-

-

借助 backboard.io 的 API,整合 2200 多个大型语言模型。实现持久化 AI 记忆与 RAG 能力,助您打造更智能、上下文感知且无碎片化的应用程序。
-

Shadow:开源AI智能体,专为安全代码开发而生。凭借硬件隔离执行技术和对代码库的深刻洞察,Shadow 助力您自信地自动化任务,确保代码开发安全高效。
-

FastRouter.ai 借助智能LLM路由,优化生产级AI。通过单一API接口,整合百余种模型,降低成本,保障可靠性,并实现轻松扩展。
-

BrowserAI:直接在您的浏览器中运行可用于生产环境的大型语言模型 (LLM)。它简单、快速、私密且开源。其功能包括 WebGPU 加速、零服务器成本和离线功能。非常适合开发者、公司和爱好者。
-

Harbor 是一个容器化的 LLM 工具包。它能助您即刻启动完整的 LLM 堆栈,无缝连接各项服务,定制专属环境,简化模型管理流程,并显著提升 LLM 的性能。 Harbor 是 AI 开发、测试和学习的理想之选。
-

-

-

OpenMemory:私有部署的AI记忆引擎。凭借持久化、结构化、私有且可解释的长期记忆能力,突破大语言模型(LLM)的上下文限制。
-

Moonshine 语音转文字模型。快速、准确、资源高效。非常适合设备内处理。性能优于 Whisper。适用于实时转录和语音命令。赋能各种应用。
-

-

开源、功能丰富的 Gemini/ChatGPT 类界面,用于在浏览器中使用 WebGPU 本地运行开源模型(Gemma、Mistral、LLama3 等)。无需服务器端处理 - 您的数据永远不会离开您的电脑!
-

KTransformers 是由清华大学 KVCache.AI 团队和 QuJing Tech 共同开发的开源项目,旨在优化大型语言模型的推理过程。它能够降低硬件门槛,在 24GB 显存的单 GPU 上运行 6710 亿参数的模型,并提升推理速度(预处理速度高达 286 tokens/s,生成速度高达 14 tokens/s),适用于个人、企业和学术用途。
-

LangDB AI Gateway 是您人工智能工作流程的一站式指挥中心。它提供对 150 多种模型的统一访问,通过智能路由节省高达 70% 的成本,并实现无缝集成。
-

-

Open-Fiesta:开发者专属的开源AI聊天实验平台。轻松并排对比,深度评估多种AI模型。支持自部署,尽享全面掌控。
-

Kolosal AI是一个开源平台,允许用户在笔记本电脑、台式机甚至树莓派等本地设备上运行大型语言模型(LLMs),其优先考虑速度、效率、隐私和环保。
-

Langbase,一个拥有可组合基础设施的革命性AI平台。提供速度、灵活性和可访问性。几分钟内部署。支持多种LLM。非常适合开发人员。节省成本。用途广泛。赋能AI发展。
-

