2025年最好的 LlamaEdge 替代方案
-

LM Studio 是一款操作簡便的桌面應用程式,讓您能輕鬆體驗本地與開源的大型語言模型(LLM)。這款 LM Studio 跨平台桌面應用程式,讓您可以從 Hugging Face 下載並運行任何 ggml-相容的模型,並提供簡潔而強大的模型配置與推論介面。該應用程式會盡可能地運用您的 GPU 資源。
-

ManyLLM: 整合並保障您的本機大型語言模型工作流程。一個以隱私為優先的工作區,適用於開發人員、研究人員,並具備 OpenAI API 相容性與本機 RAG 功能。
-

-

-

LazyLLM: 專為多代理式LLM應用程式打造的低程式碼平台。快速建構、疊代並部署複雜的AI解決方案,從原型開發到正式部署一氣呵成。將重心放在演算法的創新,而非繁瑣的工程細節。
-

LlamaIndex 運用您的企業資料,打造智慧型AI代理人,並透過先進的 RAG 技術賦能 LLMs,將複雜的文件轉化為可靠且可付諸實踐的洞察。
-

Llama Assistant 是一款開放原始碼的 AI 助理,可在本地運行,確保隱私。由 Meta 的 Llama 3.2 提供支持,它提供語音識別、進階 NLP 和可自訂 UI 等功能。支援多種模型。未來計劃包括離線語音轉文字等。
-

Kolosal AI 是一個開放原始碼平台,讓使用者能於個人裝置上,例如筆電、桌機,甚至樹莓派,本地執行大型語言模型 (LLM),並優先考量速度、效率、隱私及環保。
-

LLaMA Factory 是一個開源低代碼大型模型微調框架,它整合了業界廣泛使用的微調技術,並透過 Web UI 介面支援大型模型的零代碼微調。
-

WordLlama 是一個自然語言處理 (NLP) 工具,它利用大型語言模型 (LLMs) 的組成部分來建立有效且緊湊的詞彙表示,類似於 GloVe、Word2Vec 或 FastText。
-

Lemon AI: 您的專屬、自架 AI 智能助理。讓強大的開源 AI 在您的專屬硬體上運行。安全地應對複雜任務、有效節省開銷,並完全掌控您的資料自主權。
-

Meta 的 Llama 4:採用 MoE 架構的開放原始碼 AI。可處理文字、圖片、影片等多種內容。具備龐大的上下文窗口,助您打造更聰明、更快速的應用!
-

LLMWare.ai 讓開發人員可以輕鬆建立企業級 AI 應用程式。它擁有 50 多個專門模型,無需 GPU,並提供安全的整合,非常適合金融、法律等領域。
-

-

Llama 2 是一款強大的 AI 工具,在促進負責任的實踐同時,賦予開發人員強大的能力。它增強了聊天用例的安全性,促進學術研究的協作,負責任地塑造著 AI 的未來。
-

使用 OpenAI 格式呼叫所有 LLM API。使用 Bedrock、Azure、OpenAI、Cohere、Anthropic、Ollama、Sagemaker、HuggingFace、Replicate(100 多個 LLM)
-

AnythingLLM 是一款企業級的「與文件對話」解決方案,安全可靠,全公司皆可使用,讓每位員工一夜之間成為貴公司業務的專家。
-

與 Alpaca 和 LLaMa 等 AI 模型進行對話。整合 ChatGPT、支援本地執行等等。立即體驗 LlamaChat!
-

大幅降低大型語言模型成本,並強化隱私保護。RunAnywhere 的混合式人工智慧,能智慧地將請求分流至裝置端或雲端,以實現最佳效能與資安。
-

TinyLlama 項目是一個公開的努力,旨在對一個 11 億參數的 Llama 模型進行預訓練,訓練資料集包含 3 兆個詞元。
-

Bodhi App 讓您在自己的電腦上運行大型語言模型。盡享隱私、簡單易用的聊天介面、簡潔的模型管理、OpenAI API 相容性以及高性能。免費、開源,非常適合開發者、AI 愛好者和重視隱私的使用者。立即下載!
-

-

-

-

探索 Code Llama,這是一款先進的 AI 工具,可進行程式碼生成和理解。提升生產力、簡化工作流程,並賦予開發人員權能。
-

-

Transformer Lab:一個開源平台,讓您可在本地端建構、微調和執行大型語言模型 (LLM),無需編碼。下載數百個模型,跨硬體微調,聊天、評估等等。
-

ChatLLM Pro 是一款瀏覽器離線生成式 AI 聊天擴充功能。它讓您能與您的網頁進行私密對話,無需將任何資料外洩給如 ChatGPT 等第三方服務。下載網址為 chatllm.pro
-

-

