What is Serge?
Serge 是一個聊天介面,使用 llama.cpp 來執行 Alpaca 模型。它是完全自架主機,並且不需要 API 金鑰。該軟體使用 Redis 來儲存聊天記錄和參數,並使用 FastAPI + LangChain 作為 API,使用 python binding 封裝對 llama.cpp 的呼叫。
主要功能:
1. 使用 llama.cpp 來執行 Alpaca 模型
2. 自架主機,並且不需要 API 金鑰
3. 使用 Redis 來儲存聊天記錄和參數
4. FastAPI + LangChain 作為 API,使用 python binding 封裝對 llama.cpp 的呼叫
Serge 可以用於任何需要聊天介面的情況。它特別適用於執行 Alpaca 模型。
Serge 是執行 Alpaca 模型和建立聊天介面的強大工具。它自架主機的特性和不需要 API 金鑰,讓它成為開發人員一個方便且安全的選項。Serge 使用 Redis 和 FastAPI + LangChain,是一個可靠且高效的軟體解決方案。
More information on Serge
Launched
2023-03-27
Pricing Model
Free
Starting Price
Global Rank
9298318
Country
United States
Month Visit
<5k
Tech used
Top 5 Countries
61.7%
23.37%
14.93%
United States
Germany
Sweden
Traffic Sources
55.16%
28.13%
16.71%
0%
Direct
Social
Referrals
Search
Updated Date: 2024-04-30
Serge 替代方案
更多 替代方案-
一個自我託管、離線、類似 ChatGPT 的聊天機器人。由 Llama 2 提供技術支援。100% 私人,不會有資料離開您的裝置。新增功能:支援 Code Llama!
-
Llama 2 是一款強大的 AI 工具,在促進負責任的實踐同時,賦予開發人員強大的能力。它增強了聊天用例的安全性,促進學術研究的協作,負責任地塑造著 AI 的未來。