LocalAI
作者： mudler
Run any model — LLMs, vision, voice, image, video — on any hardware, no GPU required.
星数
50,248
派生数
4,581
语言
Go
分类
Inference & Serving
获取代码
# 克隆仓库git clone https://github.com/mudler/LocalAI
常见问题
LocalAI 是什么？
Run any model — LLMs, vision, voice, image, video — on any hardware, no GPU required.
LocalAI 使用安全吗？
LocalAI 是 mudler 在 GitHub 上的开源项目。在生产环境使用前请先审阅源代码与许可证。
如何开始使用 LocalAI？
git clone https://github.com/mudler/LocalAI
LocalAI 是用什么语言写的？
openSource.faqWhatLanguageAnswer
相关项目
Ollama
ollamaRun large models locally with a single command — LLMs, vision, and embeddings on any machine.
186k19.0k
llama.cpp
ggml-orgLLM inference in C/C++ with quantization — runs models on CPU, GPU, and edge devices.
134k25.3k
vLLM
vllm-projectHigh-throughput, memory-efficient inference and serving engine for LLMs with PagedAttention.
96.5k24.5k