llamafile
作者： Mozilla-Ocho
Distribute and run LLMs with a single cross-platform executable file.
星数
26,582
派生数
1,672
语言
C++
分类
Inference & Serving
获取代码
# 克隆仓库git clone https://github.com/Mozilla-Ocho/llamafile
常见问题
llamafile 是什么？
Distribute and run LLMs with a single cross-platform executable file.
llamafile 使用安全吗？
llamafile 是 Mozilla-Ocho 在 GitHub 上的开源项目。在生产环境使用前请先审阅源代码与许可证。
如何开始使用 llamafile？
git clone https://github.com/Mozilla-Ocho/llamafile
llamafile 是用什么语言写的？
openSource.faqWhatLanguageAnswer
相关项目
Ollama
ollamaRun large models locally with a single command — LLMs, vision, and embeddings on any machine.
186k19.0k
llama.cpp
ggml-orgLLM inference in C/C++ with quantization — runs models on CPU, GPU, and edge devices.
134k25.3k
vLLM
vllm-projectHigh-throughput, memory-efficient inference and serving engine for LLMs with PagedAttention.
96.5k24.5k