Alternativas a Ollama
Ordenadas por cuánto se parecen a Ollama y luego por puntuación.
Alternativas, clasificadas
-
llama.cpp
Motor de inferencia en C/C++ para LLM en CPU y GPU, con formato GGUF y cuantización.
Actualizado hace 3 días11 92,6 = Comparar -
vLLM
Motor de servicio de LLM de alto rendimiento, con paged attention y servidor compatible con la API de OpenAI.
Actualizado hace 4 días28 91,3 = Comparar -
LocalAI
API autoalojada compatible con OpenAI que ejecuta modelos de texto, imagen y audio en hardware local.
Actualizado hace 4 días63 89,1 = Comparar