Alternativas a llama.cpp
Ordenadas por cuánto se parecen a llama.cpp y luego por puntuación.
Alternativas, clasificadas
-
Ollama
Entorno para descargar y ejecutar modelos de lenguaje de forma local, con CLI y API REST.
Actualizado hace 49 días4 94,9 = Comparar -
LocalAI
API autoalojada compatible con OpenAI que ejecuta modelos de texto, imagen y audio en hardware local.
Actualizado hace 49 días61 86,6 = Comparar -
vLLM
Motor de servicio de LLM de alto rendimiento, con paged attention y servidor compatible con la API de OpenAI.
Actualizado hace 49 días92 81,7 = Comparar -
LM Studio
Descubra, descargue y ejecute LLM locales sin conexión en Mac, Windows y Linux con interfaz amigable y servidor local compatible con OpenAI.
Detenido: 633 días sin versión367 40,0 = Comparar