Saltar al contenido principal
50% de descuento todos los planes, tiempo limitado. Desde $2.48/mo
Ollama

Ollama

Ollama ejecuta LLMs localmente en tu VPS. Descarga y sirve Llama 3, Mistral, Phi, Gemma y Qwen con un solo comando. IA autoalojada sin clave API, compatible con clientes OpenAI mediante REST API. La forma más directa de hacer inferencia privada, usada por más de 200.000 desarrolladores.

En resumen

175k

Estrellas en GitHub

31

Vistas de página

Licencia MIT Versión Latest OS Ubuntu Server 24.04 LTS Min RAM 8 GB IP IPV4,IPV6

Componentes instalados

  1. Ollama → un framework ligero y extensible para ejecutar LLMs localmente.
  2. Open WebUI → interfaz web para interactuar con Ollama.

Directorio de instalación

El archivo Docker Compose de Open WebUI se encuentra en:

/root/open-webui/docker-compose.yml

Directorio de trabajo para el servicio systemd: /root/open-webui

Información de acceso

Interfaz web:

  • Open WebUI: http://<server-ip>:8080
  • La interfaz puede tardar unos minutos en iniciarse.
  • Acceda pronto para completar la configuración inicial y crear un usuario administrador.

Ollama API:

  • URL base: http://127.0.0.1:11434
  • Accesible localmente dentro del servidor.

Uso de Ollama

Ejecute estos comandos directamente en la terminal:

# Pull a model
ollama pull <model_name>

# Run a model
ollama run <model_name>

Ejemplo:

ollama pull llama3.1
ollama run llama3.1

Gestión de servicios

# Open WebUI
systemctl status open-webui
systemctl restart open-webui

# Ollama
systemctl status ollama
systemctl restart ollama

Más sobre ciencia de datos

Apps relacionadas.

Despliega Ollama ahora. Desde $2,48/mes.