Compare commits
12
Commits
| Author | SHA1 | Date | |
|---|---|---|---|
|
|
1d59b3fe09 | ||
|
|
5030770bc2 | ||
|
|
c68fe80484 | ||
|
|
fb3c3fdb67 | ||
|
|
fc5747d3cd | ||
|
|
6adbd966a0 | ||
|
|
51258f6889 | ||
|
|
1e5b301000 | ||
|
|
a7d3e9373a | ||
|
|
fbf567f942 | ||
|
|
6f052cf738 | ||
|
|
938ca2b268 |
No files matched your search
+40
-12
@@ -82,7 +82,21 @@ Ok "RAM: $TotalRamGb GB"
|
|||||||
|
|
||||||
# --- Tumbar deploy previo (antes de detectar puertos) -----------------------
|
# --- Tumbar deploy previo (antes de detectar puertos) -----------------------
|
||||||
cmd /c docker rm -f d0a1-hermes-ollama '>' NUL '2>&1'
|
cmd /c docker rm -f d0a1-hermes-ollama '>' NUL '2>&1'
|
||||||
|
Info 'Deploy previo detenido (rm; volumen con el modelo intacto).'
|
||||||
|
|
||||||
|
# --- GPU NVIDIA? (si hay, Ollama la usa y va 5-10x mas rapido) ---------------
|
||||||
|
$HasGpu = $false
|
||||||
|
if (Get-Command nvidia-smi -ErrorAction SilentlyContinue) {
|
||||||
|
$GpuInfo = & nvidia-smi --query-gpu=name,memory.total --format=csv,noheader 2>$null
|
||||||
|
if ($LASTEXITCODE -eq 0 -and $GpuInfo) {
|
||||||
|
$HasGpu = $true
|
||||||
|
$GpuName = ($GpuInfo -split ',')[0].Trim()
|
||||||
|
Info "GPU NVIDIA detectada: $GpuName (aceleracion activada)"
|
||||||
|
}
|
||||||
|
}
|
||||||
|
if (-not $HasGpu) {
|
||||||
|
Warn 'Sin GPU NVIDIA: modo CPU (~10-20 tokens/s). Con una GPU NVIDIA va 5-10x mas rapido.'
|
||||||
|
}
|
||||||
# --- Auto-detect Ollama port ------------------------------------------------
|
# --- Auto-detect Ollama port ------------------------------------------------
|
||||||
$OllamaPort = Find-FreePort 11434
|
$OllamaPort = Find-FreePort 11434
|
||||||
|
|
||||||
@@ -101,7 +115,9 @@ Write-Host ''
|
|||||||
Warn '[1/3] Arrancando Ollama (IA local)...'
|
Warn '[1/3] Arrancando Ollama (IA local)...'
|
||||||
$running = docker ps --format '{{.Names}}' | Select-String -Quiet 'd0a1-hermes-ollama'
|
$running = docker ps --format '{{.Names}}' | Select-String -Quiet 'd0a1-hermes-ollama'
|
||||||
if (-not $running) {
|
if (-not $running) {
|
||||||
docker run -d --name d0a1-hermes-ollama `
|
$GpuArgs = @()
|
||||||
|
if ($HasGpu) { $GpuArgs = @('--gpus', 'all') }
|
||||||
|
docker run -d --name d0a1-hermes-ollama --memory 6g --cpus 6.0 @GpuArgs `
|
||||||
-p "${OllamaPort}:11434" `
|
-p "${OllamaPort}:11434" `
|
||||||
-v d0a1_hermes_ollama:/root/.ollama `
|
-v d0a1_hermes_ollama:/root/.ollama `
|
||||||
-e OLLAMA_HOST=0.0.0.0 `
|
-e OLLAMA_HOST=0.0.0.0 `
|
||||||
@@ -123,27 +139,34 @@ while ($true) {
|
|||||||
exit 1
|
exit 1
|
||||||
}
|
}
|
||||||
}
|
}
|
||||||
Warn ' Descargando modelo (llama3.2:3b, ~2 GB)...'
|
Warn ' Descargando modelo (qwen3:4b, ~2.5 GB)...'
|
||||||
# Si el usuario define $env:HTTPS_PROXY, Ollama lo usa para el pull (doc oficial):
|
# Si el usuario define $env:HTTPS_PROXY, Ollama lo usa para el pull (doc oficial):
|
||||||
$ProxyEnv = @()
|
$ProxyEnv = @()
|
||||||
if ($env:HTTPS_PROXY) { $ProxyEnv = @('-e', "HTTPS_PROXY=$env:HTTPS_PROXY", '-e', "HTTP_PROXY=$env:HTTP_PROXY") }
|
if ($env:HTTPS_PROXY) { $ProxyEnv = @('-e', "HTTPS_PROXY=$env:HTTPS_PROXY", '-e', "HTTP_PROXY=$env:HTTP_PROXY") }
|
||||||
# --- Modelo: HF primero (CDN propio, rapido) y registry de Ollama como ultimo recurso ---
|
# --- Modelo ya presente? (volumen persistente: no re-descargar) ------------
|
||||||
$Gguf = Join-Path $ScriptDir 'llama3.2-3b-q4.gguf'
|
$ModelList = docker exec d0a1-hermes-ollama ollama list 2>$null
|
||||||
|
if ("$ModelList" -match 'qwen3:4b') {
|
||||||
|
Info 'Modelo qwen3:4b ya descargado (volumen intacto). Omitiendo descarga.'
|
||||||
|
cmd /c docker exec d0a1-hermes-ollama sh -c 'printf "FROM qwen3:4b\\nPARAMETER num_ctx 16384\\nSYSTEM /no_think\\n" > /tmp/mf && ollama create qwen3:4b -f /tmp/mf' '>' NUL '2>&1'
|
||||||
|
} else {
|
||||||
|
# --- Modelo: HF primero (CDN propio, rapido) y registry de Ollama como ultimo recurso ---
|
||||||
|
|
||||||
|
$Gguf = Join-Path $ScriptDir 'qwen3-4b-q4.gguf'
|
||||||
$HfUrls = @(
|
$HfUrls = @(
|
||||||
'https://huggingface.co/bartowski/Llama-3.2-3B-Instruct-GGUF/resolve/main/Llama-3.2-3B-Instruct-Q4_K_M.gguf',
|
'https://huggingface.co/Qwen/Qwen3-4B-GGUF/resolve/main/Qwen3-4B-Q4_K_M.gguf',
|
||||||
'https://huggingface.co/unsloth/Llama-3.2-3B-Instruct-GGUF/resolve/main/Llama-3.2-3B-Instruct-Q4_K_M.gguf'
|
'https://huggingface.co/unsloth/Qwen3-4B-GGUF/resolve/main/Qwen3-4B-Q4_K_M.gguf'
|
||||||
)
|
)
|
||||||
Info 'Descargando modelo de IA (llama3.2:3b, ~2 GB)...'
|
Info 'Descargando modelo de IA (qwen3:4b, ~2.5 GB)...'
|
||||||
foreach ($Url in $HfUrls) {
|
foreach ($Url in $HfUrls) {
|
||||||
curl.exe -# -L --retry 3 --max-time 1800 -o "$Gguf" $Url
|
curl.exe -# -L --retry 3 --max-time 1800 -o "$Gguf" $Url
|
||||||
if ($LASTEXITCODE -eq 0 -and (Test-Path $Gguf) -and (Get-Item $Gguf).Length -gt 1900000000) { break }
|
if ($LASTEXITCODE -eq 0 -and (Test-Path $Gguf) -and (Get-Item $Gguf).Length -gt 2400000000) { break }
|
||||||
Remove-Item "$Gguf" -Force -ErrorAction SilentlyContinue
|
Remove-Item "$Gguf" -Force -ErrorAction SilentlyContinue
|
||||||
if ($Url -ne $HfUrls[-1]) { Warn 'Mirror no accesible, probando el siguiente...' }
|
if ($Url -ne $HfUrls[-1]) { Warn 'Mirror no accesible, probando el siguiente...' }
|
||||||
}
|
}
|
||||||
if ((Test-Path $Gguf) -and (Get-Item $Gguf).Length -gt 1900000000) {
|
if ((Test-Path $Gguf) -and (Get-Item $Gguf).Length -gt 2400000000) {
|
||||||
Info 'Importando modelo en Ollama...'
|
Info 'Importando modelo en Ollama...'
|
||||||
docker cp "$Gguf" d0a1-hermes-ollama:/root/.ollama/import.gguf
|
docker cp "$Gguf" d0a1-hermes-ollama:/root/.ollama/import.gguf
|
||||||
docker exec d0a1-hermes-ollama sh -c 'printf "FROM /root/.ollama/import.gguf\\nPARAMETER num_ctx 16384\\n" > /tmp/mf && ollama create llama3.2:3b -f /tmp/mf'
|
docker exec d0a1-hermes-ollama sh -c 'printf "FROM /root/.ollama/import.gguf\\nPARAMETER num_ctx 16384\\nSYSTEM /no_think\\n" > /tmp/mf && ollama create qwen3:4b -f /tmp/mf'
|
||||||
$CreateOk = ($LASTEXITCODE -eq 0)
|
$CreateOk = ($LASTEXITCODE -eq 0)
|
||||||
docker exec d0a1-hermes-ollama rm -f /root/.ollama/import.gguf | Out-Null
|
docker exec d0a1-hermes-ollama rm -f /root/.ollama/import.gguf | Out-Null
|
||||||
Remove-Item "$Gguf" -Force -ErrorAction SilentlyContinue
|
Remove-Item "$Gguf" -Force -ErrorAction SilentlyContinue
|
||||||
@@ -152,11 +175,11 @@ if ((Test-Path $Gguf) -and (Get-Item $Gguf).Length -gt 1900000000) {
|
|||||||
} else {
|
} else {
|
||||||
# Ultimo recurso: pull directo (1 intento, ya sin esperar 3 rondas)
|
# Ultimo recurso: pull directo (1 intento, ya sin esperar 3 rondas)
|
||||||
Warn 'HuggingFace no accesible. Probando el registry de Ollama (ultimo recurso)...'
|
Warn 'HuggingFace no accesible. Probando el registry de Ollama (ultimo recurso)...'
|
||||||
docker exec @ProxyEnv d0a1-hermes-ollama ollama pull llama3.2:3b
|
docker exec @ProxyEnv d0a1-hermes-ollama ollama pull qwen3:4b
|
||||||
if ($LASTEXITCODE -eq 0) {
|
if ($LASTEXITCODE -eq 0) {
|
||||||
$PullOk = $true
|
$PullOk = $true
|
||||||
# Contexto ampliado (el default 4096 da 400 en Open WebUI con prompts largos)
|
# Contexto ampliado (el default 4096 da 400 en Open WebUI con prompts largos)
|
||||||
docker exec d0a1-hermes-ollama sh -c 'printf "FROM llama3.2:3b\\nPARAMETER num_ctx 16384\\n" > /tmp/mf && ollama create llama3.2:3b -f /tmp/mf'
|
docker exec d0a1-hermes-ollama sh -c 'printf "FROM qwen3:4b\\nPARAMETER num_ctx 16384\\nSYSTEM /no_think\\n" > /tmp/mf && ollama create qwen3:4b -f /tmp/mf'
|
||||||
}
|
}
|
||||||
}
|
}
|
||||||
if (-not $PullOk) {
|
if (-not $PullOk) {
|
||||||
@@ -168,6 +191,11 @@ if (-not $PullOk) {
|
|||||||
}
|
}
|
||||||
exit 1
|
exit 1
|
||||||
}
|
}
|
||||||
|
}
|
||||||
|
# --- Precalentar el modelo (load ya, no en el primer mensaje) ---------------
|
||||||
|
Warn ' Precargando el modelo en memoria...'
|
||||||
|
cmd /c docker exec d0a1-hermes-ollama sh -c 'ollama run qwen3:4b ""' '>' NUL '2>&1'
|
||||||
|
|
||||||
Ok "Ollama corriendo en http://localhost:${OllamaPort}"
|
Ok "Ollama corriendo en http://localhost:${OllamaPort}"
|
||||||
|
|
||||||
# --- 2. Instalar Hermes Agent ------------------------------------------------
|
# --- 2. Instalar Hermes Agent ------------------------------------------------
|
||||||
|
|||||||
+2
-2
@@ -112,8 +112,8 @@ until docker exec d0a1-hermes-ollama ollama ps &>/dev/null; do
|
|||||||
exit 1
|
exit 1
|
||||||
fi
|
fi
|
||||||
done
|
done
|
||||||
echo -e "${YELLOW} Descargando modelo (llama3.2:3b, ~2 GB)...${NC}"
|
echo -e "${YELLOW} Descargando modelo (qwen3:4b, ~2.5 GB)...${NC}"
|
||||||
docker exec d0a1-hermes-ollama ollama pull llama3.2:3b
|
docker exec d0a1-hermes-ollama ollama pull qwen3:4b
|
||||||
echo -e "${GREEN}✓${NC} Ollama corriendo en http://localhost:${OLLAMA_PORT}"
|
echo -e "${GREEN}✓${NC} Ollama corriendo en http://localhost:${OLLAMA_PORT}"
|
||||||
|
|
||||||
# ── 2. Instalar Hermes Agent ────────────────
|
# ── 2. Instalar Hermes Agent ────────────────
|
||||||
|
|||||||
@@ -0,0 +1,16 @@
|
|||||||
|
# ============================================================
|
||||||
|
# d0a1 pack - Hermes (Windows) - DESINSTALAR
|
||||||
|
# Elimina el contenedor y el volumen (datos + modelo).
|
||||||
|
# ============================================================
|
||||||
|
|
||||||
|
$ErrorActionPreference = 'Stop'
|
||||||
|
|
||||||
|
function Info($m) { Write-Host ">>> $m" }
|
||||||
|
|
||||||
|
Info 'Borrando contenedor y volumen...'
|
||||||
|
cmd /c docker rm -f d0a1-hermes-ollama '>' NUL '2>&1'
|
||||||
|
cmd /c docker volume rm d0a1_hermes_ollama '>' NUL '2>&1'
|
||||||
|
|
||||||
|
Write-Host ''
|
||||||
|
Info 'Eliminado TODO: contenedor + volumen (incluido el modelo IA).'
|
||||||
|
Write-Host ''
|
||||||
Executable
+5
@@ -0,0 +1,5 @@
|
|||||||
|
#!/usr/bin/env bash
|
||||||
|
# d0a1 pack - Hermes (Linux) - DESINSTALAR
|
||||||
|
docker rm -f d0a1-hermes-ollama >/dev/null 2>&1 || true
|
||||||
|
docker volume rm d0a1_hermes_ollama >/dev/null 2>&1 || true
|
||||||
|
echo ">>> Eliminado TODO: contenedor + volumen (incluido el modelo IA)."
|
||||||
+40
-12
@@ -82,7 +82,21 @@ Ok "RAM: $TotalRamGb GB"
|
|||||||
|
|
||||||
# --- Tumbar deploy previo (antes de detectar puertos) -----------------------
|
# --- Tumbar deploy previo (antes de detectar puertos) -----------------------
|
||||||
cmd /c docker rm -f d0a1-openclaw-ollama '>' NUL '2>&1'
|
cmd /c docker rm -f d0a1-openclaw-ollama '>' NUL '2>&1'
|
||||||
|
Info 'Deploy previo detenido (rm; volumen con el modelo intacto).'
|
||||||
|
|
||||||
|
# --- GPU NVIDIA? (si hay, Ollama la usa y va 5-10x mas rapido) ---------------
|
||||||
|
$HasGpu = $false
|
||||||
|
if (Get-Command nvidia-smi -ErrorAction SilentlyContinue) {
|
||||||
|
$GpuInfo = & nvidia-smi --query-gpu=name,memory.total --format=csv,noheader 2>$null
|
||||||
|
if ($LASTEXITCODE -eq 0 -and $GpuInfo) {
|
||||||
|
$HasGpu = $true
|
||||||
|
$GpuName = ($GpuInfo -split ',')[0].Trim()
|
||||||
|
Info "GPU NVIDIA detectada: $GpuName (aceleracion activada)"
|
||||||
|
}
|
||||||
|
}
|
||||||
|
if (-not $HasGpu) {
|
||||||
|
Warn 'Sin GPU NVIDIA: modo CPU (~10-20 tokens/s). Con una GPU NVIDIA va 5-10x mas rapido.'
|
||||||
|
}
|
||||||
# --- Auto-detect Ollama port ------------------------------------------------
|
# --- Auto-detect Ollama port ------------------------------------------------
|
||||||
$OllamaPort = Find-FreePort 11434
|
$OllamaPort = Find-FreePort 11434
|
||||||
|
|
||||||
@@ -101,7 +115,9 @@ Write-Host ''
|
|||||||
Warn '[1/3] Arrancando Ollama (IA local)...'
|
Warn '[1/3] Arrancando Ollama (IA local)...'
|
||||||
$running = docker ps --format '{{.Names}}' | Select-String -Quiet 'd0a1-openclaw-ollama'
|
$running = docker ps --format '{{.Names}}' | Select-String -Quiet 'd0a1-openclaw-ollama'
|
||||||
if (-not $running) {
|
if (-not $running) {
|
||||||
docker run -d --name d0a1-openclaw-ollama `
|
$GpuArgs = @()
|
||||||
|
if ($HasGpu) { $GpuArgs = @('--gpus', 'all') }
|
||||||
|
docker run -d --name d0a1-openclaw-ollama --memory 6g --cpus 6.0 @GpuArgs `
|
||||||
-p "${OllamaPort}:11434" `
|
-p "${OllamaPort}:11434" `
|
||||||
-v d0a1_openclaw_ollama:/root/.ollama `
|
-v d0a1_openclaw_ollama:/root/.ollama `
|
||||||
-e OLLAMA_HOST=0.0.0.0 `
|
-e OLLAMA_HOST=0.0.0.0 `
|
||||||
@@ -123,27 +139,34 @@ while ($true) {
|
|||||||
exit 1
|
exit 1
|
||||||
}
|
}
|
||||||
}
|
}
|
||||||
Warn ' Descargando modelo (llama3.2:3b, ~2 GB)...'
|
Warn ' Descargando modelo (qwen3:4b, ~2.5 GB)...'
|
||||||
# Si el usuario define $env:HTTPS_PROXY, Ollama lo usa para el pull (doc oficial):
|
# Si el usuario define $env:HTTPS_PROXY, Ollama lo usa para el pull (doc oficial):
|
||||||
$ProxyEnv = @()
|
$ProxyEnv = @()
|
||||||
if ($env:HTTPS_PROXY) { $ProxyEnv = @('-e', "HTTPS_PROXY=$env:HTTPS_PROXY", '-e', "HTTP_PROXY=$env:HTTP_PROXY") }
|
if ($env:HTTPS_PROXY) { $ProxyEnv = @('-e', "HTTPS_PROXY=$env:HTTPS_PROXY", '-e', "HTTP_PROXY=$env:HTTP_PROXY") }
|
||||||
# --- Modelo: HF primero (CDN propio, rapido) y registry de Ollama como ultimo recurso ---
|
# --- Modelo ya presente? (volumen persistente: no re-descargar) ------------
|
||||||
$Gguf = Join-Path $ScriptDir 'llama3.2-3b-q4.gguf'
|
$ModelList = docker exec d0a1-openclaw-ollama ollama list 2>$null
|
||||||
|
if ("$ModelList" -match 'qwen3:4b') {
|
||||||
|
Info 'Modelo qwen3:4b ya descargado (volumen intacto). Omitiendo descarga.'
|
||||||
|
cmd /c docker exec d0a1-openclaw-ollama sh -c 'printf "FROM qwen3:4b\\nPARAMETER num_ctx 16384\\nSYSTEM /no_think\\n" > /tmp/mf && ollama create qwen3:4b -f /tmp/mf' '>' NUL '2>&1'
|
||||||
|
} else {
|
||||||
|
# --- Modelo: HF primero (CDN propio, rapido) y registry de Ollama como ultimo recurso ---
|
||||||
|
|
||||||
|
$Gguf = Join-Path $ScriptDir 'qwen3-4b-q4.gguf'
|
||||||
$HfUrls = @(
|
$HfUrls = @(
|
||||||
'https://huggingface.co/bartowski/Llama-3.2-3B-Instruct-GGUF/resolve/main/Llama-3.2-3B-Instruct-Q4_K_M.gguf',
|
'https://huggingface.co/Qwen/Qwen3-4B-GGUF/resolve/main/Qwen3-4B-Q4_K_M.gguf',
|
||||||
'https://huggingface.co/unsloth/Llama-3.2-3B-Instruct-GGUF/resolve/main/Llama-3.2-3B-Instruct-Q4_K_M.gguf'
|
'https://huggingface.co/unsloth/Qwen3-4B-GGUF/resolve/main/Qwen3-4B-Q4_K_M.gguf'
|
||||||
)
|
)
|
||||||
Info 'Descargando modelo de IA (llama3.2:3b, ~2 GB)...'
|
Info 'Descargando modelo de IA (qwen3:4b, ~2.5 GB)...'
|
||||||
foreach ($Url in $HfUrls) {
|
foreach ($Url in $HfUrls) {
|
||||||
curl.exe -# -L --retry 3 --max-time 1800 -o "$Gguf" $Url
|
curl.exe -# -L --retry 3 --max-time 1800 -o "$Gguf" $Url
|
||||||
if ($LASTEXITCODE -eq 0 -and (Test-Path $Gguf) -and (Get-Item $Gguf).Length -gt 1900000000) { break }
|
if ($LASTEXITCODE -eq 0 -and (Test-Path $Gguf) -and (Get-Item $Gguf).Length -gt 2400000000) { break }
|
||||||
Remove-Item "$Gguf" -Force -ErrorAction SilentlyContinue
|
Remove-Item "$Gguf" -Force -ErrorAction SilentlyContinue
|
||||||
if ($Url -ne $HfUrls[-1]) { Warn 'Mirror no accesible, probando el siguiente...' }
|
if ($Url -ne $HfUrls[-1]) { Warn 'Mirror no accesible, probando el siguiente...' }
|
||||||
}
|
}
|
||||||
if ((Test-Path $Gguf) -and (Get-Item $Gguf).Length -gt 1900000000) {
|
if ((Test-Path $Gguf) -and (Get-Item $Gguf).Length -gt 2400000000) {
|
||||||
Info 'Importando modelo en Ollama...'
|
Info 'Importando modelo en Ollama...'
|
||||||
docker cp "$Gguf" d0a1-openclaw-ollama:/root/.ollama/import.gguf
|
docker cp "$Gguf" d0a1-openclaw-ollama:/root/.ollama/import.gguf
|
||||||
docker exec d0a1-openclaw-ollama sh -c 'printf "FROM /root/.ollama/import.gguf\\nPARAMETER num_ctx 16384\\n" > /tmp/mf && ollama create llama3.2:3b -f /tmp/mf'
|
docker exec d0a1-openclaw-ollama sh -c 'printf "FROM /root/.ollama/import.gguf\\nPARAMETER num_ctx 16384\\nSYSTEM /no_think\\n" > /tmp/mf && ollama create qwen3:4b -f /tmp/mf'
|
||||||
$CreateOk = ($LASTEXITCODE -eq 0)
|
$CreateOk = ($LASTEXITCODE -eq 0)
|
||||||
docker exec d0a1-openclaw-ollama rm -f /root/.ollama/import.gguf | Out-Null
|
docker exec d0a1-openclaw-ollama rm -f /root/.ollama/import.gguf | Out-Null
|
||||||
Remove-Item "$Gguf" -Force -ErrorAction SilentlyContinue
|
Remove-Item "$Gguf" -Force -ErrorAction SilentlyContinue
|
||||||
@@ -152,11 +175,11 @@ if ((Test-Path $Gguf) -and (Get-Item $Gguf).Length -gt 1900000000) {
|
|||||||
} else {
|
} else {
|
||||||
# Ultimo recurso: pull directo (1 intento, ya sin esperar 3 rondas)
|
# Ultimo recurso: pull directo (1 intento, ya sin esperar 3 rondas)
|
||||||
Warn 'HuggingFace no accesible. Probando el registry de Ollama (ultimo recurso)...'
|
Warn 'HuggingFace no accesible. Probando el registry de Ollama (ultimo recurso)...'
|
||||||
docker exec @ProxyEnv d0a1-openclaw-ollama ollama pull llama3.2:3b
|
docker exec @ProxyEnv d0a1-openclaw-ollama ollama pull qwen3:4b
|
||||||
if ($LASTEXITCODE -eq 0) {
|
if ($LASTEXITCODE -eq 0) {
|
||||||
$PullOk = $true
|
$PullOk = $true
|
||||||
# Contexto ampliado (el default 4096 da 400 en Open WebUI con prompts largos)
|
# Contexto ampliado (el default 4096 da 400 en Open WebUI con prompts largos)
|
||||||
docker exec d0a1-openclaw-ollama sh -c 'printf "FROM llama3.2:3b\\nPARAMETER num_ctx 16384\\n" > /tmp/mf && ollama create llama3.2:3b -f /tmp/mf'
|
docker exec d0a1-openclaw-ollama sh -c 'printf "FROM qwen3:4b\\nPARAMETER num_ctx 16384\\nSYSTEM /no_think\\n" > /tmp/mf && ollama create qwen3:4b -f /tmp/mf'
|
||||||
}
|
}
|
||||||
}
|
}
|
||||||
if (-not $PullOk) {
|
if (-not $PullOk) {
|
||||||
@@ -168,6 +191,11 @@ if (-not $PullOk) {
|
|||||||
}
|
}
|
||||||
exit 1
|
exit 1
|
||||||
}
|
}
|
||||||
|
}
|
||||||
|
# --- Precalentar el modelo (load ya, no en el primer mensaje) ---------------
|
||||||
|
Warn ' Precargando el modelo en memoria...'
|
||||||
|
cmd /c docker exec d0a1-openclaw-ollama sh -c 'ollama run qwen3:4b ""' '>' NUL '2>&1'
|
||||||
|
|
||||||
Ok "Ollama corriendo en http://localhost:${OllamaPort}"
|
Ok "Ollama corriendo en http://localhost:${OllamaPort}"
|
||||||
|
|
||||||
# --- 2. Instalar OpenClaw -----------------------------------------------------
|
# --- 2. Instalar OpenClaw -----------------------------------------------------
|
||||||
|
|||||||
+2
-2
@@ -112,8 +112,8 @@ until docker exec d0a1-openclaw-ollama ollama ps &>/dev/null; do
|
|||||||
exit 1
|
exit 1
|
||||||
fi
|
fi
|
||||||
done
|
done
|
||||||
echo -e "${YELLOW} Descargando modelo (llama3.2:3b, ~2 GB)...${NC}"
|
echo -e "${YELLOW} Descargando modelo (qwen3:4b, ~2.5 GB)...${NC}"
|
||||||
docker exec d0a1-openclaw-ollama ollama pull llama3.2:3b
|
docker exec d0a1-openclaw-ollama ollama pull qwen3:4b
|
||||||
echo -e "${GREEN}✓${NC} Ollama corriendo en http://localhost:${OLLAMA_PORT}"
|
echo -e "${GREEN}✓${NC} Ollama corriendo en http://localhost:${OLLAMA_PORT}"
|
||||||
|
|
||||||
# ── 2. Instalar OpenClaw ─────────────────────
|
# ── 2. Instalar OpenClaw ─────────────────────
|
||||||
|
|||||||
@@ -0,0 +1,16 @@
|
|||||||
|
# ============================================================
|
||||||
|
# d0a1 pack - OpenClaw (Windows) - DESINSTALAR
|
||||||
|
# Elimina el contenedor y el volumen (datos + modelo).
|
||||||
|
# ============================================================
|
||||||
|
|
||||||
|
$ErrorActionPreference = 'Stop'
|
||||||
|
|
||||||
|
function Info($m) { Write-Host ">>> $m" }
|
||||||
|
|
||||||
|
Info 'Borrando contenedor y volumen...'
|
||||||
|
cmd /c docker rm -f d0a1-openclaw-ollama '>' NUL '2>&1'
|
||||||
|
cmd /c docker volume rm d0a1_openclaw_ollama '>' NUL '2>&1'
|
||||||
|
|
||||||
|
Write-Host ''
|
||||||
|
Info 'Eliminado TODO: contenedor + volumen (incluido el modelo IA).'
|
||||||
|
Write-Host ''
|
||||||
Executable
+5
@@ -0,0 +1,5 @@
|
|||||||
|
#!/usr/bin/env bash
|
||||||
|
# d0a1 pack - OpenClaw (Linux) - DESINSTALAR
|
||||||
|
docker rm -f d0a1-openclaw-ollama >/dev/null 2>&1 || true
|
||||||
|
docker volume rm d0a1_openclaw_ollama >/dev/null 2>&1 || true
|
||||||
|
echo ">>> Eliminado TODO: contenedor + volumen (incluido el modelo IA)."
|
||||||
+1
-1
@@ -33,7 +33,7 @@ Solo pagas el servidor. La IA es tuya.
|
|||||||
|
|
||||||
## Modelos
|
## Modelos
|
||||||
|
|
||||||
El modelo por defecto es `llama3.2:3b` (2 GB, corre en 4 GB RAM).
|
El modelo por defecto es `qwen3:4b` (2 GB, corre en 4 GB RAM).
|
||||||
|
|
||||||
```bash
|
```bash
|
||||||
docker exec d0a1-ollama ollama pull qwen3:4b # Mejor en español + razonamiento (4 GB RAM)
|
docker exec d0a1-ollama ollama pull qwen3:4b # Mejor en español + razonamiento (4 GB RAM)
|
||||||
|
|||||||
+44
-12
@@ -90,7 +90,21 @@ Ok "RAM: $TotalRamGb GB"
|
|||||||
# Mantiene los volumenes (el modelo ya descargado no se re-descarga) y libera
|
# Mantiene los volumenes (el modelo ya descargado no se re-descarga) y libera
|
||||||
# los puertos para que Find-FreePort vea el estado REAL tras el down.
|
# los puertos para que Find-FreePort vea el estado REAL tras el down.
|
||||||
cmd /c docker compose -f $ComposeFile down '>' NUL '2>&1'
|
cmd /c docker compose -f $ComposeFile down '>' NUL '2>&1'
|
||||||
|
Info 'Deploy previo detenido (down; volumenes con el modelo intactos).'
|
||||||
|
|
||||||
|
# --- GPU NVIDIA? (si hay, Ollama la usa y va 5-10x mas rapido) ---------------
|
||||||
|
$HasGpu = $false
|
||||||
|
if (Get-Command nvidia-smi -ErrorAction SilentlyContinue) {
|
||||||
|
$GpuInfo = & nvidia-smi --query-gpu=name,memory.total --format=csv,noheader 2>$null
|
||||||
|
if ($LASTEXITCODE -eq 0 -and $GpuInfo) {
|
||||||
|
$HasGpu = $true
|
||||||
|
$GpuName = ($GpuInfo -split ',')[0].Trim()
|
||||||
|
Info "GPU NVIDIA detectada: $GpuName (aceleracion activada)"
|
||||||
|
}
|
||||||
|
}
|
||||||
|
if (-not $HasGpu) {
|
||||||
|
Warn 'Sin GPU NVIDIA: modo CPU (~10-20 tokens/s). Con una GPU NVIDIA va 5-10x mas rapido.'
|
||||||
|
}
|
||||||
# --- Auto-detect ports ----------------------------------------------------
|
# --- Auto-detect ports ----------------------------------------------------
|
||||||
$OllamaPort = Find-FreePort 11434
|
$OllamaPort = Find-FreePort 11434
|
||||||
$WebUiPort = Find-FreePort 3000
|
$WebUiPort = Find-FreePort 3000
|
||||||
@@ -124,7 +138,13 @@ Write-Host ''
|
|||||||
Warn 'Descargando contenedores (2-3 min la primera vez)...'
|
Warn 'Descargando contenedores (2-3 min la primera vez)...'
|
||||||
$env:OLLAMA_PORT = "$OllamaPort"
|
$env:OLLAMA_PORT = "$OllamaPort"
|
||||||
$env:WEBUI_PORT = "$WebUiPort"
|
$env:WEBUI_PORT = "$WebUiPort"
|
||||||
docker compose -f $ComposeFile up -d
|
$ComposeArgs = @('-f', $ComposeFile)
|
||||||
|
if ($HasGpu) {
|
||||||
|
$OverrideFile = Join-Path $ScriptDir 'docker-compose.gpu.yml'
|
||||||
|
Set-Content -Path $OverrideFile -Value "services:`r`n ollama:`r`n gpus: all`r`n"
|
||||||
|
$ComposeArgs += @('-f', $OverrideFile)
|
||||||
|
}
|
||||||
|
docker compose @ComposeArgs up -d
|
||||||
if ($LASTEXITCODE -ne 0) { Err "docker compose up fallo (exit $LASTEXITCODE)."; exit 1 }
|
if ($LASTEXITCODE -ne 0) { Err "docker compose up fallo (exit $LASTEXITCODE)."; exit 1 }
|
||||||
|
|
||||||
# --- Pull model -------------------------------------------------------------
|
# --- Pull model -------------------------------------------------------------
|
||||||
@@ -144,23 +164,30 @@ while ($true) {
|
|||||||
# Si el usuario define $env:HTTPS_PROXY, Ollama lo usa para el pull (doc oficial):
|
# Si el usuario define $env:HTTPS_PROXY, Ollama lo usa para el pull (doc oficial):
|
||||||
$ProxyEnv = @()
|
$ProxyEnv = @()
|
||||||
if ($env:HTTPS_PROXY) { $ProxyEnv = @('-e', "HTTPS_PROXY=$env:HTTPS_PROXY", '-e', "HTTP_PROXY=$env:HTTP_PROXY") }
|
if ($env:HTTPS_PROXY) { $ProxyEnv = @('-e', "HTTPS_PROXY=$env:HTTPS_PROXY", '-e', "HTTP_PROXY=$env:HTTP_PROXY") }
|
||||||
# --- Modelo: HF primero (CDN propio, rapido) y registry de Ollama como ultimo recurso ---
|
# --- Modelo ya presente? (volumen persistente: no re-descargar) ------------
|
||||||
$Gguf = Join-Path $ScriptDir 'llama3.2-3b-q4.gguf'
|
$ModelList = docker exec d0a1-ollama ollama list 2>$null
|
||||||
|
if ("$ModelList" -match 'qwen3:4b') {
|
||||||
|
Info 'Modelo qwen3:4b ya descargado (volumen intacto). Omitiendo descarga.'
|
||||||
|
cmd /c docker exec d0a1-ollama sh -c 'printf "FROM qwen3:4b\\nPARAMETER num_ctx 16384\\nSYSTEM /no_think\\n" > /tmp/mf && ollama create qwen3:4b -f /tmp/mf' '>' NUL '2>&1'
|
||||||
|
} else {
|
||||||
|
# --- Modelo: HF primero (CDN propio, rapido) y registry de Ollama como ultimo recurso ---
|
||||||
|
|
||||||
|
$Gguf = Join-Path $ScriptDir 'qwen3-4b-q4.gguf'
|
||||||
$HfUrls = @(
|
$HfUrls = @(
|
||||||
'https://huggingface.co/bartowski/Llama-3.2-3B-Instruct-GGUF/resolve/main/Llama-3.2-3B-Instruct-Q4_K_M.gguf',
|
'https://huggingface.co/Qwen/Qwen3-4B-GGUF/resolve/main/Qwen3-4B-Q4_K_M.gguf',
|
||||||
'https://huggingface.co/unsloth/Llama-3.2-3B-Instruct-GGUF/resolve/main/Llama-3.2-3B-Instruct-Q4_K_M.gguf'
|
'https://huggingface.co/unsloth/Qwen3-4B-GGUF/resolve/main/Qwen3-4B-Q4_K_M.gguf'
|
||||||
)
|
)
|
||||||
Info 'Descargando modelo de IA (llama3.2:3b, ~2 GB)...'
|
Info 'Descargando modelo de IA (qwen3:4b, ~2.5 GB)...'
|
||||||
foreach ($Url in $HfUrls) {
|
foreach ($Url in $HfUrls) {
|
||||||
curl.exe -# -L --retry 3 --max-time 1800 -o "$Gguf" $Url
|
curl.exe -# -L --retry 3 --max-time 1800 -o "$Gguf" $Url
|
||||||
if ($LASTEXITCODE -eq 0 -and (Test-Path $Gguf) -and (Get-Item $Gguf).Length -gt 1900000000) { break }
|
if ($LASTEXITCODE -eq 0 -and (Test-Path $Gguf) -and (Get-Item $Gguf).Length -gt 2400000000) { break }
|
||||||
Remove-Item "$Gguf" -Force -ErrorAction SilentlyContinue
|
Remove-Item "$Gguf" -Force -ErrorAction SilentlyContinue
|
||||||
if ($Url -ne $HfUrls[-1]) { Warn 'Mirror no accesible, probando el siguiente...' }
|
if ($Url -ne $HfUrls[-1]) { Warn 'Mirror no accesible, probando el siguiente...' }
|
||||||
}
|
}
|
||||||
if ((Test-Path $Gguf) -and (Get-Item $Gguf).Length -gt 1900000000) {
|
if ((Test-Path $Gguf) -and (Get-Item $Gguf).Length -gt 2400000000) {
|
||||||
Info 'Importando modelo en Ollama...'
|
Info 'Importando modelo en Ollama...'
|
||||||
docker cp "$Gguf" d0a1-ollama:/root/.ollama/import.gguf
|
docker cp "$Gguf" d0a1-ollama:/root/.ollama/import.gguf
|
||||||
docker exec d0a1-ollama sh -c 'printf "FROM /root/.ollama/import.gguf\\nPARAMETER num_ctx 16384\\n" > /tmp/mf && ollama create llama3.2:3b -f /tmp/mf'
|
docker exec d0a1-ollama sh -c 'printf "FROM /root/.ollama/import.gguf\\nPARAMETER num_ctx 16384\\nSYSTEM /no_think\\n" > /tmp/mf && ollama create qwen3:4b -f /tmp/mf'
|
||||||
$CreateOk = ($LASTEXITCODE -eq 0)
|
$CreateOk = ($LASTEXITCODE -eq 0)
|
||||||
docker exec d0a1-ollama rm -f /root/.ollama/import.gguf | Out-Null
|
docker exec d0a1-ollama rm -f /root/.ollama/import.gguf | Out-Null
|
||||||
Remove-Item "$Gguf" -Force -ErrorAction SilentlyContinue
|
Remove-Item "$Gguf" -Force -ErrorAction SilentlyContinue
|
||||||
@@ -169,11 +196,11 @@ if ((Test-Path $Gguf) -and (Get-Item $Gguf).Length -gt 1900000000) {
|
|||||||
} else {
|
} else {
|
||||||
# Ultimo recurso: pull directo (1 intento, ya sin esperar 3 rondas)
|
# Ultimo recurso: pull directo (1 intento, ya sin esperar 3 rondas)
|
||||||
Warn 'HuggingFace no accesible. Probando el registry de Ollama (ultimo recurso)...'
|
Warn 'HuggingFace no accesible. Probando el registry de Ollama (ultimo recurso)...'
|
||||||
docker exec @ProxyEnv d0a1-ollama ollama pull llama3.2:3b
|
docker exec @ProxyEnv d0a1-ollama ollama pull qwen3:4b
|
||||||
if ($LASTEXITCODE -eq 0) {
|
if ($LASTEXITCODE -eq 0) {
|
||||||
$PullOk = $true
|
$PullOk = $true
|
||||||
# Contexto ampliado (el default 4096 da 400 en Open WebUI con prompts largos)
|
# Contexto ampliado (el default 4096 da 400 en Open WebUI con prompts largos)
|
||||||
docker exec d0a1-ollama sh -c 'printf "FROM llama3.2:3b\\nPARAMETER num_ctx 16384\\n" > /tmp/mf && ollama create llama3.2:3b -f /tmp/mf'
|
docker exec d0a1-ollama sh -c 'printf "FROM qwen3:4b\\nPARAMETER num_ctx 16384\\nSYSTEM /no_think\\n" > /tmp/mf && ollama create qwen3:4b -f /tmp/mf'
|
||||||
}
|
}
|
||||||
}
|
}
|
||||||
if (-not $PullOk) {
|
if (-not $PullOk) {
|
||||||
@@ -185,6 +212,11 @@ if (-not $PullOk) {
|
|||||||
}
|
}
|
||||||
exit 1
|
exit 1
|
||||||
}
|
}
|
||||||
|
}
|
||||||
|
|
||||||
|
# --- Precalentar el modelo (load a GPU/RAM ya, no en el primer mensaje) -----
|
||||||
|
Info 'Precargando el modelo en memoria...'
|
||||||
|
cmd /c docker exec d0a1-ollama sh -c 'ollama run qwen3:4b ""' '>' NUL '2>&1'
|
||||||
|
|
||||||
# --- Done -------------------------------------------------------------------
|
# --- Done -------------------------------------------------------------------
|
||||||
Write-Host ''
|
Write-Host ''
|
||||||
@@ -197,7 +229,7 @@ if ($Mode -eq 'local') {
|
|||||||
}
|
}
|
||||||
Write-Host ''
|
Write-Host ''
|
||||||
Write-Host " ${Bold}Modelos alternativos:${NC}"
|
Write-Host " ${Bold}Modelos alternativos:${NC}"
|
||||||
Write-Host ' docker exec d0a1-ollama ollama pull qwen3:4b # Mejor en espanol + razonamiento (4 GB RAM)'
|
Write-Host ' docker exec d0a1-ollama ollama pull llama3.2:3b # Mas ligero (2 GB RAM)'
|
||||||
Write-Host ' docker exec d0a1-ollama ollama pull qwen3:8b # Mas calidad (6 GB RAM)'
|
Write-Host ' docker exec d0a1-ollama ollama pull qwen3:8b # Mas calidad (6 GB RAM)'
|
||||||
Write-Host ''
|
Write-Host ''
|
||||||
Write-Host " ${Bold}Parar:${NC} .\deploy.ps1 stop"
|
Write-Host " ${Bold}Parar:${NC} .\deploy.ps1 stop"
|
||||||
|
|||||||
+3
-3
@@ -105,7 +105,7 @@ echo -e "${YELLOW}Descargando contenedores (2-3 min la primera vez)...${NC}"
|
|||||||
docker compose -f "$COMPOSE_FILE" up -d
|
docker compose -f "$COMPOSE_FILE" up -d
|
||||||
|
|
||||||
# ── Pull model ───────────────────────────────
|
# ── Pull model ───────────────────────────────
|
||||||
echo -e "${YELLOW}Descargando modelo de IA (llama3.2:3b, ~2 GB)...${NC}"
|
echo -e "${YELLOW}Descargando modelo de IA (qwen3:4b, ~2.5 GB)...${NC}"
|
||||||
MAX_WAIT=60
|
MAX_WAIT=60
|
||||||
WAITED=0
|
WAITED=0
|
||||||
until docker exec d0a1-ollama ollama ps &>/dev/null; do
|
until docker exec d0a1-ollama ollama ps &>/dev/null; do
|
||||||
@@ -116,7 +116,7 @@ until docker exec d0a1-ollama ollama ps &>/dev/null; do
|
|||||||
exit 1
|
exit 1
|
||||||
fi
|
fi
|
||||||
done
|
done
|
||||||
docker exec d0a1-ollama ollama pull llama3.2:3b
|
docker exec d0a1-ollama ollama pull qwen3:4b
|
||||||
|
|
||||||
# ── Done ────────────────────────────────────
|
# ── Done ────────────────────────────────────
|
||||||
echo ""
|
echo ""
|
||||||
@@ -129,7 +129,7 @@ else
|
|||||||
fi
|
fi
|
||||||
echo ""
|
echo ""
|
||||||
echo -e " ${BOLD}Modelos alternativos:${NC}"
|
echo -e " ${BOLD}Modelos alternativos:${NC}"
|
||||||
echo " docker exec d0a1-ollama ollama pull qwen3:4b # Mejor en español + razonamiento (4 GB RAM)"
|
echo " docker exec d0a1-ollama ollama pull llama3.2:3b # Más ligero (2 GB RAM)"
|
||||||
echo " docker exec d0a1-ollama ollama pull qwen3:8b # Más calidad (6 GB RAM)"
|
echo " docker exec d0a1-ollama ollama pull qwen3:8b # Más calidad (6 GB RAM)"
|
||||||
echo ""
|
echo ""
|
||||||
echo -e " ${BOLD}Parar:${NC} ./deploy.sh stop"
|
echo -e " ${BOLD}Parar:${NC} ./deploy.sh stop"
|
||||||
|
|||||||
@@ -6,7 +6,7 @@
|
|||||||
#
|
#
|
||||||
# Requisitos: Docker + 4 GB RAM mínimo
|
# Requisitos: Docker + 4 GB RAM mínimo
|
||||||
# Incluye: Ollama (IA local) + Open WebUI (interfaz web)
|
# Incluye: Ollama (IA local) + Open WebUI (interfaz web)
|
||||||
# Modelo por defecto: llama3.2:3b (~2 GB, corre en 4 GB RAM)
|
# Modelo por defecto: qwen3:4b (~2.5 GB, corre en 4 GB RAM)
|
||||||
services:
|
services:
|
||||||
ollama:
|
ollama:
|
||||||
container_name: d0a1-ollama
|
container_name: d0a1-ollama
|
||||||
@@ -18,7 +18,7 @@ services:
|
|||||||
- ollama_data:/root/.ollama
|
- ollama_data:/root/.ollama
|
||||||
environment:
|
environment:
|
||||||
OLLAMA_HOST: "0.0.0.0"
|
OLLAMA_HOST: "0.0.0.0"
|
||||||
OLLAMA_KEEP_ALIVE: "5m"
|
OLLAMA_KEEP_ALIVE: "-1"
|
||||||
OLLAMA_NUM_PARALLEL: "1"
|
OLLAMA_NUM_PARALLEL: "1"
|
||||||
healthcheck:
|
healthcheck:
|
||||||
test: ["CMD", "ollama", "ps"]
|
test: ["CMD", "ollama", "ps"]
|
||||||
@@ -26,6 +26,11 @@ services:
|
|||||||
timeout: 5s
|
timeout: 5s
|
||||||
retries: 10
|
retries: 10
|
||||||
start_period: 30s
|
start_period: 30s
|
||||||
|
deploy:
|
||||||
|
resources:
|
||||||
|
limits:
|
||||||
|
memory: 6G
|
||||||
|
cpus: "6.0"
|
||||||
|
|
||||||
openwebui:
|
openwebui:
|
||||||
container_name: d0a1-openwebui
|
container_name: d0a1-openwebui
|
||||||
@@ -43,6 +48,8 @@ services:
|
|||||||
ENABLE_SIGNUP: "true"
|
ENABLE_SIGNUP: "true"
|
||||||
ENABLE_WEB_SEARCH: "false"
|
ENABLE_WEB_SEARCH: "false"
|
||||||
ENABLE_DIRECT_CONNECTIONS: "false"
|
ENABLE_DIRECT_CONNECTIONS: "false"
|
||||||
|
CHAT_RESPONSE_MAX_TOOL_CALL_ITERATIONS: "1"
|
||||||
|
DEFAULT_MODEL_PARAMS: '{"function_calling": "legacy", "think": false}'
|
||||||
depends_on:
|
depends_on:
|
||||||
ollama:
|
ollama:
|
||||||
condition: service_healthy
|
condition: service_healthy
|
||||||
|
|||||||
@@ -0,0 +1,24 @@
|
|||||||
|
# ============================================================
|
||||||
|
# d0a1 pack - Open WebUI (Windows) - DESINSTALAR
|
||||||
|
# Elimina contenedores, red y volumenes (datos + modelo).
|
||||||
|
# ============================================================
|
||||||
|
|
||||||
|
$ErrorActionPreference = 'Stop'
|
||||||
|
$ScriptDir = $PSScriptRoot
|
||||||
|
if (-not $ScriptDir) { $ScriptDir = Split-Path -Parent $MyInvocation.MyCommand.Path }
|
||||||
|
$ComposeFile = Join-Path $ScriptDir 'docker-compose.yml'
|
||||||
|
|
||||||
|
function Info($m) { Write-Host ">>> $m" }
|
||||||
|
function Err($m) { Write-Host "!!! $m"; exit 1 }
|
||||||
|
|
||||||
|
# Sin confirmacion: este pack no guarda datos sensibles (solo chat + modelo).
|
||||||
|
|
||||||
|
Info 'Deteniendo y borrando contenedores...'
|
||||||
|
cmd /c docker compose -f "$ComposeFile" down -v --remove-orphans '>' NUL '2>&1'
|
||||||
|
if ($LASTEXITCODE -ne 0) { Err 'Fallo el compose down (docker no arrancado?)' }
|
||||||
|
|
||||||
|
Write-Host ''
|
||||||
|
Info 'Eliminado TODO:'
|
||||||
|
Write-Host ' - Contenedores y red'
|
||||||
|
Write-Host ' - Volumenes (incluido el modelo IA)'
|
||||||
|
Write-Host ''
|
||||||
Executable
+9
@@ -0,0 +1,9 @@
|
|||||||
|
#!/usr/bin/env bash
|
||||||
|
# d0a1 pack - Open WebUI (Linux) - DESINSTALAR
|
||||||
|
set -e
|
||||||
|
cd "$(cd "$(dirname "$0")" && pwd)"
|
||||||
|
|
||||||
|
echo ">>> Deteniendo y borrando contenedores..."
|
||||||
|
docker compose -f docker-compose.yml down -v --remove-orphans >/dev/null 2>&1 || { echo "!!! Fallo el compose down"; exit 1; }
|
||||||
|
echo ""
|
||||||
|
echo ">>> Eliminado TODO: contenedores, red y volumenes (incluido el modelo IA)."
|
||||||
+1
-1
@@ -38,7 +38,7 @@ Solo pagas el servidor. WordPress y la IA son tuyos.
|
|||||||
|
|
||||||
- WordPress 7.0 + PHP 8.4
|
- WordPress 7.0 + PHP 8.4
|
||||||
- MariaDB 11.8
|
- MariaDB 11.8
|
||||||
- Ollama (IA local, modelo llama3.2:3b por defecto)
|
- Ollama (IA local, modelo qwen3:4b por defecto)
|
||||||
- Open WebUI (interfaz de chat)
|
- Open WebUI (interfaz de chat)
|
||||||
|
|
||||||
## Comandos
|
## Comandos
|
||||||
|
|||||||
+43
-11
@@ -119,9 +119,23 @@ if (-not (Test-Path $EnvFile)) {
|
|||||||
Info "Contrasenas generadas en $EnvFile"
|
Info "Contrasenas generadas en $EnvFile"
|
||||||
}
|
}
|
||||||
|
|
||||||
|
# --- GPU NVIDIA? (si hay, Ollama la usa y va 5-10x mas rapido) ---------------
|
||||||
|
$HasGpu = $false
|
||||||
|
if (Get-Command nvidia-smi -ErrorAction SilentlyContinue) {
|
||||||
|
$GpuInfo = & nvidia-smi --query-gpu=name,memory.total --format=csv,noheader 2>$null
|
||||||
|
if ($LASTEXITCODE -eq 0 -and $GpuInfo) {
|
||||||
|
$HasGpu = $true
|
||||||
|
$GpuName = ($GpuInfo -split ',')[0].Trim()
|
||||||
|
Info "GPU NVIDIA detectada: $GpuName (aceleracion activada)"
|
||||||
|
}
|
||||||
|
}
|
||||||
|
if (-not $HasGpu) {
|
||||||
|
Warn 'Sin GPU NVIDIA: modo CPU (~10-20 tokens/s). Con una GPU NVIDIA va 5-10x mas rapido.'
|
||||||
|
}
|
||||||
# --- Auto-detect ports ----------------------------------------------------
|
# --- Auto-detect ports ----------------------------------------------------
|
||||||
# --- Tumbar deploy previo (antes de detectar puertos) ----------------------
|
# --- Tumbar deploy previo (antes de detectar puertos) ----------------------
|
||||||
cmd /c docker compose -f $ComposeFile down '>' NUL '2>&1'
|
cmd /c docker compose -f $ComposeFile down '>' NUL '2>&1'
|
||||||
|
Info 'Deploy previo detenido (down; volumenes con el modelo intactos).'
|
||||||
|
|
||||||
$OllamaPort = Find-FreePort 11434
|
$OllamaPort = Find-FreePort 11434
|
||||||
$WpPort = Find-FreePort 8080
|
$WpPort = Find-FreePort 8080
|
||||||
@@ -161,7 +175,13 @@ cmd /c docker compose -f $ComposeFile down '>' NUL '2>&1'
|
|||||||
$env:OLLAMA_PORT = "$OllamaPort"
|
$env:OLLAMA_PORT = "$OllamaPort"
|
||||||
$env:WP_PORT = "$WpPort"
|
$env:WP_PORT = "$WpPort"
|
||||||
$env:WEBUI_PORT = "$WebUiPort"
|
$env:WEBUI_PORT = "$WebUiPort"
|
||||||
docker compose -f $ComposeFile up -d
|
$ComposeArgs = @('-f', $ComposeFile)
|
||||||
|
if ($HasGpu) {
|
||||||
|
$OverrideFile = Join-Path $ScriptDir 'docker-compose.gpu.yml'
|
||||||
|
Set-Content -Path $OverrideFile -Value "services:`r`n ollama:`r`n gpus: all`r`n"
|
||||||
|
$ComposeArgs += @('-f', $OverrideFile)
|
||||||
|
}
|
||||||
|
docker compose @ComposeArgs up -d
|
||||||
if ($LASTEXITCODE -ne 0) { Err "docker compose up fallo (exit $LASTEXITCODE)."; exit 1 }
|
if ($LASTEXITCODE -ne 0) { Err "docker compose up fallo (exit $LASTEXITCODE)."; exit 1 }
|
||||||
|
|
||||||
# --- Pull model -------------------------------------------------------------
|
# --- Pull model -------------------------------------------------------------
|
||||||
@@ -181,23 +201,30 @@ while ($true) {
|
|||||||
# Si el usuario define $env:HTTPS_PROXY, Ollama lo usa para el pull (doc oficial):
|
# Si el usuario define $env:HTTPS_PROXY, Ollama lo usa para el pull (doc oficial):
|
||||||
$ProxyEnv = @()
|
$ProxyEnv = @()
|
||||||
if ($env:HTTPS_PROXY) { $ProxyEnv = @('-e', "HTTPS_PROXY=$env:HTTPS_PROXY", '-e', "HTTP_PROXY=$env:HTTP_PROXY") }
|
if ($env:HTTPS_PROXY) { $ProxyEnv = @('-e', "HTTPS_PROXY=$env:HTTPS_PROXY", '-e', "HTTP_PROXY=$env:HTTP_PROXY") }
|
||||||
# --- Modelo: HF primero (CDN propio, rapido) y registry de Ollama como ultimo recurso ---
|
# --- Modelo ya presente? (volumen persistente: no re-descargar) ------------
|
||||||
$Gguf = Join-Path $ScriptDir 'llama3.2-3b-q4.gguf'
|
$ModelList = docker exec d0a1-wp-ollama ollama list 2>$null
|
||||||
|
if ("$ModelList" -match 'qwen3:4b') {
|
||||||
|
Info 'Modelo qwen3:4b ya descargado (volumen intacto). Omitiendo descarga.'
|
||||||
|
cmd /c docker exec d0a1-wp-ollama sh -c 'printf "FROM qwen3:4b\\nPARAMETER num_ctx 16384\\nSYSTEM /no_think\\n" > /tmp/mf && ollama create qwen3:4b -f /tmp/mf' '>' NUL '2>&1'
|
||||||
|
} else {
|
||||||
|
# --- Modelo: HF primero (CDN propio, rapido) y registry de Ollama como ultimo recurso ---
|
||||||
|
|
||||||
|
$Gguf = Join-Path $ScriptDir 'qwen3-4b-q4.gguf'
|
||||||
$HfUrls = @(
|
$HfUrls = @(
|
||||||
'https://huggingface.co/bartowski/Llama-3.2-3B-Instruct-GGUF/resolve/main/Llama-3.2-3B-Instruct-Q4_K_M.gguf',
|
'https://huggingface.co/Qwen/Qwen3-4B-GGUF/resolve/main/Qwen3-4B-Q4_K_M.gguf',
|
||||||
'https://huggingface.co/unsloth/Llama-3.2-3B-Instruct-GGUF/resolve/main/Llama-3.2-3B-Instruct-Q4_K_M.gguf'
|
'https://huggingface.co/unsloth/Qwen3-4B-GGUF/resolve/main/Qwen3-4B-Q4_K_M.gguf'
|
||||||
)
|
)
|
||||||
Info 'Descargando modelo de IA (llama3.2:3b, ~2 GB)...'
|
Info 'Descargando modelo de IA (qwen3:4b, ~2.5 GB)...'
|
||||||
foreach ($Url in $HfUrls) {
|
foreach ($Url in $HfUrls) {
|
||||||
curl.exe -# -L --retry 3 --max-time 1800 -o "$Gguf" $Url
|
curl.exe -# -L --retry 3 --max-time 1800 -o "$Gguf" $Url
|
||||||
if ($LASTEXITCODE -eq 0 -and (Test-Path $Gguf) -and (Get-Item $Gguf).Length -gt 1900000000) { break }
|
if ($LASTEXITCODE -eq 0 -and (Test-Path $Gguf) -and (Get-Item $Gguf).Length -gt 2400000000) { break }
|
||||||
Remove-Item "$Gguf" -Force -ErrorAction SilentlyContinue
|
Remove-Item "$Gguf" -Force -ErrorAction SilentlyContinue
|
||||||
if ($Url -ne $HfUrls[-1]) { Warn 'Mirror no accesible, probando el siguiente...' }
|
if ($Url -ne $HfUrls[-1]) { Warn 'Mirror no accesible, probando el siguiente...' }
|
||||||
}
|
}
|
||||||
if ((Test-Path $Gguf) -and (Get-Item $Gguf).Length -gt 1900000000) {
|
if ((Test-Path $Gguf) -and (Get-Item $Gguf).Length -gt 2400000000) {
|
||||||
Info 'Importando modelo en Ollama...'
|
Info 'Importando modelo en Ollama...'
|
||||||
docker cp "$Gguf" d0a1-wp-ollama:/root/.ollama/import.gguf
|
docker cp "$Gguf" d0a1-wp-ollama:/root/.ollama/import.gguf
|
||||||
docker exec d0a1-wp-ollama sh -c 'printf "FROM /root/.ollama/import.gguf\\nPARAMETER num_ctx 16384\\n" > /tmp/mf && ollama create llama3.2:3b -f /tmp/mf'
|
docker exec d0a1-wp-ollama sh -c 'printf "FROM /root/.ollama/import.gguf\\nPARAMETER num_ctx 16384\\nSYSTEM /no_think\\n" > /tmp/mf && ollama create qwen3:4b -f /tmp/mf'
|
||||||
$CreateOk = ($LASTEXITCODE -eq 0)
|
$CreateOk = ($LASTEXITCODE -eq 0)
|
||||||
docker exec d0a1-wp-ollama rm -f /root/.ollama/import.gguf | Out-Null
|
docker exec d0a1-wp-ollama rm -f /root/.ollama/import.gguf | Out-Null
|
||||||
Remove-Item "$Gguf" -Force -ErrorAction SilentlyContinue
|
Remove-Item "$Gguf" -Force -ErrorAction SilentlyContinue
|
||||||
@@ -206,11 +233,11 @@ if ((Test-Path $Gguf) -and (Get-Item $Gguf).Length -gt 1900000000) {
|
|||||||
} else {
|
} else {
|
||||||
# Ultimo recurso: pull directo (1 intento, ya sin esperar 3 rondas)
|
# Ultimo recurso: pull directo (1 intento, ya sin esperar 3 rondas)
|
||||||
Warn 'HuggingFace no accesible. Probando el registry de Ollama (ultimo recurso)...'
|
Warn 'HuggingFace no accesible. Probando el registry de Ollama (ultimo recurso)...'
|
||||||
docker exec @ProxyEnv d0a1-wp-ollama ollama pull llama3.2:3b
|
docker exec @ProxyEnv d0a1-wp-ollama ollama pull qwen3:4b
|
||||||
if ($LASTEXITCODE -eq 0) {
|
if ($LASTEXITCODE -eq 0) {
|
||||||
$PullOk = $true
|
$PullOk = $true
|
||||||
# Contexto ampliado (el default 4096 da 400 en Open WebUI con prompts largos)
|
# Contexto ampliado (el default 4096 da 400 en Open WebUI con prompts largos)
|
||||||
docker exec d0a1-wp-ollama sh -c 'printf "FROM llama3.2:3b\\nPARAMETER num_ctx 16384\\n" > /tmp/mf && ollama create llama3.2:3b -f /tmp/mf'
|
docker exec d0a1-wp-ollama sh -c 'printf "FROM qwen3:4b\\nPARAMETER num_ctx 16384\\nSYSTEM /no_think\\n" > /tmp/mf && ollama create qwen3:4b -f /tmp/mf'
|
||||||
}
|
}
|
||||||
}
|
}
|
||||||
if (-not $PullOk) {
|
if (-not $PullOk) {
|
||||||
@@ -222,6 +249,11 @@ if (-not $PullOk) {
|
|||||||
}
|
}
|
||||||
exit 1
|
exit 1
|
||||||
}
|
}
|
||||||
|
}
|
||||||
|
|
||||||
|
# --- Precalentar el modelo (load a GPU/RAM ya, no en el primer mensaje) -----
|
||||||
|
Info 'Precargando el modelo en memoria...'
|
||||||
|
cmd /c docker exec d0a1-wp-ollama sh -c 'ollama run qwen3:4b ""' '>' NUL '2>&1'
|
||||||
|
|
||||||
# --- Done -------------------------------------------------------------------
|
# --- Done -------------------------------------------------------------------
|
||||||
Write-Host ''
|
Write-Host ''
|
||||||
|
|||||||
+2
-2
@@ -124,7 +124,7 @@ echo -e "${YELLOW}Descargando contenedores (3-5 min la primera vez)...${NC}"
|
|||||||
docker compose -f "$COMPOSE_FILE" up -d
|
docker compose -f "$COMPOSE_FILE" up -d
|
||||||
|
|
||||||
# ── Pull model ───────────────────────────────
|
# ── Pull model ───────────────────────────────
|
||||||
echo -e "${YELLOW}Descargando modelo de IA (llama3.2:3b, ~2 GB)...${NC}"
|
echo -e "${YELLOW}Descargando modelo de IA (qwen3:4b, ~2.5 GB)...${NC}"
|
||||||
MAX_WAIT=60
|
MAX_WAIT=60
|
||||||
WAITED=0
|
WAITED=0
|
||||||
until docker exec d0a1-wp-ollama ollama ps &>/dev/null; do
|
until docker exec d0a1-wp-ollama ollama ps &>/dev/null; do
|
||||||
@@ -135,7 +135,7 @@ until docker exec d0a1-wp-ollama ollama ps &>/dev/null; do
|
|||||||
exit 1
|
exit 1
|
||||||
fi
|
fi
|
||||||
done
|
done
|
||||||
docker exec d0a1-wp-ollama ollama pull llama3.2:3b
|
docker exec d0a1-wp-ollama ollama pull qwen3:4b
|
||||||
|
|
||||||
# ── Done ────────────────────────────────────
|
# ── Done ────────────────────────────────────
|
||||||
echo ""
|
echo ""
|
||||||
|
|||||||
@@ -52,13 +52,18 @@ services:
|
|||||||
- ollama_data:/root/.ollama
|
- ollama_data:/root/.ollama
|
||||||
environment:
|
environment:
|
||||||
OLLAMA_HOST: "0.0.0.0"
|
OLLAMA_HOST: "0.0.0.0"
|
||||||
OLLAMA_KEEP_ALIVE: "5m"
|
OLLAMA_KEEP_ALIVE: "-1"
|
||||||
healthcheck:
|
healthcheck:
|
||||||
test: ["CMD", "ollama", "ps"]
|
test: ["CMD", "ollama", "ps"]
|
||||||
interval: 15s
|
interval: 15s
|
||||||
timeout: 5s
|
timeout: 5s
|
||||||
retries: 10
|
retries: 10
|
||||||
start_period: 30s
|
start_period: 30s
|
||||||
|
deploy:
|
||||||
|
resources:
|
||||||
|
limits:
|
||||||
|
memory: 6G
|
||||||
|
cpus: "6.0"
|
||||||
|
|
||||||
openwebui:
|
openwebui:
|
||||||
container_name: d0a1-wp-openwebui
|
container_name: d0a1-wp-openwebui
|
||||||
@@ -73,6 +78,8 @@ services:
|
|||||||
WEBUI_NAME: "d0a1"
|
WEBUI_NAME: "d0a1"
|
||||||
WEBUI_AUTH: "false"
|
WEBUI_AUTH: "false"
|
||||||
DEFAULT_LOCALE: "es"
|
DEFAULT_LOCALE: "es"
|
||||||
|
CHAT_RESPONSE_MAX_TOOL_CALL_ITERATIONS: "1"
|
||||||
|
DEFAULT_MODEL_PARAMS: '{"function_calling": "legacy", "think": false}'
|
||||||
depends_on:
|
depends_on:
|
||||||
ollama:
|
ollama:
|
||||||
condition: service_healthy
|
condition: service_healthy
|
||||||
|
|||||||
@@ -0,0 +1,28 @@
|
|||||||
|
# ============================================================
|
||||||
|
# d0a1 pack - WordPress + IA (Windows) - DESINSTALAR
|
||||||
|
# Elimina contenedores, red y volumenes (datos + modelo).
|
||||||
|
# ============================================================
|
||||||
|
|
||||||
|
$ErrorActionPreference = 'Stop'
|
||||||
|
$ScriptDir = $PSScriptRoot
|
||||||
|
if (-not $ScriptDir) { $ScriptDir = Split-Path -Parent $MyInvocation.MyCommand.Path }
|
||||||
|
$ComposeFile = Join-Path $ScriptDir 'docker-compose.yml'
|
||||||
|
|
||||||
|
function Info($m) { Write-Host ">>> $m" }
|
||||||
|
function Err($m) { Write-Host "!!! $m"; exit 1 }
|
||||||
|
|
||||||
|
Write-Host ''
|
||||||
|
Write-Host '>>> ATENCION: esto borra TAMBIEN la base de datos y el contenido de WordPress.'
|
||||||
|
$Resp = Read-Host 'Continuar? [y/N]'
|
||||||
|
if ($Resp -notmatch '^[Yy]') { Write-Host 'Cancelado.'; exit 0 }
|
||||||
|
Write-Host ''
|
||||||
|
|
||||||
|
Info 'Deteniendo y borrando contenedores...'
|
||||||
|
cmd /c docker compose -f "$ComposeFile" down -v --remove-orphans '>' NUL '2>&1'
|
||||||
|
if ($LASTEXITCODE -ne 0) { Err 'Fallo el compose down (docker no arrancado?)' }
|
||||||
|
|
||||||
|
Write-Host ''
|
||||||
|
Info 'Eliminado TODO:'
|
||||||
|
Write-Host ' - Contenedores y red'
|
||||||
|
Write-Host ' - Volumenes (incluido el modelo IA)'
|
||||||
|
Write-Host ''
|
||||||
Executable
+12
@@ -0,0 +1,12 @@
|
|||||||
|
#!/usr/bin/env bash
|
||||||
|
# d0a1 pack - WordPress + IA (Linux) - DESINSTALAR
|
||||||
|
set -e
|
||||||
|
cd "$(cd "$(dirname "$0")" && pwd)"
|
||||||
|
read -r -p ">>> ATENCION: borra TAMBIEN la BD de WordPress. Continuar? [y/N] " r
|
||||||
|
case "$r" in [yY]*) ;; *) echo Cancelado.; exit 0;; esac
|
||||||
|
echo ""
|
||||||
|
|
||||||
|
echo ">>> Deteniendo y borrando contenedores..."
|
||||||
|
docker compose -f docker-compose.yml down -v --remove-orphans >/dev/null 2>&1 || { echo "!!! Fallo el compose down"; exit 1; }
|
||||||
|
echo ""
|
||||||
|
echo ">>> Eliminado TODO: contenedores, red y volumenes (incluido el modelo IA)."
|
||||||
Reference in new issue
Block a user