sergio/takana

1#!/bin/sh
2# perfilar.sh — corrida de entrenamiento PGO: recorre el corpus con el firefox INSTRUMENTADO y deja
3# los `.profraw` en /salida. Pensado para correr dentro de un bwrap con:
4#   --ro-bind <rootfs> /   --ro-bind <corpus> /pgo   --bind <salida> /salida   --unshare-pid
5#
6# ══ TRES DEFENSAS QUE NO SON PARANOIA: LAS TRES SE PAGARON ═════════════════════════════════════
7#
8# 1. `--unshare-pid` EN EL BWRAP (fuera de este script). Sin él los hijos SOBREVIVEN al sandbox: un
9#    `http.server` quedó vivo 19 HORAS, retuvo el puerto y envenenó las corridas siguientes.
10#
11# 2. PUERTO ALEATORIO POR CORRIDA. Elimina la colisión de raíz en vez de detectarla: si otro proceso
12#    tiene un puerto, este arranque usa otro y no se entera.
13#
14# 3. MARCADOR ÚNICO POR CORRIDA, servido desde una copia ESCRIBIBLE del corpus. La primera versión
15#    horneaba el marcador como constante del script, y eso rompía justo lo que el chequeo existe
16#    para probar: un servidor ajeno servía el MISMO fichero de marca y el chequeo lo daba por bueno.
17#    Verificaba «alguien sirve este contenido», no «este servidor es el mío».
18#
19# ⚠ Y LOS SANDBOXES DE FIREFOX VAN APAGADOS. Con ellos los procesos hijo mueren con SIGNAL 11, el
20# que renderiza no llega a nacer, el servidor registra 0 GET y el único `.profraw` es el del padre
21# arrancando: un perfil de nada, con todo en verde. Es lo mismo que hace el `profileserver.py` de
22# Mozilla. Sólo aplica al entrenamiento; el firefox que se distribuye lleva sus sandboxes intactos.
23set -u
24export HOME=/tmp/home; mkdir -p "$HOME"
25export LANG=C.UTF-8 MOZ_HEADLESS=1 LIBGL_ALWAYS_SOFTWARE=1
26# Los CINCO sandboxes de Gecko apagados, no cuatro: el sandbox propio de Gecko no puede montar su user-namespace dentro de bwrap
27# (uid_map: EPERM) y CADA intento fallido deja un ayudante 'Sandbox Forked' muerto de SIGSEGV.
28# Medido 2026-09-08: 2 cadáveres por corrida con sólo CONTENT apagado, 0 con los cinco. Acá no
29# se pierde nada: bwrap YA es la jaula. Ver scripts/diagnostico/cazar-cuelgue-headless.sh.
30export MOZ_DISABLE_CONTENT_SANDBOX=1 MOZ_DISABLE_GMP_SANDBOX=1 MOZ_DISABLE_RDD_SANDBOX=1 MOZ_DISABLE_SOCKET_PROCESS_SANDBOX=1 MOZ_DISABLE_UTILITY_SANDBOX=1
31export LLVM_PROFILE_FILE=/salida/ff-%p-%m.profraw
32
33MARCA="pgo-$$-$(cat /proc/sys/kernel/random/uuid 2>/dev/null || echo ${RANDOM:-0}${RANDOM:-0})"
34PUERTO=$(( 20000 + $$ % 20000 ))
35
36# Copia ESCRIBIBLE del corpus (tmpfs): hace falta para poner el marcador dentro de lo que se sirve.
37SERVIR=/tmp/servir; mkdir -p "$SERVIR"; cp -a /pgo/. "$SERVIR"/ 2>/dev/null
38printf '%s\n' "$MARCA" > "$SERVIR/marca.txt"
39
40cd "$SERVIR" && /usr/bin/python3 -m http.server "$PUERTO" --bind 127.0.0.1 > /salida/httpd.log 2>&1 &
41
42# Espera CON REINTENTO (un `sleep` fijo concluía «no responde» sobre un servidor que sí iba a
43# responder) y exigiendo el marcador de ESTA corrida.
44i=0
45while [ $i -lt 25 ]; do
46  got=$(/usr/bin/python3 -c "import urllib.request
47try: print(urllib.request.urlopen('http://127.0.0.1:$PUERTO/marca.txt',timeout=3).read().decode().strip())
48except Exception: pass" 2>/dev/null)
49  [ "$got" = "$MARCA" ] && break
50  i=$((i+1)); sleep 1
51done
52[ $i -lt 25 ] || {
53  echo "!! en $PUERTO no contesta MI servidor (marca leída: '${got:-nada}') — abortando antes de" >&2
54  echo "   generar perfiles de páginas que nunca se cargaron." >&2
55  tail -3 /salida/httpd.log >&2
56  exit 1
57}
58echo "== servidor propio OK en $PUERTO"
59
60n=0
61for f in $(cd "$SERVIR" && find . -name '*.html' | sed 's|^\./||' | sort); do
62  n=$((n+1))
63  LD_LIBRARY_PATH=/usr/lib/firefox timeout 200 /usr/lib/firefox/firefox --headless \
64     --screenshot /salida/shot.png "http://127.0.0.1:$PUERTO/$f" >/dev/null 2>&1
65  printf '.'
66done
67echo ""
68echo "== páginas recorridas: $n"
69echo "== GETs servidos:      $(grep -c GET /salida/httpd.log 2>/dev/null)"
70echo "== .profraw:           $(ls /salida/*.profraw 2>/dev/null | wc -l)"