Files
ThothII/harness/tht/execute/__init__.py
T
marcopanandClaude Opus 4.8 c4d130828f fix(harness): remediation difetti review — gate↔CLI, D15, D7/D6, D14, robustezza
Implementazione del piano di remediation progressiva sui difetti emersi
dall'analisi dell'harness. Tutto verificato: 214 test Python (incl. L0 su
Postgres reale), 14 test JS del gate, ruff pulito.

Blocco 1 (CRITICA, integrazione gate↔CLI):
- phase advance: gate usa --auto + exit 6; reviewer_confirm kind:phase fa
  advance esplicito che applica i prerequisiti (prima non avanzava per le
  fasi a conferma umana).
- cte plan riceve i --name dal gate (param names); set-question con id
  posizionale; skill `tht search find`; nuovo comando `tht memory save-one`
  con dedup hash client-side in save_one_memory.

Blocco 2 (D15, stato post-rollback):
- campo `phase` su DecisionRecord + effective_decisions phase-aware per i
  subject "a nome" (cte_approved ecc.); _compute_promotions e finalize sulla
  vista effective; finalize confronta col piano CTE effettivo, non glob;
  `decision add --retracts` + comando `decision retract`.

Blocco 3 (D7 read-only + D6 manifest):
- assert_read_only su tutti e quattro i codepath (direct + REST);
- manifest author/summary/updated_at/updated_by/schema_version popolati +
  helper touch_manifest sulle mutazioni.

Blocco 4-5 (D14a/D14b):
- decision_min_phase data-driven via `emits:` in workflow.yaml;
- formula evidence: status auto, search_formulas, gruppo CLI `tht formula`,
  `search find --kind formula`, load_evidence_dir salta i .sql.md.

Blocco 6 (robustezza):
- taskdoc slice promoted_tables + bound enforced; report escaping/bound +
  rsplit note; filtro kind reader REST/direct; conteggio upserted robusto;
  guard REST run_query non-list; LSH disallineato -> LshIndexError.

Blocco 7 (pulizia):
- dead code gate e KIND_TO_TABLE morto rimossi; doc Postgres-only
  (README + connection.py).

Blocco 0 (parziale): test di compatibilità firma gate↔CLI
(tests/integration). Rinviati: fake-Pi runtime completo, artifact-gate da
disco (#23), parità eligibility REST/direct (#28), unificazione
reserved-labels (#30), memory_rejected da deselezione (#33).

Co-Authored-By: Claude Opus 4.8 <noreply@anthropic.com>
2026-06-27 17:16:51 +02:00

126 lines
4.4 KiB
Python

import json
import time
from dataclasses import dataclass
import sqlglot
from sqlalchemy import Engine, text
from sqlalchemy.exc import DBAPIError
class ExecutionError(Exception):
"""Errore di esecuzione con messaggio leggibile per il reviewer."""
@dataclass
class ExecResult:
columns: list[str]
rows: list[tuple]
execution_ms: int
truncated: bool
@dataclass
class PlanSummary:
total_cost: float
plan_rows: int
node_types: list[str]
def _inject_limit(sql: str, limit: int) -> tuple[str, bool]:
"""Aggiunge LIMIT limit+1 se assente (il +1 serve a rilevare il troncamento).
Se la query ha gia' un suo LIMIT, lo si rispetta."""
ast = sqlglot.parse_one(sql, read="postgres")
# solo le query (SELECT/UNION & co.) accettano un LIMIT: per qualunque altro
# statement non si inietta nulla e la transazione READ ONLY lo rifiutera' (rete 2).
if not isinstance(ast, sqlglot.exp.Query) or ast.args.get("limit") is not None:
return sql, False
return ast.limit(limit + 1).sql(dialect="postgres"), True
def assert_read_only(sql: str) -> None:
"""Guard read-only strutturale condiviso dai due codepath di esecuzione (D7).
Difesa in profondita': oltre alla rete server (utente RO / READ ONLY tx / RPC
SELECT-only), ogni esecuzione passa da qui, cosi' anche un riuso diretto delle API
Python (es. dal backend) non puo' bypassare il single-statement + SELECT-only.
Usa sqlcheck.validate_sql senza schema fisico: parse + un solo statement +
read-only per struttura + funzioni vietate.
"""
from tht.sqlcheck import validate_sql
check = validate_sql(sql)
if not check.ok:
raise ExecutionError(
"SQL rifiutato (read-only enforcement): " + "; ".join(check.errors)
)
def _translate_error(e: DBAPIError) -> ExecutionError:
msg = str(e.orig)
if "statement timeout" in msg or "canceling statement" in msg:
return ExecutionError("timeout: la query ha superato statement_timeout_ms")
if "read-only" in msg:
return ExecutionError("rifiutato: statement non eseguibile in transazione read-only")
return ExecutionError(f"errore SQL: {msg}")
def run_controlled(engine: Engine, sql: str, *, limit: int, timeout_ms: int) -> ExecResult:
"""Esecuzione nelle 4 reti: utente RO (a monte), transazione READ ONLY,
statement_timeout, LIMIT iniettato via AST. Guard read-only client-side a monte."""
assert_read_only(sql)
final_sql, injected = _inject_limit(sql, limit)
start = time.monotonic()
with engine.connect() as conn:
trans = conn.begin()
try:
conn.execute(text("SET TRANSACTION READ ONLY"))
conn.execute(text(f"SET LOCAL statement_timeout = {int(timeout_ms)}"))
result = conn.execute(text(final_sql))
columns = list(result.keys())
rows = [tuple(r) for r in result.fetchall()]
except DBAPIError as e:
raise _translate_error(e) from e
finally:
trans.rollback()
elapsed_ms = int((time.monotonic() - start) * 1000)
truncated = injected and len(rows) > limit
return ExecResult(
columns=columns, rows=rows[:limit], execution_ms=elapsed_ms, truncated=truncated
)
def explain(engine: Engine, sql: str, *, timeout_ms: int) -> PlanSummary:
"""EXPLAIN (FORMAT JSON), mai ANALYZE: il piano si stima, non si esegue.
assert_read_only a monte: l'EXPLAIN interpola lo SQL, quindi il single-statement +
SELECT-only va garantito anche qui (non solo nel chiamante CLI)."""
assert_read_only(sql)
with engine.connect() as conn:
trans = conn.begin()
try:
conn.execute(text("SET TRANSACTION READ ONLY"))
conn.execute(text(f"SET LOCAL statement_timeout = {int(timeout_ms)}"))
row = conn.execute(text(f"EXPLAIN (FORMAT JSON) {sql}")).fetchone()
except DBAPIError as e:
raise _translate_error(e) from e
finally:
trans.rollback()
payload = row[0]
if isinstance(payload, str):
payload = json.loads(payload)
plan = payload[0]["Plan"]
node_types: list[str] = []
def collect(node: dict) -> None:
node_types.append(node.get("Node Type", "?"))
for child in node.get("Plans", []):
collect(child)
collect(plan)
return PlanSummary(
total_cost=float(plan.get("Total Cost", 0.0)),
plan_rows=int(plan.get("Plan Rows", 0)),
node_types=node_types,
)