Email del lettore a Tyler Cowen illustra quattro rischi istituzionali per le costituzioni AI basate sulla giurisprudenza
Punti chiave
- •Anthropic utilizza una costituzione per Claude dal 2023 nell’ambito del suo approccio Constitutional AI.
- •Scott Jenkins ha affermato che un modello basato sui casi per la governance dell’IA potrebbe essere più adattabile di una costituzione statica.
- •Ha avvertito che la revisione umana potrebbe diventare un collo di bottiglia perché i sistemi AI producono molti più casi limite di quanti gli arbitri possano gestire.
- •Jenkins ha anche osservato che il precedente potrebbe diventare incoerente e che i revisori AI potrebbero condividere punti ciechi.
- •Il post non specifica chi fungerebbe da arbitro per una costituzione basata sui casi in Anthropic né quale potere di enforcement avrebbe.

Marginal Revolution, il blog economico co-firmato dall’economista della George Mason University Tyler Cowen, ha pubblicato un’email di Scott Jenkins in risposta alle note di Cowen sulla visita ad Anthropic per consigliare sulla costituzione di Claude. Anthropic pubblica una costituzione per Claude dal 2023 — un insieme scritto di principi che orienta il comportamento dell’assistente, basato sulla ricerca dell’azienda nel campo della Constitutional AI — quindi la discussione riguarda quale forma di governance debba affiancare tale documento, non il fatto che esista. Jenkins definisce un approccio di common law, basato sui casi, più adattabile di un testo statico, ma avverte che comporta rischi strutturali.
“Dear Tyler,
I enjoyed reading your notes on visiting Anthropic to advise on Claude's constitution. Framing AI governance around the common law, case law (“Talmud”), and independent adjudication is a much more adaptive approach than relying on a static, top-down text.
That said, moving from a fixed text to a case-law system introduces its own set of structural risks. If Anthropic adopts this direction, a few institutional design hazards seem worth anticipating:
The throughput bottleneck (Speed vs. Due Process): AI models generate billions of dynamic, edge-case interactions daily, while human judicial processes operate at human speed. If human adjudicators can only review a tiny fraction of flagged disputes, the actual operational rules will quietly decouple from official doctrine. Without automated verification tools to bridge this bandwidth gap, real oversight may only touch superficial cases.
The danger of tangled precedent (Doctrinal bloat): The common law works because human societies change at a manageable pace. With rapid model updates and shifting capabilities, the volume of case law, exceptions, and secondary interpretations could quickly become self-contradictory. Over time, this leads to doctrine that serves as post-hoc justification rather than a coherent operational constraint.
Correlated blind spots among AI reviewers: Using a diverse panel of AIs to detect constitutional drift is clever, but if these models share similar base data, fine-tuning techniques, or foundational architectures, their consensus will have shared blind spots. A model might learn to satisfy the specific rubrics of the reviewer panel while still drifting in ways the entire panel fails to register.
The “Hollow Court” trap: The hardest problem in any independent judiciary is enforcement against the institution funding it. If economic or competitive pressures rise, an adjudicative board that lacks hard veto power risks becoming purely performative—producing elaborate legal commentary while commercial realities dictate the real guardrails.
The common-law analogy is compelling, but the real test is whether the institutional machinery can handle the sheer velocity and scale of software.”
Le quattro criticità individuate da Jenkins traducono in un contesto software questioni di lunga data sulla progettazione istituzionale — come i tribunali restino indipendenti dalle istituzioni che li finanziano e come un precedente accumulato resti coerente. La supervisione indipendente dei modelli di frontiera è già un tema attivo in tutta l’industria: i laboratori pubblicano documenti di costituzione e system card, e team esterni di red-teaming e istituti governativi per la sicurezza hanno assunto ruoli di auditing per i principali sviluppatori. Ciò che il post lascia aperto è chi dovrebbe giudicare una costituzione basata sui casi in Anthropic e quale autorità di enforcement un tale organismo avrebbe effettivamente.
Il post è apparso su Marginal Revolution il 25 agosto 2026.