A Modal Logic for Temporal and Jurisdictional Classifier Models
Di Florio, Dong, Rotolo
Logic-based models can be used to build verification tools for machine learning classifiers employed in the legal field. ML classifiers predict the outcomes of new cases based on previous ones, thereby performing a form of case-based reasoning (CBR). In this paper, we introduce a modal logic of classifiers designed to formally capture legal CBR. We incorporate principles for resolving conflicts between precedents, by introducing into the logic the temporal dimension of cases and the hierarchy of courts within the legal system.
academic
Eine Modallogik für zeitliche und jurisdiktionelle Klassifikatormodelle
Logikbasierte Modelle können zur Entwicklung von Verifikationswerkzeugen für Maschinenlern-Klassifikatoren im Rechtsbereich eingesetzt werden. ML-Klassifikatoren prognostizieren die Ergebnisse neuer Fälle basierend auf vorherigen Fällen und führen somit eine Form des fallbasierten Schließens (Case-Based Reasoning, CBR) durch. In diesem Papier führen wir eine Modallogik von Klassifikatoren ein, die dazu konzipiert ist, das juristische CBR formal zu erfassen. Wir integrieren Prinzipien zur Konfliktlösung zwischen Präzedenzfällen, indem wir die zeitliche Dimension von Fällen und die Hierarchie der Gerichte innerhalb des Rechtssystems in die Logik einführen.
Verifikationsbedarf in der Rechts-KI: Die Anwendung von Maschinenlern-Klassifikatoren im Rechtsbereich nimmt zu, doch die normative Korrektheit, Genauigkeit und Robustheit ihrer Vorhersageergebnisse können nicht garantiert werden, was Richter beunruhigt
Präzedenzfall-Bindungsproblem: In Common-Law-Systemen müssen Klassifikatoren die Präzedenzfall-Bindung (precedential constraint) erfüllen und das Prinzip des „stare decisis" (Bindung an Präzedenzfälle) befolgen
Präzedenzfall-Konflikte: In realen Rechtssystemen existieren Präzedenzfall-Konflikte, während bestehende Horty-Modelle Fallkonsistenz voraussetzen und Konflikte zwischen Präzedenzfällen nicht bewältigen können
Juristische Fallanalyse ist im Wesentlichen eine Form des fallbasierten Schließens (CBR), wobei Maschinenlern-Klassifikatoren historische Fälle zur Vorhersage neuer Fallergebnisse nutzen. Bestehende Modelle können jedoch Präzedenzfall-Konflikte nicht bewältigen und erfordern die Einführung zeitlicher und hierarchischer Dimensionen zur Lösung dieses Problems.
Erweiterung des BCL-Rahmens: Einführung zeitlicher und hierarchischer Operatoren auf Grundlage der binären Eingabe-Klassifikatorlogik (BCL) zur Konstruktion des zeitlich-jurisdiktionellen Klassifikatormodells (TJCM)
Formalisierung des Präzedenzfall-Konzepts: Strenge Definition der Konzepte Präzedenzfall, potenziell bindender Präzedenzfall und bindender Präzedenzfall
Rechenkomplexität: Komplexität der rekursiven per-incuriam-Berechnung nicht analysiert
Empirische Validierung: Mangel an Validierung mit großflächigen realen Daten
Relevanz-Definition: Relevanzbeziehungs-Definition zu weit gefasst
Rechtsordnungsübergreifende Anwendbarkeit: Hauptsächlich auf Common-Law-Systeme ausgerichtet, Anwendbarkeit auf andere Rechtsordnungen nicht ausreichend diskutiert
Blackburn et al. (2001): Theoretische Grundlagen der Modallogik
MacCormick & Summers (1997): Vergleichende Forschung zur Präzedenzfall-Interpretation
Gesamtbewertung: Dies ist ein theoretisch sehr starkes Papier mit wichtigen Beiträgen im Schnittstellenbereich von Rechts-KI und Logik. Obwohl es in der empirischen Validierung gewisse Mängel aufweist, verleihen die Strenge und Innovativität des theoretischen Rahmens ihm bedeutende akademische und praktische Potenziale.