Auction Design using Value Prediction with Hallucinations
Lobel, Moreira, Mouchtaki
We investigate a Bayesian mechanism design problem where a seller seeks to maximize revenue by selling an indivisible good to one of n buyers, incorporating potentially unreliable predictions (signals) of buyers' private values derived from a machine learning model. We propose a framework where these signals are sometimes reflective of buyers' true valuations but other times are hallucinations, which are uncorrelated with the buyers' true valuations. Our main contribution is a characterization of the optimal auction under this framework. Our characterization establishes a near-decomposition of how to treat types above and below the signal. For the one buyer case, the seller's optimal strategy is to post one of three fairly intuitive prices depending on the signal, which we call the "ignore", "follow" and "cap" actions.
academic
Auktionsdesign mit Wertvorhersage und Halluzinationen
Dieses Papier untersucht ein Bayessches Mechanismusdesign-Problem, bei dem ein Verkäufer seinen Umsatz durch den Verkauf eines unteilbaren Gutes an einen von n Käufern maximieren möchte, wobei potenziell unzuverlässige Vorhersagen (Signale) der privaten Wertschätzungen der Käufer aus Maschinenlernmodellen verwendet werden. Die Autoren präsentieren einen Rahmen, in dem diese Signale manchmal die wahren Schätzungen der Käufer widerspiegeln, aber manchmal „Halluzinationen" sind, die völlig unabhängig von den wahren Wertschätzungen sind. Der Hauptbeitrag ist eine Charakterisierung optimaler Auktionen in diesem Rahmen, die eine näherungsweise Zerlegung für die Behandlung von Typen oberhalb und unterhalb des Signals etabliert. Für den Fall eines einzelnen Käufers besteht die optimale Strategie des Verkäufers darin, je nach Signal einen von drei intuitiven Preisen festzulegen, die als „Ignorieren", „Folgen" und „Deckelung" bezeichnet werden.
Das Kernproblem, das dieses Papier adressiert, ist: Wie kann man optimale Auktionsmechanismen gestalten, wenn moderne Maschinenlernmodelle (insbesondere große Sprachmodelle und tiefe neuronale Netze) „Halluzinationen" produzieren? Diese Modelle generieren manchmal scheinbar hochwertige Ausgaben, die tatsächlich völlig unabhängig von der wahren Zielgröße sind.
Praktischer Anwendungswert: In praktischen Anwendungen wie Werbeauktionen verwenden Verkäufer häufig Maschinenlernmodelle zur Vorhersage von Käuferschätzungen, aber diese Vorhersagen können unzuverlässig sein
Theoretische Herausforderung: Die klassische Auktionstheorie von Myerson (1981) kann nicht direkt auf Fälle angewendet werden, in denen die posteriore Verteilung keine kontinuierliche Dichte aufweist
Technologischer Trend: Mit der weit verbreiteten Anwendung von LLMs und tiefen neuronalen Netzen wird das Halluzinationsproblem zunehmend wichtiger
Neuartiger Bayesscher Rahmen: Erstmals werden Halluzinationen von Maschinenlernmodellen in die Auktionstheorie integriert, mit einem binären Modell, in dem Signale entweder genau oder vollständig zufällig sind
Vollständige Charakterisierung optimaler Auktionen: Erweitert die Techniken von Monteiro und Svaiter (2010) und bietet geschlossene Lösungen für optimale Auktionen, wenn die posteriore Verteilung keine Dichte hat
Näherungsweise Zerlegungssatz: Beweist, dass die virtuelle Wertfunktion in der Nähe von Signalpunkten näherungsweise zerlegt werden kann, was den komplexen Ironing-Prozess vereinfacht
Drei-Intervall-Strategie: Für den Fall eines einzelnen Käufers wird eine intuitive „Ignorieren-Folgen-Deckelung"-Strategie bereitgestellt
Vergleichende Analyse: Tiefgehender Vergleich mit dem traditionellen „Wert-plus-Rauschen"-Modell, der die wichtige Auswirkung verschiedener Fehlermodelle auf die optimale Mechanismusstruktur offenbart
Eingabe: n Käufer, jeder Käufer i hat private Wertschätzung vi∼Fi, Verkäufer beobachtet Signal si
Signalerzeugungsprozess: Mit Wahrscheinlichkeit γi ist si eine Halluzination (unabhängig von Fi gezogen); mit Wahrscheinlichkeit 1−γi ist si=vi (genaues Signal)
Ziel: Entwerfen Sie einen umsatzmaximierenden Auktionsmechanismus (x,p), wobei x die Allokationsfunktion und p die Zahlungsfunktion ist
Satz 1: Angenommen, Fi erfüllt Regularitätsbedingungen, dann existiert ein umsatzmaximierender direkter Mechanismus, bei dem die virtuelle Wertfunktion:
ϕˉγi,sii(v)=⎩⎨⎧IRON[0,si][γiFi](v),ϕFi(Ti),ϕFi(v),wenn a≤v<siwenn si≤v<Tiwenn Ti≤v≤b
Konsistenz vs. Robustheit: Traditionelle Methoden konzentrieren sich auf Leistung bei perfekten Vorhersagen (Konsistenz) und bei adversarischen Vorhersagen (Robustheit)
Unterschied dieses Papiers: Verwendet Bayesschen Rahmen, geht davon aus, dass Fehler stochastisch und nicht adversarisch sind
Handhabbarkeit des Halluzinationsmodells: Trotz fehlender kontinuierlicher Dichte in der posterioren Verteilung können geschlossene optimale Lösungen erhalten werden
Intuitivität der Drei-Segment-Strategie: Die optimale Strategie für einen einzelnen Käufer hat klare ökonomische Intuition
Bedeutung des Fehlermodells: Unterschiedliche Fehlerannahmen führen zu völlig unterschiedlichen optimalen Mechanismusstrukturen
Myerson, R. B. (1981). Optimal auction design. Mathematics of operations research, 6(1), 58-73.
Monteiro, P. K., & Svaiter, B. F. (2010). Optimal auction with a general distribution: Virtual valuation without densities. Journal of Mathematical Economics, 46(1), 21-31.
Crémer, J., & McLean, R. P. (1988). Full extraction of the surplus in bayesian and dominant strategy auctions. Econometrica, 1247-1257.
Dieses Papier leistet einen wichtigen Beitrag zum Bereich des theoretischen Mechanismusdesigns und integriert erfolgreich das Halluzinationsproblem moderner KI-Systeme in den klassischen Auktionstheorie-Rahmen, wobei es wertvolle theoretische Richtlinien für praktische Anwendungen bietet. Obwohl es noch Verbesserungspotenzial bei Modellannahmen und empirischer Verifikation gibt, machen seine theoretischen Innovationen und praktischen Werte es zu einer wichtigen Arbeit in diesem Bereich.