We (re)evaluate recent claims of quantum advantage in annealing- and gate-based algorithms, testing whether reported speedups survive rigorous end-to-end runtime definitions and comparison against strong classical baselines. Conventional analyses often omit substantial overhead (readout, transpilation, thermalization, etc.) yielding biased assessments. While excluding seemingly not important parts of the simulation may seem reasonable, on most current quantum hardware a clean separation between "pure compute" and "overhead" cannot be experimentally justified. This may distort "supremacy" results. In contrast, for most classical hardware total time $\approx$ compute $+$ a weakly varying constant leading to robust claims. We scrutinize two important milestones: (1) quantum annealing for approximate QUBO PRL 134, 160601 (2025) [https://journals.aps.org/prl/abstract/10.1103/PhysRevLett.134.160601], which uses a sensible time-to-$ε$ metric but proxies runtime by the annealing time (non-measurable); (2) a restricted Simon's problem PRX 15, 021082 (2025) [https://journals.aps.org/prx/abstract/10.1103/PhysRevX.15.021082] , whose advantageous scaling in oracle calls is undisputed; yet, as we demonstrate, estimated runtime of the quantum experiment is $\sim 100 \times$ slower than a tuned classical baseline. Finally, we show that recently claimed "runtime advantage" of the BF-DCQO hybrid algorithm (arXiv:2505.08663) does not withstand rigorous benchmarking. Therefore, we conclude that runtime-based supremacy remains elusive on NISQ hardware, and credible claims require a careful time accounting with a proper reference selections, and an adequate metric.
Questo articolo rivaluta le recenti affermazioni riguardanti il vantaggio quantistico, in particolare negli algoritmi di annealing quantistico e basati su gate, verificando se gli effetti di accelerazione riportati rimangono validi secondo definizioni rigorose di runtime end-to-end e confronti con benchmark classici forti. L'analisi tradizionale spesso trascura numerosi overhead (lettura, traduzione, termalizzazione, ecc.), portando a valutazioni distorte. Gli autori esaminano tre importanti pietre miliari: (1) annealing quantistico per QUBO approssimato; (2) problema di Simon ristretto; (3) algoritmo ibrido BF-DCQO. I risultati indicano che il vantaggio quantistico basato su runtime su hardware NISQ rimane difficile da realizzare.
La questione centrale affrontata da questo articolo è: Le attuali affermazioni riguardanti il vantaggio quantistico rimangono valide secondo definizioni rigorose di runtime e confronti equi con benchmark classici?
Considerazioni Pratiche: L'obiettivo finale del calcolo quantistico è superare il calcolo classico in applicazioni reali, e le prestazioni di runtime sono l'indicatore chiave del valore pratico
Problema di Distorsione Valutativa: La ricerca esistente spesso trascura gli overhead significativi dell'hardware quantistico, portando a valutazioni eccessivamente ottimistiche del vantaggio quantistico
Rigore Scientifico: È necessario stabilire metodi di benchmark equi e rigorosi per valutare le prestazioni reali degli algoritmi quantistici
Definizione Inadeguata di Runtime: Molti studi considerano solo il tempo di "puro calcolo", trascurando overhead come lettura, termalizzazione e traduzione
Distorsione nella Scelta del Benchmark: La selezione dell'algoritmo di benchmark classico è inadeguata, non utilizza i metodi di parallelizzazione più avanzati
Analisi Statistica Insufficiente: Manca un'analisi statistica adeguata, con problemi di cherry-picking
Gli autori ritengono che, con la maturazione della tecnologia quantistica, siano necessari standard di valutazione più rigorosi per verificare l'autenticità del vantaggio quantistico, evitando esagerazioni che possono influenzare il giudizio scientifico.
Stabilimento di un Framework Rigoroso di Definizione del Runtime: Propone una definizione completa di runtime che include tutti i componenti necessari (programmazione, esecuzione, lettura, termalizzazione)
Rivalutazione di Tre Importanti Affermazioni di Vantaggio Quantistico:
Vantaggio dell'annealing quantistico su problemi QUBO approssimati
Vantaggio di complessità di query del problema di Simon ristretto
Vantaggio di runtime dell'algoritmo ibrido BF-DCQO
Rivelazione delle Cause Fondamentali della Distorsione Valutativa: Analizza perché l'hardware quantistico ha difficoltà a realizzare una chiara separazione tra "puro calcolo" e "overhead"
Fornitura di Linee Guida per Benchmark Equi: Stabilisce standard di valutazione e metodologie per future affermazioni di vantaggio quantistico
Confronto dell'impatto di diverse definizioni di runtime:
Definizione di Runtime
Esponente di Adattamento Annealing Quantistico α
Esponente di Adattamento SBM α
Solo Tempo di Annealing
2.23±0.25
-
Tempo Totale QPU
0.61±1.20
-
Runtime Completo
0.93±1.24
1.83±0.11
I risultati mostrano che l'algoritmo quantistico è estremamente sensibile alla definizione di runtime, mentre l'algoritmo classico è relativamente robusto.
Le istanze HUBO generate mostrano difficoltà diverse per algoritmi diversi:
SBM: Tasso di successo inferiore su istanze di distribuzione di Cauchy, ma vantaggio di runtime evidente
SA(QUBO): Migliore qualità della soluzione, ma runtime più lungo
SA(HUBO): Prestazioni eccellenti su istanze di distribuzione di Pareto
Ciò indica che le caratteristiche dell'istanza hanno un impatto significativo sulle prestazioni dell'algoritmo, richiedendo un'analisi statistica adeguata.
Il Vantaggio Quantistico di Runtime su Hardware NISQ Rimane Difficile da Realizzare: Secondo definizioni rigorose di runtime e confronti equi con benchmark, tutte le affermazioni di vantaggio quantistico esaminate non sono valide
La Definizione di Runtime è Cruciale: Gli overhead elevati dell'hardware quantistico rendono difficile la separazione tra "puro calcolo" e "overhead", rendendo necessario l'uso del runtime completo
L'Importanza della Scelta del Benchmark Classico: L'utilizzo degli algoritmi classici più avanzati con parallelizzazione come benchmark è un prerequisito per una valutazione equa
La Rigore Statistico è Indispensabile: Un numero sufficiente di istanze e un'analisi statistica adeguata sono essenziali per affermazioni credibili di vantaggio quantistico
Limitazioni Hardware: La valutazione è limitata ai dispositivi NISQ attuali, i futuri computer quantistici tolleranti ai guasti potrebbero modificare le conclusioni
Scala del Problema: Limitata dalla scala dell'attuale hardware quantistico, impossibile valutare il comportamento asintotico su problemi su larga scala
Copertura dell'Algoritmo: Valuta solo algoritmi quantistici specifici, non può rappresentare tutti i possibili metodi quantistici
Metodi Migliorati di Misurazione del Runtime: Sviluppare strumenti più precisi per la misurazione del runtime degli algoritmi quantistici
Benchmark Classici Più Forti: Seguire continuamente i progressi più recenti degli algoritmi classici
Valutazione del Calcolo Quantistico Tollerante ai Guasti: Stabilire un framework di valutazione per futuri dispositivi quantistici tolleranti ai guasti
Nuove Metriche di Valutazione: Oltre al runtime, considerare altri indicatori pratici come consumo energetico e costi
Questo articolo cita importanti letteratura nel campo del calcolo quantistico, incluso:
Feynman, R.P. - Lavoro fondamentale nel calcolo quantistico
Shor, P. - Algoritmo di fattorizzazione quantistica
Simon, D.R. - Articolo originale dell'algoritmo di Simon
Arute, F. et al. - Affermazione di vantaggio quantistico di Google
Munoz-Bauza, H. & Lidar, D. - Affermazione di vantaggio dell'annealing quantistico
Valutazione Complessiva: Questo è un articolo di significativo valore accademico e pratico che, attraverso esperimenti rigorosi e analisi, fornisce importanti intuizioni alla comunità del calcolo quantistico sulla valutazione del vantaggio quantistico. Sebbene le conclusioni possano deludere alcuni sostenitori del calcolo quantistico, il suo rigore scientifico e i contributi metodologici hanno un significato positivo per lo sviluppo del settore.