We (re)evaluate recent claims of quantum advantage in annealing- and gate-based algorithms, testing whether reported speedups survive rigorous end-to-end runtime definitions and comparison against strong classical baselines. Conventional analyses often omit substantial overhead (readout, transpilation, thermalization, etc.) yielding biased assessments. While excluding seemingly not important parts of the simulation may seem reasonable, on most current quantum hardware a clean separation between "pure compute" and "overhead" cannot be experimentally justified. This may distort "supremacy" results. In contrast, for most classical hardware total time $\approx$ compute $+$ a weakly varying constant leading to robust claims. We scrutinize two important milestones: (1) quantum annealing for approximate QUBO PRL 134, 160601 (2025) [https://journals.aps.org/prl/abstract/10.1103/PhysRevLett.134.160601], which uses a sensible time-to-$ε$ metric but proxies runtime by the annealing time (non-measurable); (2) a restricted Simon's problem PRX 15, 021082 (2025) [https://journals.aps.org/prx/abstract/10.1103/PhysRevX.15.021082] , whose advantageous scaling in oracle calls is undisputed; yet, as we demonstrate, estimated runtime of the quantum experiment is $\sim 100 \times$ slower than a tuned classical baseline. Finally, we show that recently claimed "runtime advantage" of the BF-DCQO hybrid algorithm (arXiv:2505.08663) does not withstand rigorous benchmarking. Therefore, we conclude that runtime-based supremacy remains elusive on NISQ hardware, and credible claims require a careful time accounting with a proper reference selections, and an adequate metric.
academic
Недавние (не)преимущества квантового времени выполнения
В данной работе переоценены недавние утверждения о квантовом преимуществе, в частности в квантовом отжиге и алгоритмах на основе вентилей, путём проверки того, сохраняются ли заявленные ускорения при строгом определении сквозного времени выполнения и справедливом сравнении с мощными классическими эталонами. Традиционный анализ часто игнорирует значительные накладные расходы (чтение, трансляция, термализация и т.д.), что приводит к смещению оценок. Авторы рассматривают три важных вехи: (1) квантовый отжиг для приближённого QUBO; (2) ограниченная задача Саймона; (3) гибридный алгоритм BF-DCQO. Результаты показывают, что квантовое преимущество на основе времени выполнения на оборудовании NISQ остаётся труднодостижимым.
Центральный вопрос, который решает данная работа: Остаются ли действительными текущие утверждения о квантовом преимуществе при строгом определении времени выполнения и справедливом сравнении классических эталонов?
Практические соображения: Конечная цель квантовых вычислений — превзойти классические вычисления в практических приложениях, а производительность по времени выполнения является ключевым показателем практической ценности
Проблема смещения оценок: Существующие исследования часто игнорируют значительные накладные расходы квантового оборудования, что приводит к чрезмерно оптимистичной оценке квантового преимущества
Научная строгость: Необходимо установить справедливые и строгие методы тестирования для оценки реальной производительности квантовых алгоритмов
Неправильное определение времени выполнения: Многие исследования рассматривают только «чистое время вычисления», игнорируя накладные расходы на чтение, термализацию, трансляцию и т.д.
Смещение в выборе эталонов: Неправильный выбор классических алгоритмов сравнения, отсутствие использования передовых методов параллелизации
Недостаточный статистический анализ: Отсутствие адекватного статистического анализа, проблема cherry-picking
Авторы считают, что по мере развития квантовых технологий необходимы более строгие критерии оценки для проверки подлинности квантового преимущества и предотвращения преувеличенных заявлений, влияющих на научное суждение.
Установление строгой структуры определения времени выполнения: Предложено полное определение времени выполнения, включающее все необходимые компоненты (программирование, выполнение, чтение, термализация)
Переоценка трёх важных утверждений о квантовом преимуществе:
Преимущество квантового отжига при приближённом решении задач QUBO
Преимущество в сложности запросов для ограниченной задачи Саймона
Преимущество времени выполнения гибридного алгоритма BF-DCQO
Выявление коренных причин смещения оценок: Анализ причин, по которым квантовому оборудованию сложно достичь чёткого разделения между «чистыми вычислениями» и «накладными расходами»
Предоставление руководства по справедливому тестированию: Установление стандартов и методологии оценки для будущих утверждений о квантовом преимуществе
Сравнение влияния различных определений времени выполнения:
Определение времени выполнения
Показатель экспоненты α квантового отжига
Показатель экспоненты α SBM
Только время отжига
2,23±0,25
-
Общее время QPU
0,61±1,20
-
Полное время выполнения
0,93±1,24
1,83±0,11
Результаты показывают, что квантовый алгоритм чрезвычайно чувствителен к определению времени выполнения, в то время как классический алгоритм относительно устойчив.
Генерируемые экземпляры HUBO демонстрируют различную сложность для разных алгоритмов:
SBM: Более низкий процент успеха на экземплярах распределения Коши, но явное преимущество по времени выполнения
SA(QUBO): Лучшее качество решения, но более длительное время выполнения
SA(HUBO): Отличная производительность на экземплярах распределения Парето
Это указывает на то, что характеристики экземпляров оказывают значительное влияние на производительность алгоритма, требуя достаточного статистического анализа.
Квантовое преимущество по времени выполнения на оборудовании NISQ остаётся труднодостижимым: При строгом определении времени выполнения и справедливом сравнении эталонов все проверенные утверждения о квантовом преимуществе не подтверждаются
Определение времени выполнения имеет критическое значение: Высокие накладные расходы квантового оборудования делают сложным разделение между «чистыми вычислениями» и «накладными расходами», что требует использования полного времени выполнения
Важность выбора классических эталонов: Использование передовых параллелизованных классических алгоритмов в качестве эталонов является предпосылкой справедливой оценки
Статистическая строгость необходима: Достаточное количество экземпляров и статистический анализ критичны для достоверных утверждений о квантовом преимуществе
В данной работе цитируются важные работы в области квантовых вычислений, включая:
Feynman, R.P. - Основополагающие работы по квантовым вычислениям
Shor, P. - Квантовый алгоритм факторизации
Simon, D.R. - Оригинальная статья алгоритма Саймона
Arute, F. et al. - Утверждение Google о квантовом преимуществе
Munoz-Bauza, H. & Lidar, D. - Утверждения о преимуществе квантового отжига
Общая оценка: Это статья с важной академической и практической ценностью, которая посредством строгих экспериментов и анализа предоставляет важные выводы для сообщества квантовых вычислений относительно оценки квантового преимущества. Хотя выводы могут разочаровать некоторых сторонников квантовых вычислений, её научная строгость и методологический вклад имеют позитивное значение для развития этой области.