2025-11-10T02:43:59.651588

Degeneracy is OK: Logarithmic Regret for Network Revenue Management with Indiscrete Distributions

Jiang, Ma, Zhang
We study the classical Network Revenue Management (NRM) problem with accept/reject decisions and $T$ IID arrivals. We consider a distributional form where each arrival must fall under a finite number of possible categories, each with a deterministic resource consumption vector, but a random value distributed continuously over an interval. We develop an online algorithm that achieves $O(\log^2 T)$ regret under this model, with the only (necessary) assumption being that the probability densities are bounded away from 0. We derive a second result that achieves $O(\log T)$ regret under an additional assumption of second-order growth. To our knowledge, these are the first results achieving logarithmic-level regret in an NRM model with continuous values that do not require any kind of "non-degeneracy" assumptions. Our results are achieved via new techniques including a new method of bounding myopic regret, a "semi-fluid" relaxation of the offline allocation, and an improved bound on the "dual convergence".
academic

اللاتحديد مقبول: الندم اللوغاريتمي لإدارة إيرادات الشبكة مع التوزيعات غير المنفصلة

المعلومات الأساسية

  • معرّف الورقة: 2210.07996
  • العنوان: اللاتحديد مقبول: الندم اللوغاريتمي لإدارة إيرادات الشبكة مع التوزيعات غير المنفصلة
  • المؤلفون: جياشو جيانج (جامعة هونج كونج للعلوم والتكنولوجيا)، ويل ما (جامعة كولومبيا)، جياوي تشانج (جامعة نيويورك ستيرن)
  • التصنيف: cs.LG math.PR
  • تاريخ النشر: 2 يناير 2025 (arXiv v5)
  • رابط الورقة: https://arxiv.org/abs/2210.07996

الملخص

تدرس هذه الورقة مشكلة إدارة إيرادات الشبكة (NRM) الكلاسيكية، التي تتضمن قرارات القبول/الرفض و T وصول مستقل وموزع بشكل متطابق. نأخذ في الاعتبار شكل توزيع حيث يجب أن ينتمي كل وصول إلى عدد محدود من الفئات الممكنة، حيث تحتوي كل فئة على متجه استهلاك موارد حتمي، لكن القيمة موزعة بشكل مستمر على فترة زمنية. نطور خوارزمية عبر الإنترنت تحقق ندم O(log2T)O(\log^2 T) تحت هذا النموذج، مع الافتراض الوحيد (الضروري) بأن كثافة الاحتمالية بعيدة عن الصفر. نشتق نتيجة ثانية تحقق ندم O(logT)O(\log T) تحت افتراض نمو من الدرجة الثانية إضافي. بقدر علمنا، هذه هي النتائج الأولى التي تحقق ندم لوغاريتمي في نماذج NRM ذات القيم المستمرة دون الحاجة إلى أي افتراض "لاتحديد".

الخلفية البحثية والدافع

تعريف المشكلة

إدارة إيرادات الشبكة (NRM) هي مشكلة التحكم في السعة التي تتطلب تخصيص موارد محدودة على نطاق زمني محدود بطول T. في كل خطوة زمنية t، يصل استعلام يتطلب متجه موارد a~t\tilde{a}_t ويوفر مكافأة r~t\tilde{r}_t. يجب على صانع القرار اتخاذ قرار فوري وغير قابل للإلغاء بشأن ما إذا كان سيخدم هذا الاستعلام.

دافع البحث

  1. الأهمية العملية: تتمتع NRM بقيمة تطبيقية مهمة في صناعات الطيران والفنادق وغيرها
  2. التحديات النظرية: تتطلب الأدبيات الموجودة افتراضات قوية "لاتحديد" عند التعامل مع التوزيعات المستمرة
  3. قيود الطريقة: تفترض الطرق التقليدية إما توزيعات منفصلة محدودة (افتراض N صغير) أو تتطلب شروط لاتحديد

قيود الطرق الموجودة

  • افتراض N الصغير: يقتصر على توزيعات منفصلة محدودة، لا يمكنه التعامل مع المكافآت المستمرة
  • افتراض اللاتحديد: يتطلب أن يكون الحل الأمثل للاسترخاء السائل فريداً ويرضي شروط التكامل الصارمة
  • طرق الاضطراب: تؤدي طرق معالجة تحلل LP التقليدية إلى ندم Ω(T)\Omega(\sqrt{T})

المساهمات الأساسية

  1. تحقيق الندم اللوغاريتمي للمرة الأولى: تحقيق ندم لوغاريتمي للمرة الأولى في NRM ذات التوزيع المستمر دون افتراض لاتحديد
  2. استرخاء شبه سائل جديد: تقديم طريقة استرخاء جديدة تقع بين الأمثل غير المتصل والاسترخاء السائل
  3. حدود ندم قصير النظر محسّنة: تطوير تقنيات تحليل ندم قصير النظر جديدة
  4. نتيجة مزدوجة:
    • ندم O(log2T)O(\log^2 T) (يتطلب فقط حد أدنى للكثافة)
    • ندم O(logT)O(\log T) (شرط نمو من الدرجة الثانية إضافي)

شرح الطريقة

تعريف المهمة

  • الإدخال: T استعلام مستقل وموزع بشكل متطابق، حيث يحتوي كل استعلام (rt,at)(r_t, a_t) على مكافأة ومتطلبات موارد
  • القيود: السعة الأولية CR0mC \in \mathbb{R}^m_{\geq 0}، قيود السعة t=1Tat,ixtCi\sum_{t=1}^T a_{t,i} \cdot x_t \leq C_i
  • الهدف: تعظيم إجمالي المكافآت المجمعة، تقليل الندم مقابل الأمثل غير المتصل

معمارية النموذج

افتراضات التوزيع (الافتراض 1)

لكل نوع j[n]j \in [n]:

  • يتم سحب متجه الطلب ata_t من توزيع منفصل {a1,,an}\{a_1, \ldots, a_n\}
  • المكافأة الشرطية rtr_t موزعة بشكل مستمر على الفترة [lj,uj][l_j, u_j]
  • دالة الكثافة تحقق f(raj)α>0f(r|a_j) \geq \alpha > 0

الاسترخاء شبه السائل

لعدد نوع معين d=(d1,,dn)d = (d_1, \ldots, d_n):

VcSemi(d)=maxxj=1ndjErFj[rxj(r)]V^{\text{Semi}}_c(d) = \max_x \sum_{j=1}^n d_j \cdot \mathbb{E}_{r \sim F_j}[r \cdot x_j(r)]

تحت القيود: j=1ndjaj,iErFj[xj(r)]ci,i[m]\sum_{j=1}^n d_j \cdot a_{j,i} \cdot \mathbb{E}_{r \sim F_j}[x_j(r)] \leq c_i, \quad \forall i \in [m]

تصميم الخوارزمية

الخوارزمية 1: استراتيجية مقدّر M^\hat{M}

  1. ملاحظة الاستعلام (rt,at)(r_t, a_t)
  2. حساب المقدّر M^ct,at\hat{M}_{c_t, a_t}
  3. إذا كان rtM^ct,atr_t \geq \hat{M}_{c_t, a_t} و ctatc_t \geq a_t، قبول
  4. وإلا، رفض

الخوارزمية 2: خوارزمية ندم O(log2T)O(\log^2 T)

  • حل مشكلة التحسين (13) للحصول على {q^j,t}\{\hat{q}^*_{j,t}\}
  • تعيين استراتيجية جذب الحدود بناءً على قيمة q^jt,t\hat{q}^*_{j_t,t}:
    • إذا كان q^jt,t12κ1log(Tt+1)Tt+1\hat{q}^*_{j_t,t} \geq 1 - 2\kappa_1 \sqrt{\frac{\log(T-t+1)}{T-t+1}}، تعيين M^=ljt\hat{M} = l_{j_t} (قبول دائماً)
    • إذا كان q^jt,t2κ1log(Tt+1)Tt+1\hat{q}^*_{j_t,t} \leq 2\kappa_1 \sqrt{\frac{\log(T-t+1)}{T-t+1}}، تعيين M^=ujt+1\hat{M} = u_{j_t} + 1 (رفض دائماً)
    • وإلا، تعيين M^=Fjt1(1q^jt,t)\hat{M} = F^{-1}_{j_t}(1 - \hat{q}^*_{j_t,t})

نقاط الابتكار التقني

1. تحليل ندم قصير النظر

تحليل الندم الإجمالي إلى: Regret(π)t=1TEctπ[Myopict(π,ctπ)]\text{Regret}(\pi) \leq \sum_{t=1}^T \mathbb{E}_{c^{\pi}_t}[\text{Myopic}_t(\pi, c^{\pi}_t)]

حيث يُعرّف الندم قصير النظر كـ: Myopict(π,c)=Eπ,It[Vˉc(It)Vˉcatxtπ(It+1)rtxtπ]\text{Myopic}_t(\pi, c) = \mathbb{E}_{\pi, I_t}[\bar{V}_c(I_t) - \bar{V}_{c - a_t \cdot x^{\pi}_t}(I_{t+1}) - r_t \cdot x^{\pi}_t]

2. تحليل استمرارية ليبشيتز

إثبات خاصية ليبشيتز للحل الأمثل لمشكلة شبه السائل (الليما 4): q^q~κ1maxj[n]{dj/spj}\|\hat{q}^* - \tilde{q}^*\|_{\infty} \leq \kappa_1 \cdot \max_{j \in [n]} \{|d_j/s - p_j|\}

3. استراتيجية جذب الحدود

اعتماد استراتيجية محافظة عندما يقترب الحل السائل من الحدود، تجنب مشاكل الجدوى:

  • الاقتراب من 1 يعني القبول دائماً
  • الاقتراب من 0 يعني الرفض دائماً
  • المنطقة الوسيطة تستخدم استراتيجية العتبة

إعداد التجارب

تكوين التجارب الرقمية

  • عدد الموارد: mm موارد
  • أنواع العملاء: nn نوع
  • تعيين السعة: Ci=αiTC_i = \alpha_i \cdot T
  • توزيع المكافآت: موزع بشكل موحد على [lj,uj][l_j, u_j] لكل نوع
  • الخوارزميات المقارنة:
    • استراتيجية التسعير الثابت (FBP)
    • استراتيجية تحديث الثنائي
    • الخوارزمية 2 والخوارزمية 3

مؤشرات التقييم

  • إجمالي الإيرادات المتوقعة: متوسط المكافآت المجمعة من قبل كل استراتيجية
  • الأداء النسبي: النسبة مقابل استراتيجية التسعير الثابت
  • معدل نمو الندم: كيفية نمو الندم مع الوقت T

نتائج التجارب

النتائج الرئيسية

النتائج النظرية

النظرية 1: تحقق الخوارزمية 2 ندم O(log2T)O(\log^2 T): Regret(π)(2κ1+2α+4αj=1n1pj)log2T+s0rmax\text{Regret}(\pi) \leq \left(2\kappa_1 + \frac{2}{\alpha} + \frac{4}{\alpha} \sum_{j=1}^n \frac{1}{p_j}\right) \log^2 T + s_0 \cdot r_{\max}

النظرية 2: تحت افتراضات إضافية، تحقق الخوارزمية 3 ندم O(logT)O(\log T): Regret(π)C1logT+C2\text{Regret}(\pi) \leq C_1 \cdot \log T + C_2

نتائج التجارب الرقمية

  1. الاعتماد الزمني: تتفوق الخوارزميات 2 و 3 على الطرق الأساسية مع زيادة T
  2. اعتماد عدد الموارد: تظهر الخوارزميات الثلاث المتقدمة أداءً متشابهة عبر أعداد موارد مختلفة
  3. اعتماد عدد الأنواع: عندما يزداد عدد أنواع العملاء، تتفوق الخوارزميات 2 و 3 على استراتيجية تحديث الثنائي

التحليل التقني الرئيسي

حدود تقارب الثنائي

في النتيجة الثانية، تم إثبات حد التباين لمتغيرات الثنائي: E[(atμ~1atμ^1)2]8dˉ2α2β2(s1)+19αˉdˉ2(s1)+2s1\mathbb{E}[(a^{\top}_t \tilde{\mu}_1 - a^{\top}_t \hat{\mu}_1)^2] \leq \frac{8\bar{d}^2}{\alpha^2\beta^2(s-1)} + \frac{1}{9\bar{\alpha}\bar{d}^2(s-1)} + \frac{2}{s-1}

الأعمال ذات الصلة

تطور أدبيات NRM

  1. ندم O(T)O(\sqrt{T}): استراتيجيات التسعير الثابت من Talluri و Van Ryzin (1998)
  2. ندم O(1)O(1): نتائج Jasin و Kumar (2012) تحت شروط لاتحديد
  3. بدون لاتحديد: عمل Bumpensanti و Wang (2020)، Vera و Banerjee (2021) في الحالات المنفصلة

البحث في التوزيعات المستمرة

  • مشكلة الأمين المتعدد: نتيجة Θ(logT)\Theta(\log T) من Bray (2019) في حالة مورد واحد
  • افتراض اللاتحديد: أعمال Li و Ye (2021)، Balseiro وآخرون (2021)، Bray (2022)

الاستنتاجات والمناقشة

الاستنتاجات الرئيسية

  1. تحقيق ندم لوغاريتمي للمرة الأولى في NRM ذات المكافآت المستمرة دون افتراض لاتحديد
  2. يوفر الاسترخاء شبه السائل إطار عمل تحليلي جديد
  3. تتعامل استراتيجية جذب الحدود بفعالية مع الحالات المتحللة

القيود

  1. حد الكثافة: لا يزال يتطلب افتراض أن دالة الكثافة بعيدة عن الصفر
  2. الحدود الثابتة: نتيجة O(log2T)O(\log^2 T) لها حدود ثابتة تعتمد على nn بشكل أسي
  3. النمو من الدرجة الثانية: تتطلب النتيجة الأفضل O(logT)O(\log T) افتراضات قوة محدبة إضافية

الاتجاهات المستقبلية

  1. تحسين اعتماد الحدود الثابتة
  2. التوسع إلى فئات توزيع أكثر عمومية
  3. دراسة مطابقة الحدود الدنيا

التقييم العميق

المميزات

  1. اختراق نظري: حل مشكلة طويلة الأمد تتعلق باللاتحديد
  2. الابتكار التقني: الاسترخاء شبه السائل واستراتيجية جذب الحدود جديدة
  3. القيمة العملية: الطريقة قابلة للتطبيق على سيناريوهات التسعير المستمر الفعلية
  4. التحليل الدقيق: الإثباتات الرياضية مفصلة وشاملة

أوجه القصور

  1. قيود الافتراضات: لا يزال يتطلب افتراضات نوع محدود وحد أدنى للكثافة
  2. الحدود الثابتة: الحدود الثابتة للنتيجة الأولى كبيرة نسبياً
  3. التجارب محدودة: التجارب الرقمية بسيطة نسبياً، تفتقر إلى التحقق من البيانات الحقيقية

التأثير

  1. المساهمة النظرية: توفير أدوات تحليلية جديدة لنظرية NRM
  2. المنهجية: قد ينطبق الاسترخاء شبه السائل على مشاكل التحسين عبر الإنترنت الأخرى
  3. التوجيه العملي: توفير أساس نظري لأنظمة إدارة الإيرادات الفعلية

السيناريوهات القابلة للتطبيق

  • تخصيص المقاعد في إدارة إيرادات الطيران
  • تسعير وتخصيص غرف الفندق
  • أنظمة المزايدة على الإعلانات عبر الإنترنت
  • التسعير الديناميكي لموارد السحابة

المراجع

تشمل الأعمال ذات الصلة الرئيسية:

  • Jasin و Kumar (2012): الاستدلالات المعاد حلها في NRM
  • Bumpensanti و Wang (2020): الحالات المنفصلة بدون افتراض لاتحديد
  • Li و Ye (2021): تقارب الثنائي في البرمجة الخطية عبر الإنترنت
  • Bray (2022): مشكلة الأمين المتعدد ذات القيم المستمرة

تحقق هذه الورقة اختراقاً مهماً في نظرية إدارة إيرادات الشبكة، حيث تحقق للمرة الأولى ندم لوغاريتمي في إعداد التوزيع المستمر دون الحاجة إلى افتراضات لاتحديد تقليدية. تشمل الابتكارات التقنية الاسترخاء شبه السائل واستراتيجية جذب الحدود وتحليل تقارب الثنائي المحسّن، مما يساهم بشكل كبير في تطور المجال النظري.