نمایش چکیده فارسی

Reinforcement Learning for Dynamic Resource Allocation in Cloud Data Centers

Yashar Abbasloo Soumeeh1

Abstract :
Abstract Energy is a major operating cost of cloud data centers, yet many servers run far below capacity for much of the day. Deciding how many servers to keep active at each moment is therefore a central control problem: too few servers violate service-level agreements (SLAs), whereas too many waste energy. Static provisioning and hand-tuned threshold rules are simple but do not adapt to changing workloads. This paper studies reinforcement learning (RL) as an alternative for dynamic server-pool sizing. We formulate the problem as a Markov decision process whose cost combines energy, unmet demand and server state changes, and in which a one-slot boot delay forces the controller to act in anticipation of demand. A tabular Q-learning agent is trained in a simulated cluster of 12 servers under a diurnal workload with random bursts and is compared with four baselines: two static provisioning levels and two reactive utilization-threshold policies. Averaged over three independent training runs and 100 unseen evaluation days, the RL policy lowers the total daily cost by about 37% relative to peak provisioning and by 5.5% relative to a 70% threshold policy. It comes within 0.5% of the best threshold policy, whose threshold had to be tuned manually. Preliminary experiments also suggest that the results are sensitive to the state design and the learning-rate schedule. Finally, we discuss the conditions that determine whether such agents can be deployed in production, including public-sector IT environments: safe exploration, simulator fidelity, sample efficiency and explainability.

Keywords : reinforcement learning resource allocation cloud data centers q learning


زبان مقاله : انگلیسی
محور مقاله : مهندسی فناوری اطلاعات
محل انتشار : دهمین کنفرانس بین المللی پژوهش های کاربردی در علوم و مهندسی
آدرس وب سایت کنفرانس : carseconf.com
کد IOI مقاله : ACCD-ACAZFE
لینک مستقیم مقاله : https://isnac.ir/ACCD-ACAZFE
نمایش چکیده فارسی : https://isnac.ir/SA/ACCD-ACAZFE

سایر مقالات محل انتشار
  1. «طراحی الگوی هوشمند مدیریت بحران شهری مبتنی بر هوش مصنوعی با تأکید بر پیش‌بینی مخاطرات، تحلیل بلادرنگ داده‌ها و پشتیبانی از تصمیم‌گیری»
  2. ارائه مدل یکپارچه مدیریت زنجیره تأمین، موجودی و لجستیک قطعات یدکی با هدف کاهش هزینه و توقف تولید در صنعت فولاد
  3. بهینه‌سازی مبتنی بر داده مدارهای خردایش و آسیاب‌کنی با بهره‌وری انرژی بالا: یکپارچه‌سازی شرایط عملیاتی HPGR، محیط آسیاب‌کنی، ویژگی‌های کانسنگ و آزادسازی کانی‌ها
  4. توسعه چارچوب یکپارچه مبتنی بر هوش مصنوعی برای مدیریت پیش‌بینانه ریسک در پروژه‌های پیچیده: رویکردی کاربردی برای بهبود زمان، هزینه و کیفیت پروژه
  5. Valuing AI-Related Intangible Assets: Challenges and Limitations of Conventional Approaches
  6. فرآورده‌های بیولوژیک (Biological Products): اصول بیوتکنولوژی دارویی، چالش‌های بالینی، چشم‌اندازهای تولید و افق‌های تنظیمی
  7. Path Planning and Flight Control of Unmanned Aerial Vehicles: A Review of Algorithms and Future Directions
  8. الگوی کالبدی بهینه بلوک‌های شهری، زیربنای الگوهای توسعه آینده؛ بهینه‌سازی چندهدفه انرژی خورشیدی و تاب‌آوری HSE
  9. Smart Materials for Future Buildings
  10. The role of CNC milling in the path of smart manufacturing
  11. تنظیم رئولوژی دوغاب فایبر سمنت برای بهبود فرآیندپذیری در روش هاتچک: مروری بر افزودنی‌ها، مواد مکمل سیمانی و نانومواد
  12. Quantum Materials for Next Generation Spintronic Devices: A Short Review
  13. A Systematic Review of Deep Learning Applications in Breast Cancer Detection Using MRI, Mammography, and Ultrasound
  14. Service Design and Minimal UI for Hospital Services: A Study in Shiraz
  15. Analytical Assessment of Microplastic Pollution in Water Resources and Challenges for Sustainable Management