مدیریت توام منابع و خواب ایستگاه پایه مبتنی بر یادگیری تقویتی در شبکه های فوق متراکم با ارتباطات دو طرفه

شبکه های فوق متراکم با ارتباطات دوطرفه (fd-udns) گزینه ای نویدبخش جهت تامین ظرفیت و سرویس دهی انبوه، در شبکه های سلولی است. در این شبکه ها تراکم زیاد سلول های کوچک، باعث افزایش ظرفیت و پوشش دهی شبکه می شود. ارتباطات دو طرفه نیز امکان ارسال و دریافت همزمان در یک کانال فرکانسی یکسان را فراهم می کند که بطور بالقوه ظرفیت شبکه را تا دو برابر افزایش می دهد. با این حال، این شبکه ها با محدودیت های مصرف انرژی و تداخل بالا مواجه هستند که عدم مدیریت صحیح آن می تواند بر کارایی کلی شبکه تاثیر منفی بگذارد. در این مقاله، راهکاری مبتنی بر یادگیری تقویتی عمیق برای مدیریت توام منابع و خواب ایستگاه پایه با هدف بیشینه سازی بهره‌وری انرژی و تضمین الزامات کیفیت خدمات کاربران، ارائه شده است. ابتدا مسئله به دو زیر مسئله ی تخصیص منابع و مدیریت خاموشی ایستگاه های پایه کوچک (sbs) شکسته شده است. در مدیریت خاموشی، ایستگاه پایه ماکرو درباره وضعیت خواب sbsها تصمیم می‌گیرد. سپس با انتساب کاربران به ایستگاه های روشن، هر ایستگاه پایه به تخصیص توان ارسال و منابع رادیویی به کاربران خود می پردازد. نتایج شبیه سازی، کارایی الگوریتم پیشنهادی را در بهبود بهره وری انرژی با غیرفعال کردن سلول های کوچک بیشتر بویژه در شبکه هایی با بار زیاد، نشان می دهد.