强化学习5G无线资源管理方法

摘 要

摘 要

【关键词】 切片资源分配；用户分组；QoE；强化学习

0 引言

随着移动通信的快速发展，用户对业务高服务质量（QoE, Quality of Experience）需求不断增长，以软件定义网络（SDN）的虚拟化技术与网络切片技术能支持5G网络多元服务及业务模型，并在功能、性能和安全保护方面提供差异化的技术方案。网络切片作为一种引入网络资源灵活管理的方法，负责完成物理网络的虚拟化，按需形成逻辑独立的虚拟网络，并负责虚拟资源到物理网络资源的映射[1]。然而，切片资源分配，也就是基站侧切片资源管理成为了无线资源管理的方向。对于一个网络切片而言，过多的空闲资源会导致资源浪费以及资源利用率下降，过少的资源又不能满足用户业务QoE需求，因此，如何将有限的切片资源动态分配给各个用户，满足不同时刻用户的差异性需求，提高用户的满意度是无线资源管理亟待解决的问题。Han等人[2]基于遗传算法提出一种新的在线优化器，从而形成基于SDN的动态网络切片资源调度和管理方法以满足时变特征的用户业务需求，实验表明，该优化器能有效地逼近最大长期网络效用，实现动态的切片自优化策略。Alfoudi等人[3]提出了一个基于网络切片的未来5G系统的逻辑移动性管理架构，该架构中的每一个切片都是通过异构无线接入技术实现用户无线资源管理。为了更有效实现切片资源的自适应管理，许多学者提出强化