DDPG算法驱动的去中心化自适应计算卸载技术
2025-01-06 09:22
No.1325756508734234624
技术概要
PDF全文
本技术介绍了一种DDPG算法支撑的去中心化自适应计算卸载技术,专为卡车车队系统设计。该技术由actor和critic网络构成,各含一个在线主网和一个目标网络。启动时,初始化网络参数,使DDPG与环境交互,并将生成的轨迹元组存储于经验回放池。在训练阶段,从池中随机抽取N个轨迹元组的小批量样本,用于DDPG网络参数更新。critic主网络通过随机梯度下降法更新参数,而actor主网络依据critic主网络提供的梯度更新参数。该技术能有效减少卡车车队系统的平均能耗和任务计算时延。
背景技术
随着智能汽车和车联网的发展,出现了各种延迟敏感和计算密集型应用,如自动驾驶、增强现实、自动导航和在线游戏等,这对车载资源构成挑战。幸运的是,得益于5G通信技术,车辆边缘计算(VEC)可以通过基于IEEE 802.11p的车对RSU(V2R)或车对车(V2V)通信将部分或全部计算任务卸载到物理上近端的RSU/BS或其他车辆,为车辆用户提供更加高效的计算和通信服务,从而解决车载资源不足的问题,该计算范式在城市交通场景中得到了广泛的应用。然而,在高速公路场景中,传统的VEC模式面临着一些挑战: (1)沿高速公路部署RSU/BS是一笔不可忽视的费用,RSU/BS在高速公路上的覆盖区域比城市道路更广泛,如果卸载任务仅在RSU/BS的边缘计算(EC)服务器上处理,则总计算延迟将超过可容忍的阈值。 (2)高速公路大部分建在偏远地区,RSU/BS的部署相对稀疏,无法满足高速公路上车辆的计算卸载需求。 (3)车辆在高速公路上快速行驶,车辆网络具有高度动态的拓扑结构,车辆与RSU/BS之间频繁切换位置通常会导致无线通信链路断开连接,从而减少车辆的有效通信时间和体验质量(QoE)。 为了应对上述挑战,车辆队列驾驶是一种有效的解决方案。作为列队技术最重要的应用场景之一,卡车编队可以降低能耗,提高物流效率和行车安全性。目前,卡车编队的研究主要集中在列队控制和协调上,对卡车编队系统中计算卸载方案的研究较少。
实现思路
阅读余下40%
技术概要为部分技术内容,查看PDF获取完整资料
该技术已申请专利,如用于商业用途,请联系技术所有人!
技术研发人员:
洪鑫涛  王磊  梁宏斌
技术所属: 西南交通大学
相关技术
光网络多模态数据融合和告警识别方法及装置 光网络多模态数据融合和告警识别方法及装置
无人机基站组网通信系统的基站位置优化方法和装置 无人机基站组网通信系统的基站位置优化方法和装置
基于经验贝叶斯方法处理未知信息分布的信号重构 基于经验贝叶斯方法处理未知信息分布的信号重构
一种均衡成本与检测精度的蓝牙信标传感器布设优化方法 一种均衡成本与检测精度的蓝牙信标传感器布设优化方法
一种基于深度强化学习的RIS辅助MU-MISO通信系统智能波束成形方法 一种基于深度强化学习的RIS辅助MU-MISO通信系统智能波束成形方法
相干光OFDM系统中一种投影直方图抑制相位噪声的方法 相干光OFDM系统中一种投影直方图抑制相位噪声的方法
一种基于空间谱估计和地图匹配的一体化定位方法 一种基于空间谱估计和地图匹配的一体化定位方法
基于STL分解的多尺度混合基站流量预测系统 基于STL分解的多尺度混合基站流量预测系统
灾后无人机通感系统的任务调度与资源分配方法及装置 灾后无人机通感系统的任务调度与资源分配方法及装置
一种基于深度学习的室内可见光融合定位方法 一种基于深度学习的室内可见光融合定位方法
技术分类
电信、广播电视和卫星传输服务 电信、广播电视和卫星传输服务
互联网软件服务 互联网软件服务
集成电路设计 集成电路设计
信息集成数字服务 信息集成数字服务
电气机械制造 电气机械制造
计算机、通信、电子设备制造 计算机、通信、电子设备制造
医药制造、生物基材料 医药制造、生物基材料
石油煤矿化学用品加工 石油煤矿化学用品加工
化学原料制品加工 化学原料制品加工
非金属矿物加工 非金属矿物加工
金属制品加工 金属制品加工
专用设备制造 专用设备制造
通用设备制造 通用设备制造
通用零部件制造 通用零部件制造
汽车制造业 汽车制造业
铁路、船舶、航天设备制造 铁路、船舶、航天设备制造
电力、热力生产和供应 电力、热力生产和供应
燃气生产和供应 燃气生产和供应
水生产和供应 水生产和供应
房屋建筑、土木工程 房屋建筑、土木工程
交通运输、仓储和邮政 交通运输、仓储和邮政
农、林、牧、渔业 农、林、牧、渔业
采矿业 采矿业
农副、食品加工 农副、食品加工
烟草、酒水加工 烟草、酒水加工
纺织皮具居家制品 纺织皮具居家制品
文教体娱加工 文教体娱加工
苏ICP备18062519号-5 © 2018-2025 【123技术园】 版权所有,并保留所有权利