公开(公告)号：CN117311952A

公开(公告)日：2023-12-29

申请号：CN202210699106.X

申请日：2022-06-20

Applicant: 复旦大学

Inventor： 柴洪峰 ,  吴杰 ,  侯鹏 ,  江宵汉

IPC: G06F9/50 ,  G06N20/00

Abstract: 本发明为MEC环境下的边缘服务器动态放置问题提供了一种基于深度强化学习的智能化解决方法。具体地，以现实环境中通信基站的地理上的位置分布、时间上的工作负载和现有边缘服务器的布局为深度强化学习的系统状态(State)输入，以边缘服务器的动态选址为动作(Action)，综合考虑网络、收益和成本等因素为奖励(Reward)，训练代理(Agent)能够根据当前状态自主确定最佳的边缘服务器放置动作。此外，为了充分反映系统状态在地理和时间上的特征，加快代理的学习速度和效率，基于热力图和灰度图的形式将系统状态转化为灰度热力图，从而将边缘服务器动态放置问题转化为计算视觉问题。

公开(公告)号：CN118211769A

公开(公告)日：2024-06-18

申请号：CN202211637200.9

申请日：2022-12-16

Applicant: 复旦大学

Inventor： 柴洪峰 ,  吴杰 ,  侯鹏 ,  刘森 ,  江宵汉

IPC: G06Q10/0631 ,  G06N3/045 ,  G06N3/08 ,  G06F9/50

Abstract: 本发明提供一种无人机边缘计算中基于联合深度强化学习的动态服务方法，该方法充分利用无人机之间的协作，将深度强化学习的决策能力和联邦学习的分布式训练能力结合，对无人机的本地模型及本地模型聚合生成的聚合模型进行训练，获取了具有最优服务策略的全局模型，从而实现无人机边缘计算网络中无人机动态切换服务类型，并为地面应用设备分配通信和计算资源的功能。本发明充分发挥了两种算法在无人机边缘计算中的优势，不仅在学习性能上非常接近集中式DRL，而且能够减少网络数据的传递，减轻中心服务器的训练压力。因此，本发明能够很好的结合集中式和全分布式的优点，非常适合计算能力和能源受限的无人机边缘计算场景中人工智能模型的部署和训练。

公开(公告)号：CN119669659A

公开(公告)日：2025-03-21

申请号：CN202311210466.X

申请日：2023-09-19

Applicant: 复旦大学

Inventor： 柴洪峰 ,  陈任峰 ,  朱鸿斌 ,  江宵汉

IPC: G06F18/15 ,  G06F17/18 ,  G06N5/04 ,  G06N3/0475 ,  G06N3/084

Abstract: 本发明提供一种数据补全方法及装置，通过数据补全模型的推理网络将待补全数据的特征变量转换为隐变量，并获得隐变量的变分概率分布，进而基于变分概率分布生成隐变量到特征变量的似然概率分布，更进一步地，引入重要性采样，从而提升数据补充的准确性，因此，通过本发明的方法，不需要查询额外数据源进行数据填充，而能够直接通过数据补全模型基于待补全数据获得完整数据，减少了数据的获取成本，提升了数据的完整性，从而提高了后续其他数据处理模型的预测结果的精度。

公开(公告)号：CN118215077A

公开(公告)日：2024-06-18

申请号：CN202211622143.7

申请日：2022-12-16

Applicant: 复旦大学

Inventor： 柴洪峰 ,  吴杰 ,  江宵汉 ,  刘森 ,  侯鹏

IPC: H04W28/08 ,  H04W28/084 ,  G06N20/00

Abstract: 本发明提供一种基于深度强化学习的多类型无人机边缘计算服务方法，首先初始化地面用户的位置分布，以实现对地面用户的全覆盖和最小化路径损耗为目标，通过虚拟力引导动态调整无人机位置分布完成全覆盖关联。然后基于深度强化学习代理，以优化无人机边缘计算服务成本为目标，以地面用户产生的任务类型、任务大小、任务所需资源等状态为输入，动态调整无人机类型并为任务合理高效地分配通信和计算资源。本发明考虑了由多用户、多任务类型、多无人机构成的MEC网络，以同时实现无人机与地面的用户关联、无人机类型转换和资源分配为目标，基于深度强化学习使无人机集群具备更好的自主决策能力，实现无人机辅助的MEC的动态、智能和自适应边缘智能服务。

公开(公告)号：CN114595443A

公开(公告)日：2022-06-07

申请号：CN202210174257.3

申请日：2022-02-25

Applicant: 复旦大学

Inventor： 徐铭 ,  江宵汉 ,  黄一力 ,  韩伟力 ,  柴洪峰

IPC: G06F21/46 ,  G06N20/00

Abstract: 本发明属于系统安全技术领域，具体为基于高频字符串PCFG模型的口令强度检测方法。本发明包括：用口令专用分词方法将口令分成更小组成单元；使用分词后的口令构建、并训练PCFG模型；利用该模型检测口令强度并反馈给用户等级化的强度信息；将该模型进行压缩后部署在浏览器端和服务端。本发明使用分词方法将口令自动分解成高频字符串，改变了当前通常使用同一种字符类型进行字符串分组的模式；降低了强度检测工具对口令的高估性，得到准确的口令强度评估结果；本发明反馈用户口令强度外还反馈更多信息以解释弱口令生成原因，告知用户口令中所采用的哪些高频字符串是导致弱口令形成的重要因素，以方便用户有针对性的改进他们口令安全性。