公开(公告)号：CN118155854A

公开(公告)日：2024-06-07

申请号：CN202410271436.8

申请日：2024-03-11

Applicant: 之江实验室

Inventor： 李帅龙 ,  林峰 ,  马萧 ,  薛均晓 ,  严笑然 ,  张晴 ,  陆亚飞

IPC: G16H50/50 ,  G16H10/60 ,  G16H80/00 ,  G06N3/0895 ,  G06N3/092

Abstract: 本发明公开了一种基于孪生模型的康复场景大模型训练方法，包括：获取训练数据集并进行处理，所述训练数据集中包括康复临床数据、孪生模型数据和多学科数据；获取待训练大模型，基于处理后的训练数据集，利用自监督学习方法训练所述待训练模型；对于自监督学习后的大模型，基于处理后的康复临床数据和孪生模型数据，利用监督学习方法和规范化模板进行进一步训练；对于监督学习后的大模型，基于处理后的康复临床数据，利用强化学习方法进行进一步训练大模型，其中强化学习过程中以人工反馈及相关数据作为评分机制，以引导大模型生成用户认可的创意性回答。

公开(公告)号：CN117352126A

公开(公告)日：2024-01-05

申请号：CN202311459346.3

申请日：2023-11-03

Applicant: 之江实验室 ,  上海人工智能创新中心

Inventor： 陈一家 ,  薛均晓 ,  林峰 ,  马萧 ,  刁璕 ,  严笑然 ,  张晴 ,  沈白桦 ,  岳晓晗 ,  王蕾

IPC: G16H20/30 ,  G06T13/40 ,  G06T17/00

Abstract: 本申请涉及一种肌肉受力可视化方法、装置、计算机设备以及存储介质。所述方法包括：基于世界坐标系，确定摄像机对应的投影矩阵；获取待检测图像，并通过目标检测模型根据待检测图像确定目标追踪对象；获取目标追踪对象的关节点热图，根据关节点热图确定关节点二维坐标；基于投影矩阵，根据关节点二维坐标确定关节点三维坐标，并根据关节点三维坐标驱动数字人模型运动，确定数字人模型的关节运动信息；根据关节运动信息确定目标追踪对象的肌肉受力信息，并将肌肉受力信息进行可视化展示。上述方法，可以提高获取的患者肌肉受力情况的准确性，为患者提供可靠的康复训练参考数据，同时减少对肌肉受力情况的计算成本。

公开(公告)号：CN119854461A

公开(公告)日：2025-04-18

申请号：CN202510323452.1

申请日：2025-03-19

Applicant: 之江实验室

Inventor： 俞菲 ,  林承君 ,  王军 ,  薛均晓 ,  汪逸群 ,  李超

IPC: H04N7/20 ,  H04N19/17 ,  H04N19/146 ,  H04N19/14 ,  G06T9/00

Abstract: 本公开提供一种遥感图像传输方法，所述方法包括：获取遥感图像；将遥感图像划分为多个设定大小的图像块，并根据图像块得到图像序列；将图像序列包含的各个图像块分别输入基于残差网络结构的卷积神经网络，得到卷积神经网络包含的多个阶段分别输出的相应语义层级的特征图；其中，各个语义层级的特征图对应不同的分辨率和通道数，且每个语义层级的特征图融合了不同尺度的空间特征；对各个语义层级的特征图形成的特征图队列进行信道编码，以在信道中传输编码结果。本公开实现仅传输对目标检测任务具有实际意义的数据，从而显著减少遥感图像传输时的数据传输量，解决遥感图像传输中的带宽限制问题，兼顾遥感图像传输效率和检测精度。

公开(公告)号：CN119519823A

公开(公告)日：2025-02-25

申请号：CN202510058886.3

申请日：2025-01-15

Applicant: 之江实验室

Inventor： 薛均晓 ,  田嘉 ,  李超 ,  俞菲 ,  李月华 ,  张辉 ,  黄琛

IPC: H04B7/185

Abstract: 本发明公开了一种星群协同实现遥感任务的区域覆盖方法及装置，涉及卫星遥感技术领域，该方法中卫星探测任务区域后建立第一覆盖地图，以及在探测到障碍物时，在障碍物的位置释放信息素来标记该障碍物，然后基于障碍物的位置以及信息素的释放时间生成第一信息素地图。在通信范围内该卫星可与其他卫星建立通信，基于通信获取的地图对第一覆盖地图和第一信息素地图进行更新，得到第三覆盖地图和第三信息素地图。再结合第三覆盖地图和第三信息素地图确定卫星集群的未覆盖区域，从未覆盖区域中选择目标区域作为卫星的下一覆盖区域，以解决目前多星协同覆盖技术中由于无法高效避开未知障碍物、非覆盖区域导致的覆盖率低和重复覆盖率高的技术问题。

公开(公告)号：CN119474440A

公开(公告)日：2025-02-18

申请号：CN202510045978.8

申请日：2025-01-13

Applicant: 之江实验室

Inventor： 邓泉 ,  俞菲 ,  薛均晓 ,  王军 ,  李月华 ,  李超

IPC: G06F16/583 ,  G06F16/53 ,  G06F16/54

Abstract: 本申请涉及一种面向遥感图像的视觉理解方法、装置、系统、设备和介质。包括：提取待理解遥感图像的结构化信息，并基于结构化信息生成与待理解遥感图像对应的图像信息数据库；获取针对待理解遥感图像的初始提示指令，基于初始提示指令确定待检索元素，基于待检索元素从图像信息数据库中进行检索，得到对应的目标结构化信息，根据目标结构化信息与初始提示指令，生成目标提示指令；将目标提示指令输入至训练完备的大语言模型中，得到对待理解遥感图像的理解结果。采用本方法能够提高对遥感图像理解的准确度。

公开(公告)号：CN118709766B

公开(公告)日：2024-11-05

申请号：CN202411193875.8

申请日：2024-08-28

Applicant: 之江实验室

Inventor： 黄琛 ,  俞菲 ,  李月华 ,  薛均晓 ,  俞志成 ,  喻源

IPC: G06N5/022 ,  G06N5/04 ,  G06F40/30 ,  G06F16/9032 ,  G06F16/903 ,  G06F16/9038

Abstract: 本说明书公开了一种遥感问题回答生成方法、装置、介质及设备。获取用户输入的遥感问题文本。根据遥感问题文本，在预设的数据库中检索预设数量的与遥感问题文本相关的各文档。确定至少部分文档对应的遥感图像。根据遥感问题文本、各文档以及遥感图像，生成提示语句，并将提示语句输入到预设的大语言模型中，以通过大语言模型，生成针对遥感问题文本的问题回答文本，并将问题回答文本以及遥感图像展示给用户。能够为用户提供文本与遥感图像结合的综合答案作为遥感问题的回答，提供更直观和易于理解的答案展示方式，使用户能够更全面地获取信息。

公开(公告)号：CN118709766A

公开(公告)日：2024-09-27

申请号：CN202411193875.8

申请日：2024-08-28

Applicant: 之江实验室

Inventor： 黄琛 ,  俞菲 ,  李月华 ,  薛均晓 ,  俞志成 ,  喻源

IPC: G06N5/022 ,  G06N5/04 ,  G06F40/30 ,  G06F16/9032 ,  G06F16/903 ,  G06F16/9038

Abstract: 本说明书公开了一种遥感问题回答生成方法、装置、介质及设备。获取用户输入的遥感问题文本。根据遥感问题文本，在预设的数据库中检索预设数量的与遥感问题文本相关的各文档。确定至少部分文档对应的遥感图像。根据遥感问题文本、各文档以及遥感图像，生成提示语句，并将提示语句输入到预设的大语言模型中，以通过大语言模型，生成针对遥感问题文本的问题回答文本，并将问题回答文本以及遥感图像展示给用户。能够为用户提供文本与遥感图像结合的综合答案作为遥感问题的回答，提供更直观和易于理解的答案展示方式，使用户能够更全面地获取信息。

公开(公告)号：CN118409869A

公开(公告)日：2024-07-30

申请号：CN202410872322.9

申请日：2024-07-01

Applicant: 之江实验室

Inventor： 薛均晓 ,  李超 ,  陈金浦 ,  张辉

IPC: G06F9/50 ,  G06N3/0464 ,  G06N3/092 ,  G06N5/04

Abstract: 本申请涉及一种星云运算资源分配方法、装置、计算机设备及存储介质。方法包括：获取目标运算任务和实时资源状态；将目标运算任务和实时资源状态输入资源分配模型，经资源分配模型输出星云资源分配策略，其中，资源分配模型包括资源预估模块和资源优化模块，资源预估模块用于确定目标运算任务的预占用资源；资源优化模块用于根据实时资源状态以及预占用资源确定星云资源分配策略。本申请将目标运算任务和实时资源状态输入资源分配模型，通过资源预估模块确定预占用资源，以及在充分考虑动态资源环境的情况下，通过资源优化模块根据实时资源状态和预占用资源输出星云资源分配策略，能够有效提高运算资源利用率。

公开(公告)号：CN117933346B

公开(公告)日：2024-07-23

申请号：CN202410339613.1

申请日：2024-03-25

Applicant: 之江实验室

Inventor： 李帅龙 ,  林峰 ,  严笑然 ,  张晴 ,  马萧 ,  薛均晓 ,  陆亚飞

IPC: G06N3/0895 ,  G06N3/092 ,  G06N3/0455 ,  G06N3/0464

Abstract: 本发明公开了一种基于自监督强化学习的即时奖励学习方法，获取高维图像数据集，高维图像数据集中包括若干带有终止状态成功或者失败标识的图像；利用高维图像数据集训练自监督学习模型，得到对应的低维特征；利用高维图像数据带有的终止状态的标识，基于低维特征，得到成功特征和失败特征；利用监督学习方法训练状态转移模型，并利用状态转移模型预测的下一状态信息和两类特征进行比较分类，得到即时奖励；基于即时奖励，利用强化学习方法进行决策。本发明可以减少强化学习方法中奖励的人工设计及标注，使得即时奖励的获取智能化。同时，这种即时奖励学习方法可以扩充强化学习的应用范围，扩展了强化学习框架的实际应用，具有广阔的场景。

公开(公告)号：CN117544821A

公开(公告)日：2024-02-09

申请号：CN202311462639.7

申请日：2023-11-03

Applicant: 之江实验室 ,  上海人工智能创新中心

Inventor： 陈一家 ,  薛均晓 ,  林峰 ,  马萧 ,  严笑然 ,  张晴 ,  陆矜菁 ,  岳晓晗 ,  王蕾 ,  李资翱

IPC: H04N21/44 ,  H04N21/4402

Abstract: 本申请涉及一种视频合并方法、装置、计算机设备以及存储介质。所述方法包括：采集候选视频，并确定候选视频的视频名称；根据候选视频的视频名称将候选视频存入存储系统的视频文件夹中；确定候选视频的视频元数据，并根据视频元数据对视频文件夹中的候选视频进行更新，确定视频文件夹对应的目标视频；根据关键词从视频文件夹中确定目标文件夹，并从目标文件夹对应的目标视频中确定期望视频；根据预设的目标视频尺寸和目标视频分辨率确定期望视频的排列方式，基于排列方式对期望视频进行合并，确定组合视频，并对组合视频进行可视化展示。提高了组合视频播放的流畅度，并且提高了组合视频的视频播放质量。