-
公开(公告)号:CN113487653B
公开(公告)日:2024-03-26
申请号:CN202110704517.9
申请日:2021-06-24
Applicant: 之江实验室
IPC: G06T7/246 , G06N3/042 , G06N3/0464 , G06N3/08
Abstract: 本发明公开了一种基于轨迹预测的自适应图跟踪方法,该方法在估计轨迹的位移之后,在当前帧重新提取轨迹的特征,使得相同目标的特征尽可能保持一致。本发明融合了位置、外观和历史信息,在自适应图神经网络中更新特征,用以区分不同目标以及学习目标重要的部位。本发明提出了balanced MSE LOSS,用以平衡样本分布,让神经网络自动学习区分不同类型目标(如新出现的或消失的目标)。本发明可以应用于自动驾驶中输出多个目标的轨迹,还能够预测视频目标的行为,并且可以提高交通管理效率以及预防事故的发生。
-
公开(公告)号:CN113487715A
公开(公告)日:2021-10-08
申请号:CN202110703465.3
申请日:2021-06-24
Applicant: 之江实验室
Abstract: 本发明公开了一种基于生成对抗网络的数据增强方法。通过生成对抗网络的特征提取,将车辆图像的深层特征渲染到一个既定的三维立体结构上,完成一幅二维图像到三维立体结构的重构,再进行三维单眼投影,获得其在所需视角的二维图像,完成车辆不同视角图像的生成。本发明在前沿作者的noise‑to‑image的基础上进行了修正尝试,使其完成了从noise‑to‑image到image‑to‑image的转换,在此之后,可以做到定向修改一种特定属性(车辆视角等),生成新视角的图像。
-
公开(公告)号:CN113487653A
公开(公告)日:2021-10-08
申请号:CN202110704517.9
申请日:2021-06-24
Applicant: 之江实验室
Abstract: 本发明公开了一种基于轨迹预测的自适应图跟踪方法,该方法在估计轨迹的位移之后,在当前帧重新提取轨迹的特征,使得相同目标的特征尽可能保持一致。本发明融合了位置、外观和历史信息,在自适应图神经网络中更新特征,用以区分不同目标以及学习目标重要的部位。本发明提出了balanced MSE LOSS,用以平衡样本分布,让神经网络自动学习区分不同类型目标(如新出现的或消失的目标)。本发明可以应用于自动驾驶中输出多个目标的轨迹,还能够预测视频目标的行为,并且可以提高交通管理效率以及预防事故的发生。
-
公开(公告)号:CN113656952B
公开(公告)日:2024-04-05
申请号:CN202110889782.9
申请日:2021-08-04
Applicant: 之江实验室
Abstract: 本发明公开一种云边端计算环境的建模工具,包括物理组件、逻辑组件和管理组件;其中,物理组件包括传感器、执行器和按等级顺序排列的若干层边缘装置;逻辑组件包括应用程序模块和应用程序边缘,应用程序模块是对虚拟机的模拟,应用程序边缘是对虚拟机之间数据流的模拟;管理组件包括控制器和模块映射对象,模块映射对象定义边缘设备与各个应用程序模块之间的映射关系;控制器在物理组件上启动逻辑组件,并负责收集仿真期间的度量数据。本发明提供了边缘设备的不同配置会消耗多少时间成本、能量成本、网络成本的数学度量。因此可以定义用于边缘计算的基础设施、服务布局和资源分配策略,便于评估端到端延迟、网络拥塞、电力使用和服务质量等。
-
公开(公告)号:CN113656952A
公开(公告)日:2021-11-16
申请号:CN202110889782.9
申请日:2021-08-04
Applicant: 之江实验室
Abstract: 本发明公开一种云边端计算环境的建模工具,包括物理组件、逻辑组件和管理组件;其中,物理组件包括传感器、执行器和按等级顺序排列的若干层边缘装置;逻辑组件包括应用程序模块和应用程序边缘,应用程序模块是对虚拟机的模拟,应用程序边缘是对虚拟机之间数据流的模拟;管理组件包括控制器和模块映射对象,模块映射对象定义边缘设备与各个应用程序模块之间的映射关系;控制器在物理组件上启动逻辑组件,并负责收集仿真期间的度量数据。本发明提供了边缘设备的不同配置会消耗多少时间成本、能量成本、网络成本的数学度量。因此可以定义用于边缘计算的基础设施、服务布局和资源分配策略,便于评估端到端延迟、网络拥塞、电力使用和服务质量等。
-
公开(公告)号:CN112261343A
公开(公告)日:2021-01-22
申请号:CN202011422525.6
申请日:2020-12-08
Applicant: 之江实验室
IPC: H04N7/14 , H04N21/4788 , H04L29/06
Abstract: 本发明公开了一种基于WebRTC的机器人远程通话系统,包括客户端、信令服务、消息服务和机器人。客户端通过信令服务和消息服务主动与机器人建立点对点连接,传输音视频流,播放视频和语音;信令服务负责存储、转发客户端和机器人的消息,维护客户端与机器人的映射关系;消息服务接收客户端发布的身份ID、信令服务地址等信息,供机器人订阅,支持MQTT和HTTP协议;机器人通过信令服务和消息服务与客户端建立点对点连接,传输音视频流,播放视频和语音。本发明不但支持客户端与机器人的建立音视频通话,还支持通话的断线自动重连、机器人忙碌等待、机器人音视频显示可配置,信令服务支持多组一对一的客户端与机器人通话。
-
公开(公告)号:CN113487715B
公开(公告)日:2024-09-20
申请号:CN202110703465.3
申请日:2021-06-24
Applicant: 之江实验室
Abstract: 本发明公开了一种基于生成对抗网络的数据增强方法。通过生成对抗网络的特征提取,将车辆图像的深层特征渲染到一个既定的三维立体结构上,完成一幅二维图像到三维立体结构的重构,再进行三维单眼投影,获得其在所需视角的二维图像,完成车辆不同视角图像的生成。本发明在前沿作者的noise‑to‑image的基础上进行了修正尝试,使其完成了从noise‑to‑image到image‑to‑image的转换,在此之后,可以做到定向修改一种特定属性(车辆视角等),生成新视角的图像。
-
公开(公告)号:CN114153943B
公开(公告)日:2024-05-17
申请号:CN202111384677.6
申请日:2021-11-22
Applicant: 之江实验室
Abstract: 本发明公开了一种基于知识图谱构建机器人行为树的系统及方法,系统包括:知识图谱及行为树,知识图谱通过一组有向连接的动作节点,根据AOG格式构建,动作节点包括动作类别及其对应的一组动作特征、动作作用对象,有向连接根据比对动作特征连接动作节点;行为树根据主谓宾结构的任务,将主语和宾语作为动作作用对象,将谓语分类到动作类别对应的一组动作特征,根据动作特征构建对应的行为,根据行为构建行为节点,并根据子动作节点有向连接调换行为树各行为节点的顺序;方法包括:S1,构建对象知识库;S2,构建动作知识库;S3,构建知识图谱;S4,构建行为树。
-
公开(公告)号:CN114153943A
公开(公告)日:2022-03-08
申请号:CN202111384677.6
申请日:2021-11-22
Applicant: 之江实验室
Abstract: 本发明公开了一种基于知识图谱构建机器人行为树的系统及方法,系统包括:知识图谱及行为树,知识图谱通过一组有向连接的动作节点,根据AOG格式构建,动作节点包括动作类别及其对应的一组动作特征、动作作用对象,有向连接根据比对动作特征连接动作节点;行为树根据主谓宾结构的任务,将主语和宾语作为动作作用对象,将谓语分类到动作类别对应的一组动作特征,根据动作特征构建对应的行为,根据行为构建行为节点,并根据子动作节点有向连接调换行为树各行为节点的顺序;方法包括:S1,构建对象知识库;S2,构建动作知识库;S3,构建知识图谱;S4,构建行为树。
-
-
-
-
-
-
-
-