一种基于代理度量模型的弱监督视频行为定位方法

    公开(公告)号:CN113420592B

    公开(公告)日:2022-11-18

    申请号:CN202110527929.X

    申请日:2021-05-14

    Applicant: 东南大学

    Abstract: 本发明公开了一种基于代理度量模型的弱监督视频行为定位方法,视频行为定位在行为识别领域中扮演着重要的作用,由于人工对动作区间时序的标注既昂贵又费时,有效的弱监督的视频行为定位方法是不可或缺的,为了解决这个问题,本发明基于每个动作类的代理向量来训练模型,代理向量是通过训练得出的每个动作类的特征代表,它们被用于度量动作片段和不同动作原始特征的特征距离。本发明提出一种代理度量模块,它能使相同的动作片段特征聚类在一起,并且能让未裁剪视频中的背景片段特征远离动作片段特征,能有效地提高在弱监督环境下对视频进行行为定位的精度。

    基于稠密-分段式帧采样的视频行为识别方法、系统、计算机设备和存储介质

    公开(公告)号:CN111860222B

    公开(公告)日:2022-11-18

    申请号:CN202010620022.3

    申请日:2020-06-30

    Applicant: 东南大学

    Abstract: 本发明公开了一种基于稠密‑分段式帧采样的视频行为识别方法、系统、计算机设备和存储介质。首先将视频均匀地分为N段,在每段中采样一帧做为关键帧,由关键帧组成关键片段。同时,对每一个关键帧,在其前后按固定的采样率采样连续若干帧,作为上下文帧。将上下文帧和其对应的关键帧组成一个上下文片段。进行一次稠密‑分段式帧采样,将会返回一个关键片段和N个上下文片段,将其送入时序稠密‑分段式网络TDSN中进行处理,从关键片段中提取长程时序信息,从上下文片段中提取局部上下文信息,将两种信息融合在一起,最终用于识别视频中的行为动作。本发明能够有效提取视频中的长程时序信息和局部上下文信息,有效地提升了视频行为识别的准确率。

    一种微流控细胞磁捕获与检测系统及其捕获与检测方法

    公开(公告)号:CN111944656B

    公开(公告)日:2022-07-29

    申请号:CN202010639134.3

    申请日:2020-07-06

    Applicant: 东南大学

    Abstract: 本发明公开一种微流控细胞磁捕获与检测系统及其捕获与检测方法。将抗趋化因子受体CXCR4的抗体(12G5)、荧光分子Alexa Fluor 647(F647)修饰在磁性四氧化三铁纳米颗粒表面,构建磁性荧光纳米探针,并结合微流控芯片分选与磁捕获,以及荧光定量分析仪进行急性髓系白血病耐药细胞的检测。磁性荧光纳米探针能特异性靶向急性髓系白血病耐药细胞。将细胞与纳米探针共孵育后,以一恒速通过所述微流控芯片,在微流控芯片一端的细胞捕获区外加静磁场,被磁标记的细胞由于受到磁力作用滞留在微流控芯片的细胞捕获区内,而未被磁标记的阴性细胞以及溶液中多余的纳米探针会从微流控芯片的出口流出。

    一种联合注意力机制的3D人体姿态识别双分支网络模型

    公开(公告)号:CN113449681A

    公开(公告)日:2021-09-28

    申请号:CN202110799161.1

    申请日:2021-07-15

    Applicant: 东南大学

    Abstract: 本发明公开了一种联合注意力机制的3D人体姿态识别双分支网络模型,该模型通过两个并行分支可以同时学习到人体各个关节的特征信息分布和注意力分布,然后通过注意力分布来强化模型对于人体关节的专注能力。其中,注意力分支采用沙漏式网络结构。最后,模型通过根节点模块来解析深度信息,通过根节点相关姿态模块来解析3D人体相关姿态。本发明提出的模型通过双分支结构并行学习人体姿态的特征表示和注意力分布,并借助注意力分布有效提高了模型对人体关节的专注能力,从而极大地降低了模型在人体姿态识别上的关节定位误差。

    一种用于视频行为识别的正则化方法

    公开(公告)号:CN111898421A

    公开(公告)日:2020-11-06

    申请号:CN202010560716.2

    申请日:2020-06-18

    Applicant: 东南大学

    Abstract: 本发明公开了一种用于视频行为识别的正则化方法,首先利用全局平均池化技术对每个时间步上的特征图进行显著性评估,利用gESD检验方法确定包含最显著空间特征的特征图,然后在选定的特征图内以通道为最小单元,以通道激活值占比为依据来计算每个通道的丢弃概率并执行丢弃操作(对应通道激活值置零),最后,由于正则化模块只在训练阶段生效,为保持训练阶段与推理阶段输出激活值幅度的一致性,需要为训练阶段的输出计算一个补偿系数与输出特征图相乘。本发明可以在推理阶段不增加任何额外计算消耗的情况下有效提高视频识别网络的验证集精度,且可以加入任何现有神经网络架构中,有效缓解网络在视频识别任务中过拟合空间特征而忽视时序特征的问题。

    一种双靶向的酸敏感普鲁士蓝载药体系的制备方法及应用

    公开(公告)号:CN111744009A

    公开(公告)日:2020-10-09

    申请号:CN202010504792.1

    申请日:2020-06-05

    Applicant: 东南大学

    Abstract: 本发明公开了一种双靶向的酸敏感普鲁士蓝载药体系的制备方法及应用,可以有效地解决白血病耐药以及肝脏、脾脏浸润的问题。解决的技术方案是,首先,酸敏感聚乙二醇-聚乙烯亚胺高分子通过静电、氢键作用吸附在普鲁士蓝纳米颗粒表面;其次,CXCR4拮抗多肽(E5)和透明质酸通过化学键与普鲁士蓝纳米颗粒表面的聚乙烯亚胺分子连接;再次,柔红霉素通过氢键作用吸附于普鲁士蓝纳米颗粒表面。本发明制备方法简单温和,材料安全易得且具有良好的生物相容性,制备的载体具有血液长循环能力、肿瘤细胞双靶向能力、溶酶体逃逸能力、酸敏感药物释放能力,能够有效增强小鼠白血病治疗效果并抑制骨髓归巢与肝脏、脾脏浸润。

Patent Agency Ranking