-
公开(公告)号:CN101022397A
公开(公告)日:2007-08-22
申请号:CN200710038073.X
申请日:2007-03-15
Applicant: 上海交通大学
Abstract: 一种电子信息技术领域的分布式交通信息存储文件系统。本发明中,存储资源管理服务器管理数据存储服务器,收集数据存储服务器的各项指标,元数据管理服务器在获取文件时,用于维护可靠的端到端的传输,传输管理服务器用于数据存储服务器之间的传输,副本管理服务器包括与元数据服务器通信的单元、与历史分析及策略扩展服务器通信的单元以及调用传输管理服务器的单元,信息监控服务器求得传输速率的计算得到需要的信息,历史分析及策略扩展服务器对有用数据进行分析,虚拟文件视图终端是系统的主要入口端,与数据存储资源管理服务器交互的单元以及与副本管理服务器交互的单元。本发明能更合理分配数据网格资源,通用、稳定、高效、灵活。
-
公开(公告)号:CN1912837A
公开(公告)日:2007-02-14
申请号:CN200610030601.2
申请日:2006-08-31
Applicant: 上海交通大学
IPC: G06F9/455
Abstract: 一种支持大规模微观交通仿真的可扩展分布式系统,该系统采用Agent技术及HLA技术相结合,通过仿真实体产生服务器根据交通流分布状态模型及交通实体行为模型产生出相应的仿真实体Agent,并归入到相应的区域管理Agent:协调Agent中,各个区域的协调Agent通过HLA的RTI进行时间同步管理,通过仿真可以为各种交通灾难疏散、交通指挥及规划的决策的制定和评估提供依据。同时可以通过显示模块对仿真效果进行实时显示,该仿真系统模块清晰,具有可订制性、可扩展性、及灵活性。本发明采用分布式的仿真系统,采用Agent技术与HLA技术相结合,能有效的、快捷的实现微观交通的仿真。
-
公开(公告)号:CN118732946A
公开(公告)日:2024-10-01
申请号:CN202410744105.1
申请日:2024-06-11
Applicant: 上海交通大学
Abstract: 本发明公开了一种持久内存设备,该设备包括,物理组织管理模块、读写控制及校验模块。所述物理组织管理模块,用以对所述持久内存物理结构做出定义;所述读写控制及校验模块,用于对持久内存的读写操作进行管理和控制,以及对持久内存的读写操作进行错误检测和纠正。所述持久内存物理结构的定义参数包括存储单元工作原理、行列布阵布局、Die内组织布局、地址线及数据线位宽、封装方式和/或芯片面积。
-
公开(公告)号:CN118689644A
公开(公告)日:2024-09-24
申请号:CN202410744103.2
申请日:2024-06-11
Applicant: 上海交通大学
IPC: G06F9/50
Abstract: 本发明公开了一种持久内存系统,包括,数据崩溃一致性保障机制模块,用以实现持久内存检查点原位创建和重建功能、增加式检查点管理功能、低开销检测构建功能、跨节点一致的基于应用特征的数据映射、快速重建和有序重建功能。数据可靠性机制模块,用以实现元数据和数据的差别访问控制机制、持久内存系统的持久化管理方法、低开销的数据可靠性机制,以及PMEM数据的原子性、完整性和一致性。负载均衡和寿命延长机制模块,用以实现跨CXL的持久内存动态分配与调度、异构内存系统的数据冷热分布、持久内存应用访存频率、多粒度的内存块融合与分割、懒惰回收机制和多重PMEM写吸收方法。
-
公开(公告)号:CN114115711B
公开(公告)日:2023-10-17
申请号:CN202110977140.4
申请日:2021-08-24
Applicant: 上海交通大学
IPC: G06F3/06
Abstract: 本发明提供了一种基于非易失内存文件系统的快速缓存系统,包括:混合内存管理模块:对缓存中的数据和元数据进行管理;数据操作模块:进行重构底层文件系统的数据操作,向应用提供数据存取;缓存替换模块:通过动态的缓存替换策略,对冷热数据进行迁移和回收。本发明的系统减少了发生在关键路径上的非易失内存高延迟的写入操作,细粒度的数据块分配策略避免了静态分配数据块造成的写放大问题,动态的缓存替换策略提高了缓存的利用率,从而提升了系统的整体性能。
-
公开(公告)号:CN116486890A
公开(公告)日:2023-07-25
申请号:CN202310486309.5
申请日:2023-04-28
Applicant: 上海交通大学
IPC: G11C29/38
Abstract: 本发明提供一种基于校验复用的固态硬盘FTL方法、系统、设备及介质,包括:数据写入:步骤A1:计算数据的CRC16校验码,进行预去重;步骤A2:计算数据的SHA1‑256校验码,进行去重;步骤A3:如果发现重复,直接返回写入成功;否则进行步骤A4;步骤A4:对数据进行编码;步骤A5:将数据和其他信息一并写入SSD的NAND闪存中。数据读取:步骤B1:以一定闪存读取精度,从SSD的NAND闪存中读取数据以及其他信息。步骤B2:对数据进行解码,并使用CRC16校验码辅助解码。步骤B3:如果解码成功,返回数据给主机,读取成功;如果解码失败,提高闪存读取的精度,进行步骤B1;在解码次数超过一定次数后,返回读取失败。本发明能够降低数据读写延迟,增大全盘的读写带宽。
-
公开(公告)号:CN116450045A
公开(公告)日:2023-07-18
申请号:CN202310431062.7
申请日:2023-04-20
Applicant: 上海交通大学
IPC: G06F3/06
Abstract: 本发明提供了一种面向HBM的混合内存系统的实现方法、系统及介质,包括:混合内存控制器初始化建立,创建热度监控表和地址转换表;混合内存系统接收访问请求;根据数据的热度重新分配其所存储的位置,更新地址转换表,并完成访问请求的重定向;根据地址转换表进行数据的迁移和缓存,并完成访问请求。本发明针对HBM的高带宽特性,将HBM划分为c‑HBM和m‑HBM区域,并对数据进行细致的热度分类,充分提高了热数据的访问速度,减少了数据迁移的开销,很好地降低内存系统的总体访问延迟;相比传统的内存系统仅加入了小容量的HBM,大幅提高了内存系统的整体访问速度,同时提供了更大的内存空间,在各种工作负载下均表现优异,基本有良好的市场前景和应用价值。
-
公开(公告)号:CN112367536B
公开(公告)日:2021-08-06
申请号:CN202011452878.0
申请日:2020-12-11
IPC: H04N21/232 , H04N21/238 , H04N21/262
Abstract: 本发明提供了一种面向视频文件大数据的RDMA混合传输方法、系统及介质,包括:步骤1:RDMA初始化建立;步骤2:获取视频数据请求;步骤3:对视频数据请求进行识别分类;步骤4:对视频数据请求进行传输。本发明针对分布式文件系统下视频大数据传输的问题,提供了一种RDMA混合传输方法,所述的方法和装置能够很好的降低视频大数据传输延迟;同时能够适配分布式非易失性内核态文件系统,优化了分布式系统中视频流的传输过程,具有良好的市场前景和应用价值。
-
公开(公告)号:CN113010477A
公开(公告)日:2021-06-22
申请号:CN202110310068.X
申请日:2021-03-23
Applicant: 中兴通讯股份有限公司 , 上海交通大学
Abstract: 本申请提出一种持久内存文件系统元数据的检索方法和装置、存储结构,涉及数据处理技术领域。该方法包括:基于待检索路径确定待检索哈希值,待检索路径用于查找元数据的存储路径;依据待检索哈希值、指纹库和存储路径哈希值,确定待检索路径对应的存储地址,指纹库用于记录存储路径哈希值的特征,存储路径哈希值是元数据的存储路径对应的哈希值;从待检索路径对应的存储地址获得元数据。通过基于待检索路径确定待检索哈希值,方便对待检索路径进行处理;通过指纹库先对存储路径哈希值的特征进行筛选,能够加快检索速度,提高元数据的检索效率;从待检索路径对应的存储地址获得元数据,保证检索结果的准确性。
-
公开(公告)号:CN107544756B
公开(公告)日:2020-11-06
申请号:CN201710657877.1
申请日:2017-08-03
Applicant: 上海交通大学
Abstract: 本发明提供了一种基于SCM的Key‑Value日志型本地存储方法,存储方法包括以下步骤:SCM内存划分步骤:对SCM内存进行按功能划分分区,即划分为超级块区、检查点区、页管理区、静态哈希表区、数据存储区这五个不同的逻辑分区;多层次内存管理步骤:构建三层内存管理模块,在不同层面上对内存进行管理,实现页面的动态分配和回收;高并发哈希表构建步骤:使用静态哈希表来索引key‑value对象,使用动态分配的数组存放哈希冲突的元素。本发明中的实现方法根据异构内存介质的硬件特性合理调度分配存储空间,提高存储介质的利用率,延长硬件的使用寿命,提高混合键值存储系统并发性和数据吞吐量。
-
-
-
-
-
-
-
-
-