文件存储方法、读取方法、装置、设备及介质

    公开(公告)号:CN120011326A

    公开(公告)日:2025-05-16

    申请号:CN202510111891.6

    申请日:2025-01-23

    Inventor: 贾涛 王帅阳 李航

    Abstract: 本发明涉及计算机技术领域,公开了一种文件存储方法、读取方法、装置、设备及介质,该方法包括:获取待存储文件以及与待存储文件对应的标识信息,生成与待存储文件对应的元数据信息,确定传输待存储文件的传输协议,当确定为目标协议时,确定分布式存储系统中是否存在与标识信息对应的文件。当确定未存在对应文件时,创建逻辑头文件,识别多版本功能是否开启,当确定该功能处于开启状态时,生成与待存储文件对应的版本信息,将该版本信息配置为首个版本信息,将元数据信息、标识信息,以及首个版本信息加入到逻辑头文件中,以及将待存储文件在分布式存储系统中完成存储操作。该方法减少了一个元数据信息文件,增加了整个集群的可支持文件量级。

    一种基于大数据存储RBF纳管配额集中管控方法及装置

    公开(公告)号:CN117130783A

    公开(公告)日:2023-11-28

    申请号:CN202311090696.7

    申请日:2023-08-28

    Abstract: 本发明提供了一种基于大数据存储RBF纳管配额集中管控方法及装置,该方法通过Router作为中心,实现对多存储系统的资源配额限制。管理员可通过命令行方式向Router发送配额设置请求,限制资源目录的文件个数和存储空间。每个Router周期性地同步配额信息,从各存储系统获取已使用资源量,确保配额与实际使用一致。用户操作在提交前经过配额限制判断。配额设置值持久化至Zookeeper,支持系统重启和同步。系统通过分发请求至不同存储系统实现负载均衡。该方法降低了管理成本,提高了资源利用效率,确保了存储系统的稳定性和性能。该装置包括配额设置、数据同步与配额矫正、配额限制模块,能够有效实施该方法。

    分布式系统中的数据统计方法、装置、设备及存储介质

    公开(公告)号:CN119211247A

    公开(公告)日:2024-12-27

    申请号:CN202411387972.0

    申请日:2024-09-30

    Inventor: 李航 王帅阳 贾涛

    Abstract: 本申请公开了一种分布式系统中的数据统计方法、装置、设备及存储介质,分布式系统包括一个主节点和多个从节点,方法应用于任一从节点,包括:接收主节点发送的目标子任务,目标子任务由主节点对应用任务进行子任务划分得到;执行目标子任务,获取其在执行过程中产生的执行日志;对本地日志文件加锁;若加锁成功,则将加锁时间之前的临时日志和执行日志保存至本地日志文件;若加锁失败,则将执行日志作为临时日志生成临时日志文件;根据主节点下发的日志拉取请求将本地日志文件上传至主节点,以使其对各从节点的本地日志文件进行合并处理,获得应用任务的日志文件。本方案可以在分布式系统中实现任意应用软件的性能数据统计,具有较高的应用价值。

    一种视频压缩方法、系统、装置及介质

    公开(公告)号:CN115776568A

    公开(公告)日:2023-03-10

    申请号:CN202211259798.2

    申请日:2022-10-14

    Inventor: 李航

    Abstract: 本申请公开了一种视频压缩方法、系统、装置及介质,应用于视频压缩领域,通过MCU获取卷积核矩阵和待压缩视频,由于卷积核可以提取视频图形帧的特征,所以将需要被压缩的视频中的每一帧与卷积核矩阵进行卷积运算得到卷积结果,如果当前帧的卷积结果与前一帧的卷积结果一致代表当前帧和前一帧的画面相似,即两帧为静态帧,将前一帧替代当前帧;反之,代表当前帧与前一帧的画面不同,保留当前帧作为动态帧,继续判断下一帧与其前一帧的卷积结果是否一致至最后一帧。可以减少视频所占的内存。此外,由于并未对动态帧做出改变,所以视频的分辨率、码转率和帧率等指标未被改变,不仅压缩了视频的存储空间,同时也可以为使用者提供原清晰度的画面。

    代码的加密方法和装置、存储介质及程序产品

    公开(公告)号:CN119150325A

    公开(公告)日:2024-12-17

    申请号:CN202411375185.4

    申请日:2024-09-29

    Abstract: 本申请实施例提供了一种代码的加密方法和装置、存储介质及程序产品,涉及计算机领域,其中,该代码的加密方法包括:对待加密的代码进行打包,得到第一代码包;基于加密函数,编译生成加密包;在获取到第一代码包对应的待加密字符流的情况下,调用加密包,以通过加密函数,对待加密字符流进行加密,生成加密后的第二代码包;采用上述方案,解决了相关技术中代码的加密效果较差的问题。

    分布式文件系统不停服务的扩容方法、计算机及存储介质

    公开(公告)号:CN116974988A

    公开(公告)日:2023-10-31

    申请号:CN202310954027.3

    申请日:2023-07-31

    Abstract: 本发明提出了一种分布式文件系统不停服务的扩容方法、计算机及存储介质,其中,方法包括:预先在本地的服务器端口的对象类中定义RBF对象服务,并将RBF对象服务初始赋值为NULL;预先在本地的服务器端口的对象类中添加对象切换功能,对象切换功能用于控制启用本地对象服务或者启用RBF对象服务;响应于启用RBF对象服务,由对象切换功能从本地分布式文件系统中获取预设的RBF对象服务代码并替换NULL,并将本地对象服务的接口添加为RBF对象服务的子服务。本发明通过在本地服务的对象类中定义RBF服务,使得RBF服务作为本地对象类中的子服务对象,并在该对象类中预设对象切换功能,从而能够在不改变IP和端口号的的情况下,切换到RBF服务以达到扩容的目的。

    数据服务的处理方法及装置、存储介质及电子设备

    公开(公告)号:CN119203089A

    公开(公告)日:2024-12-27

    申请号:CN202411259400.4

    申请日:2024-09-09

    Inventor: 贾涛 王帅阳 李航

    Abstract: 本申请实施例提供了一种数据服务的处理方法及装置、存储介质及电子设备,涉及计算机领域,包括:获取通过第一名称节点向目标客户端颁发的第一身份认证令牌,其中,第一身份认证令牌包括第一密码、第一秘钥ID和第一有效时长;创建目标客户端与第二名称节点之间的安全连接;通过第一身份认证令牌,从与第二名称节点对应的第一持久化存储区域中查找到目标身份认证索引,其中,目标身份认证索引包括第二密码和第二有效时长;比对第一密码与第二密码,并在第一比对结果表示第一密码与第二密码相同的情况下,确定通过第一身份认证令牌的验证,允许访问第二名称节点的元数据服务。

    一种代码增量编译方法、装置、计算机设备及存储介质

    公开(公告)号:CN117149209A

    公开(公告)日:2023-12-01

    申请号:CN202311108112.4

    申请日:2023-08-30

    Inventor: 李航

    Abstract: 本发明涉及工程项目开发技术领域,公开了一种代码增量编译方法、装置、计算机设备及存储介质,该方法包括:扫描整个工程项目,确定修改代码和修改代码所在的第一模块;根据依赖关系,确定不依赖第一模块的第二模块,并获取第二模块的第一编译信息文件,其中,第一编译信息文件是由上一次编译生成的;根据依赖关系,确定依赖第一模块的第三模块,并对第一模块和第三模块中的代码进行重新编译,得到第二编译信息文件;将第一编译信息文件和第二编译信息文件进行组合,得到目标编译信息文件。本发明解决了现有技术每次编译涉及全部源代码,编译时间长、效率低,不利于对工程项目的源代码进行调试与修改的问题。

    一种Hadoop分布式文件系统的服务访问白名单的方法及装置

    公开(公告)号:CN116938589A

    公开(公告)日:2023-10-24

    申请号:CN202311090690.X

    申请日:2023-08-28

    Abstract: 本发明提供了一种Hadoop分布式文件系统的服务访问白名单的方法及装置,该方法通过链接注册器、白名单过滤器、链接检查器、链接拒绝器和链接创建器的协同作用,实现了对HDFS客户端访问的精细控制。在连接请求过程中,从客户端解析IP地址作为标识,白名单过滤器与服务端配置的IP白名单进行匹配,链接检查器根据预设规则判断是否允许连接。如果通过验证,链接创建器建立连接,允许客户端访问。这一方法及装置提高了系统安全性、精细管理、性能优化等,为HDFS系统带来多重益处。

    一种视频数据处理方法、系统、设备及介质

    公开(公告)号:CN116132690A

    公开(公告)日:2023-05-16

    申请号:CN202310142425.5

    申请日:2023-02-17

    Inventor: 李航

    Abstract: 本发明属于计算机领域,具体涉及一种视频数据处理方法、系统、设备及介质。其中方法包括:对比原始视频文件中相邻视频帧之间对应像素点的数据差异,并根据存在数据差异的像素值及所述像素值的维持时间生成最小存储单位的视频数据;根据所述最小存储单位的视频数据按照预定方式生成预定格式的视频文件。通过本发明提出的一种视频数据处理方法,通过将视频数据中的变化以最大限度的简化为最小存储单位,可有效解决视频数据的大量冗余数据所带来的磁盘压力以及磁盘IO压力问题。

Patent Agency Ranking