公开(公告)号：CN114386035A

公开(公告)日：2022-04-22

申请号：CN202111672632.9

申请日：2021-12-31

Applicant: 航天信息股份有限公司

Inventor： 谢警 ,  苏建辉 ,  刘学 ,  张艳芳 ,  张美娟 ,  李华健

IPC: G06F21/56 ,  G06F16/903 ,  G06F16/906 ,  G06F11/32

Abstract: 一种检测威胁数据的方法、装置及电子设备，该方法包括：接收待存储业务数据，解析出所述待存储业务数据的数据类型，将所述数据类型与数据存储目录中的数据类别名称进行匹配，确定出所述数据类型对应的数据类别名称，获得所述数据类别名称对应的告警规则，检测所述待存储业务数据是否符告警规则，确定所述待存储数据符合告警规则时，将发送警告信息至服务器关联的指定邮箱。通过上述的方法，能够检测出包含错误代码或者威胁代码的待存储业务数据，并且，能够对以及存储的业务数据进行检测，进一步提高了存储业务数据中的业务数据节点的安全性。

公开(公告)号：CN119621851A

公开(公告)日：2025-03-14

申请号：CN202411728483.7

申请日：2024-11-28

Applicant: 航天信息股份有限公司

Inventor： 孙恒 ,  李宪英 ,  薛军军 ,  张艳芳 ,  翟玥 ,  高军斌 ,  王冬冬

IPC: G06F16/27 ,  G06F16/2455 ,  G06F16/22 ,  G06F16/28 ,  G06F16/182 ,  G06F16/18 ,  G06F11/34 ,  G06F11/30

Abstract: 本发明公开了一种用于大数据的存储方法、系统、设备及介质，属于大数据管理技术领域。本发明的存储方法，包括：对用户每日使用的应用或产品进行埋点，通过所述埋点以采集用户每日使用的应用或者产品产生的行为数据，针对所述行为数据，生成日志数据，并将所述日志数据缓存；在缓存中获取所述日志数据，并将所述日志数据存入对应的数据仓库工具hive表；通过计算引擎spark文件，读取hive表的日志数据，并将所述日志数据，合并至当前分区的全量数据中，将所述全量数据存储至分布式存储HDFS系统。本发明的应用提高了对日志数据存储与读取的效率，提高了HDFS系统的利用率。

公开(公告)号：CN117851383A

公开(公告)日：2024-04-09

申请号：CN202311750563.8

申请日：2023-12-19

Applicant: 航天信息股份有限公司

Inventor： 张美娟 ,  高军斌 ,  林立凯 ,  张艳芳 ,  李宪英 ,  周以菲

IPC: G06F16/21 ,  G06F16/23 ,  G06F16/27

Abstract: 本申请实施例公开了一种数据迁移方法和系统，属于互联网技术领域，所述方法包括：搜索服务器集群将业务端存入的实时数据发送至消息中间件集群；Hadoop集群中的第一预设工具从所述消息中间件集群获取实时数据，写入数据库中；Hadoop集群通过第二预设工具从所述搜索服务器集群中获取预设周期前的历史数据，存入第一数据表中；按照所述预设周期从所述数据库中查询目标数据存储至第二数据表中；依据所述第一数据表、所述第二数据表确定增量数据，并将所述增量数据添加至所述第一数据表中。本申请提供的数据迁移方案，能够对快速地完成搜索服务器集群至Hadoop集群的百亿级数据的迁移、更新。