公开(公告)号：CN117056408A

公开(公告)日：2023-11-14

申请号：CN202311110409.4

申请日：2023-08-30

Applicant: 北京中科闻歌科技股份有限公司

Inventor： 邢日上 ,  杜江涛 ,  禹平 ,  方省 ,  曹家 ,  罗引 ,  王磊

IPC: G06F16/25 ,  G06F16/2455 ,  G06F3/06

Abstract: 本公开涉及一种数据处理方法、装置、设备及计算机可读存储介质，该方法包括：获取序列化的二进制数据，将所述数据解码为标准化格式的数据对象；对所述标准化格式数据进行数据处理，得到处理结果；将所述处理结果序列化编码后存储到内存，进而写入磁盘中。本公开通过将数据解码为标准化格式数据，通过解码为标准化格式数据，提高使用便捷度；对标准化格式数据进行数据处理，得到处理结果，并将结果通过网络传输，降低了传输的数据大小，节省了带宽；将处理结果编码后存储到内存中，降低了对内存空间的占用；写入磁盘，提高了磁盘利用率，节省了磁盘的使用。

公开(公告)号：CN118227262A

公开(公告)日：2024-06-21

申请号：CN202410364624.5

申请日：2024-03-28

Applicant: 北京中科闻歌科技股份有限公司

Inventor： 禹平 ,  张志龙 ,  方省 ,  曹家 ,  罗引 ,  王磊

IPC: G06F9/455 ,  G06F9/50

Abstract: 本申请实施例提供了一种针对流式数据处理的弹性扩缩容方法及装置，涉及云原生技术领域，部署于Kubernetes平台中，通过监控指标参数集合中的各个指标，获取所述指标参数集合中各个指标对应的参数值；所述指标参数集合中包括至少一个关于流式数据任务的自定义指标；基于所述各个指标对应的参数值，结合预设告警规则生成告警消息；响应于所述告警消息，对所述各个指标对应的参数值进行分析，以生成目标资源的配置信息；所述目标资源为基于自定义资源定义CRD创建的自定义资源；基于所述目标资源的配置信息，对所述目标资源对应的Deployment进行扩缩容。本申请实施例用于在Kubernetes平台中处理流式数据业务时，提高业务处理的效率。