您当前的位置:首页 > 博客教程

实时数据流的处理过程

时间:2024-08-15 11:09 阅读数:9618人阅读

*** 次数:1999998 已用完,请联系开发者***

实时数据流的处理过程

╯0╰ 中国电信申请多数据流并行处理方法、装置及非易失性存储介质专利,...第一类操作包括以下至少之一:数据去重,数据关联;在目标任务流的数据写入合并阶段,依据任务配置信息对目标任务流中的数据流进行持久化落盘处理。本申请解决了相关技术中在对数据流进行关联时在计算层进行实时数据流关联造成的计算任务缓存量数据极大的技术问题。本文源自...

1616121922445046759.png

腾讯公司申请实时业务数据流分析专利,保证了结构化实时数据的一致...生成对应的数据分析结果,并将各数据分析结果,按照数据应用场景分别存储至与clickhouse集群对应的各目标缓存中。采用本方法保证了结构化实时数据的一致性和准确性,实现了数据分析处理和数据分析结果的存算分离,减少处理过程中的开发成本,并提升数据分析结果的准确性。本文源...

watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L0xvcmFSYWU,size_16,color_FFFFFF,t_70

+ω+ 浪潮信息申请数据处理专利,能将非标准数据流转换为标准数据流以...本发明公开了一种数据处理方法、系统、设备及计算机可读存储介质,涉及数据传输领域,为解决非标准的数据封装格式产生的非标准数据流不能与用户逻辑适配的问题,该数据处理方法包括:当接收到实时数据,确定实时数据的当前数据流封装格式;数据流封装格式包括满足目标传输协议要...

o4YBAF9DbJeADNh7AABl0DrSkGQ920.png

东方通取得一种在弹性交互中进行工业数据蒸馏的数据处理方法专利,...本发明公开了一种在弹性交互中进行工业数据蒸馏的数据处理方法,包括:在弹性交互的动态数据环境中,通过实时监测,获取监测数据流;对监测数据流进行预处理,得到预处理数据;对预处理数据进行数据识别,确定关键数据;对关键数据通过知识蒸馏的方式进行处理,确定目标数据;对目标数据...

193107_2_0.jpg

∩ω∩ 中国一汽取得预测电动汽车中电机过温的方法和装置专利,解决了电机...该方法包括:获取车辆传感器采集到的车辆数据流,车辆数据流为待测电动汽车行驶过程中产生的实时信号:对车辆数据流进行预处理,并采用上下文特征工程对预处理后的车辆数据流进行特征计算,得到待测电动车的多个车辆特征,车辆特征包括:影响待测电动汽车的电机是否过温的关键特征...

hbIqkJYH2lhMZQF1hKW27sxuVQBvlYeBFhfvH2N4.jpeg

博睿数据申请实时显示方法及系统专利,实现高效地对海量日志数据...本发明公开了一种基于海量日志数据的实时显示方法及系统。该方法包括:通过客户端对初始日志数据流进行数据预处理操作,得到初始日志数据流对应的初始属性信息,并向服务端上报包含初始日志数据流及初始属性信息的初始数据包;通过服务端接收初始数据包,对初始数据包进行实时...

watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2FzNDU4OXNk,size_16,color_FFFFFF,t_70

●ω● 网宿科技取得数据处理专利,专利技术可提高处理单元运行的效率,加快...本发明实施例涉及实时计算领域,公开了一种数据处理方法、装置、服务器和可读存储介质。本发明中,应用于实时计算系统,所述实时计算系统通过预设的存储组件存储数据流;所述数据处理方法包括:当内存中存储的文件消息的数量小于预设存储阈值,则根据用户需求从文件消息队列中获...

webp

ˋωˊ 中国电信申请数据处理专利,解决数据质量问题实时任务中断运行的...生成质量指标,其中,质量指标用于表征数据的合格程度;对质量指标中低于预设阈值的数据进行修复处理,得到输出数据流,并将输出数据流中的数据存入存储介质。本申请解决了于相关技术在数据被写入存储介质之后再进行监控造成的因数据质量问题实时任务中断运行的技术问题。本文...

∪﹏∪ 20151012319.jpg

≥﹏≤ 中国科学院自动化所:实感智能计算系统实现全脑光学接口虚拟现实和...该研究借助天文学领域的数据处理技术,采用FPGA-GPU混合架构,成功对高达500MB/s的大数据流神经功能数据进行实时配准、信号提取和分析。通过这一技术突破,研究团队首次实现了对斑马鱼全脑十万级神经元的实时监控,进而对任意选择的神经元集群活动进行解码,以控制外部设备...

071851hcgc3nag0r3cihqq.jpg

中科院自动化所:实感智能计算系统实现全脑光学接口虚拟现实和全脑...该研究借助天文学领域的数据处理技术,采用FPGA-GPU混合架构,成功对高达500MB/s的大数据流神经功能数据进行实时配准、信号提取和分析。通过这一技术突破,研究团队首次实现了对斑马鱼全脑十万级神经元的实时监控,进而对任意选择的神经元集群活动进行解码,以控制外部设备...

36e43624eeae4656be5e3a3b3f6bfc50.jpeg

神灯vp加速器部分文章、数据、图片来自互联网,一切版权均归源网站或源作者所有。

如果侵犯了你的权益请来信告知删除。邮箱:xxxxxxx@qq.com