本公开实施例公开了一种数据处理方法、装置、服务器及存储介质,该方法包括:接收各个第一用户通过目标客户端对每个第一用户的关联图像的第一缺陷检测结果,并将各个关联图像的第一缺陷检测结果更新至第一中间件的数据缓存空间;其中,第一中间件的数据缓存空间用于缓存设定类型数据以及缓存查询结果;响应于第二用户的查询请求,基于更新后的第一中间件的数据缓存空间确定查询结果。将数据转存到缓存空间,在缓存空间中进行查询,与直接在数据库中查询相比,查询效率更高,实时性强;缓存空间中,加入了第一缺陷检测结果,提高了数据查询的准确率。
背景技术
在常见的数据分析系统中,为了对数据库生产历史记录进行抽取,比如会采用常用ETL(Extract-Transform-Load、抽取-转换-加载)工具搭建ETL服务器,定时查询数据库,按照一定的规则将数据转存到其他数据库,后端程序访问数据提取数据返回给前端进行展示。
但是,传统的ETL工具的定时抽取不能符合实时性的要求,如果将定时抽取任务调整的更加频繁,则会大大增加数据库的访问压力,降低查询的时效性。另外,数据生产记录来源单一,导致查询的准确性较低。
实现思路