基本信息:
- 专利标题： 一种基于大数据的共享服务平台数据处理方法
- 申请号：CN202410335680.6 申请日：2024-03-22
- 公开(公告)号：CN118094600A 公开(公告)日：2024-05-28
- 发明人： 张迪 , 张靖 , 吴建琳 , 陈胡嵘 , 徐道磊 , 程航 , 周婕 , 张子健 , 刘佳 , 范莹 , 王俊 , 赵煜阳 , 许冬 , 冯天健 , 时雨农
- 申请人： 国网安徽省电力有限公司信息通信分公司
- 申请人地址： 安徽省合肥市包河区黄山路9号
- 专利权人： 国网安徽省电力有限公司信息通信分公司
- 当前专利权人： 国网安徽省电力有限公司信息通信分公司
- 当前专利权人地址： 安徽省合肥市包河区黄山路9号
- 代理机构： 南京佰腾智信知识产权代理事务所(普通合伙)
- 代理人： 黄杭飞
- 主分类号： G06F21/60
- IPC分类号： G06F21/60 ; G06F21/64 ; G06F21/41 ; G06F16/182 ; G06F16/215 ; G06F16/25
摘要：
本发明提供一种基于大数据的共享服务平台数据处理方法，应用于平台服务器，包括获取不同数据源的数据，将获取的数据转存至分布式文件系统，提取存储的数据并进行数据清洗和预处理，去除噪声、填补缺失值、解决数据不一致性；分析和挖掘清洗和处理的数据，流式处理平台进行实时数据处理和分析，并通过数据共享机制和访问控制策略让用户能够共享和访问数据。本发明基于数据采集、存储、清洗预处理、分析挖掘、共享访问、实时处理和流式计算、数据安全和隐私保护等多个方面，综合运用各种技术和工具来实现快速稳定的共享服务，能够提升共享服务平台的数据处理能力、安全性和智能化程度，以满足用户不断增长的需求，并应对日益复杂的数据处理场景。