石油大数据平台

发布者:张亮发布时间:2022-10-24浏览次数:199

石油大数据平台


一、成果简介

(一)成果概述

石油大数据平台基于Spring Cloud微服务框架,是一个集数据采集、存储、处理为一体的大数据知识挖掘平台。

系统被划分为多个低耦合的微服务组件,各组件间通过HTTP和RPC协议进行交互,具有较高可用性与可扩展性。基于Redis和Kafka相结合的数据缓存服务层,能够极大提升系统内部的数据读写速度。基于HDFS和HBase的分布式数据存储和基于Hive的数据仓库存储机制,实现了多源异构大数据融合,建立了大数据治理体系结构,为整个系统提供数据支撑。基于Hadoop+Storm+Spark的云计算基础设施体系结构,融合不同云计算优势的混合云基础设施,提供数据的离线批处理、实时在线处理功能和石油大数据知识发现、知识展示和分析应用的技术方法。

(二)技术特点及技术指标

与国内外同行业技术相比,石油大数据平台各个微服务之间具有更低的耦合性,云计算基础设施更为稳定,具有更高的知识发现效率,数据访问延时在50ms以下,可承载数十TB数据。


二、技术成熟程度

已在产业中应用;

前与华北油田、中石油勘探院等石油企业进行了长期稳定的项目合作,具有多年项目经验积累,但仍有较大的推广空间,因此期望寻求与各个石油企业及各类市场推广机构进行项目合作。


三、推广合作方式

合作方式包括方法转让或许可、产品区域代理、市场推广代理、联合实施、协商确定等,进一步扩展该方法在石油产业中的应用


四、团队简介

大数据智能处理创新团队致力于人工智能、大数据处理、云计算与物联网技术等理论研究与行业应用,目前的合作伙伴包括中科院、航天科工集团、海尔、胜利油田、华北油田、国防大学等,发表SCI、EI科研论文200余篇,包括一区TOP期刊如TII、TCC等。获得相关发明专利授权10余项,专利申请100余项。到2022年3月,按照Google Scholar的统计,总引用数量超过2000,H-index为23,i10-index为60。近年共承担科研项目50余项,包括国家自然科学基金项目、欧盟第六框架计划项目、英国工程和自然科学研究委员会项目、科技部创新方法专项、山东省重点研发计划、科技部创新方法专项、山东省自然科学基金等,重要的横向项目包括海尔智能冰箱、采油大数据和知识挖掘、电力现场安全管控等。

 

五、专利授权及申请情况

1、国家发明专利:一种基于RK(Redis and Kafka)的实时高效缓存机制(实审)

2、国家发明专利:一种基于深度学习的混合多模式热数据缓存策略(实审)

3、国家发明专利:一种融合时序与非时序特征的测井曲线生成方法(实审)

4、国家发明专利:一种基于小样本学习的剩余油挖潜方法(实审)

5、国家发明专利:一种面向实时视频处理的负载感知云计算系统(授权)

6、国家发明专利:一种基于OSGi的计算任务近数据源迁移方法(授权)

7、国家发明专利:一种基于深度学习的自然场景中船牌文字识别方法、装置(授权)

8、国家发明专利:一种基于核密度估计与模糊推理系统的实时云服务瓶颈检测方法(授权)

9、国家发明专利:一种基于深度学习的高精度交通标志检测方法及系统(授权)


六、受资助及获奖情况

    1、国家自然科学基金面上项目,62072469,基于类脑认知的高泛化性故障预测方法研究,2021-01至2024-12;

    2、国家重点研发计划,2018YFE0116700,互联网工厂运行状态分析预测与优化研究及应用,2019-10至2021-10;

    3、山东省科技进步二等奖,自适应联邦智能关键技术研究与产业化 (第一)

    4、吴文俊人工智能科技进步三等奖,可信联邦智能关键技术研发及产业示范(第一)

    5、青岛市2018年度大数据优秀学术成果(入围),市局级,石油大数据知识挖掘技术,2018-11;

    6、中国石油和化学工业联合会科技进步奖三等奖,其他,大数据环境下油气开采智能生产关键技术。

  联系方式:0532-86983018。