数智资源网
首页 首页 大数据 查看内容

我国实物地质资料信息服务进入大数据时代

木马童年 2021-6-3 11:10 24 0

记者从中国地质调查局实物地质资料中心获悉,该中心与西安地质调查中心大数据团队通过联合攻关,日前成功搭建起了全国实物地质资料大数据框架,形成了具有多节点水平扩展能力的分布式互联数据中心资源池,并实现了海 ...

记者从中国地质调查局实物地质资料中心获悉,该中心与西安地质调查中心大数据团队通过联合攻关,日前成功搭建起了全国实物地质资料大数据框架,形成了具有多节点水平扩展能力的分布式互联数据中心资源池,并实现了海量实物地质资料图文一体化聚合存储、异构数据高速解析、行业级跨平台无缝对接、用户桌面和移动端无障碍浏览等多项关键技术与实用服务功能。

据介绍,随着全国重要钻孔数据库项目工作在“十三五”时期全面铺开,国家级馆藏机构和省级馆藏岩心、薄片、标本等资源数字化工作成果日积月累,产生的非结构化图件类数据经切片处理后已达到数百万级。

根据全国实物地质资料管理与服务的需求,解决信息化服务面临的“如何管起来、如何用起来、如何数据共享”三个挑战,按照国土资源部实物地质资料分散保管、集中服务的管理原则,中国地调局实物地质资料中心和西安地调中心科研人员集中攻关,经过反复多次试验和对比多种大数据服务框架,终于在实物地质资料大数据框架应用方面取得了突破。

据介绍,全国实物地质资料大数据平台服务框架实现了图件类非结构化数据以编码流的形式推送到数据库统一管理,对外服务由Windows门户提供交互接口服务,并支持门户页面定制和数据共享,对内数据管理由基于Linux系统集群环境支撑,所有结构化和非结构化数据推送到Nodes节点上,数据的查询调度由充当全局交易检测(GTM)和协调员(Coordinator)角色的服务器实现,框架具备灵活的增删节点横向扩展能力。

目前,全国实物地质资料大数据平台框架内已推送了1:3500万比例尺世界地质图数据库、1:250万比例尺中国地质图数据库和全国重要钻孔数据库目录及柱状图影像数据,信息检索效率已达毫秒级,为地质大数据工程发挥了落地应用和示范作用。

大数据 数据中心 数据库 数字化 信息化 数据共享
0
为您推荐
HIVE数据仓库完美实战课程,资源教程下载

HIVE数据仓库完美实战课程,资源教程下载

课程名称【快速掌握HIVE视频教程】HIVE数据仓库完美实战课程课程目录├第一周:hive基…...

尚硅谷大数据Flink技术与实战,资源教程下载

尚硅谷大数据Flink技术与实战,资源教程下载

课程名称尚硅谷大数据Flink技术与实战课程目录理论_Flink基础 001__Flink理论_Flink…...

小码哥李明杰Java版《恋上数据结构与算法》 ,资源教程下载

小码哥李明杰Java版《恋上数据结构与算法》 ,资源教

课程目录01-学前须知01-为什么要学习数据结构与算法02-编程语言的选择03-课程大纲04-…...

廖雪峰-2019大数据分析精品资料价值1980元,资源教程下载

廖雪峰-2019大数据分析精品资料价值1980元,资源教程

课程介绍:廖雪峰大神历时3个月打磨出来的《数据分析必备技能》的视频学习资料,由浅…...

尚硅谷-大数据项目之电商数仓教程下载

尚硅谷-大数据项目之电商数仓教程下载

课程介绍:本课程以国内电商巨头实际业务应用场景为依托,对电商数仓的常见实战指标以…...

阿里云大数据分析师ACP认证视频教程下载

阿里云大数据分析师ACP认证视频教程下载

课程介绍阿里云大数据行业认证-大数据分析师认证(ACP-Alibaba Cloud Certified Prof…...

恋上数据结构与算法(第二季),视频教程下载

恋上数据结构与算法(第二季),视频教程下载

课程介绍:课程由MJ老师和名企算法大咖共同研发,在保证易懂的同时确保课程的系统全面…...

社交网络分析与挖掘,视频教程下载

社交网络分析与挖掘,视频教程下载

课程介绍:社交网络和数据挖掘是计算机学科相关研究中的热点,其具体研究涵盖理论、关…...