浅析大数据技术在测绘地理信息中的应用

(整期优先)网络出版时间:2021-03-02
/ 2

浅析大数据技术在测绘地理信息中的应用

沈忱

辽宁佳泰土地勘测规划有限公司 辽宁 大连 116021

摘要:在现代化社会的快速发展中,计算机水平得到了很大的提升,促使我国已进入大数据时代。在新时期测绘行业的发展中,地理信息数据在测绘工作中得到了一定的推广和应用,使传统的测绘工作模式发生了很大改革,为测绘工作提供了很大的便利,还有效地提升了测绘工作的整体效率,使测绘企业的发展面临着很大的机遇和挑战,企业需要充分利用测绘技术,提高测绘工程的整体质量,论文介绍了基于大数据的地理信息测绘工作的特点,分析了大数据对地理测绘信息工作的影响。

关键词:大数据;测绘地理信息;应用

引言

当今社会科技迅猛发展,信息获取手段越来越多,信息量越来越大,信息爆炸在推动社会进步的同时也带来新的问题:如何更加有效地存储、管理和利用海量数据,以满足更高的需求。大数据技术应运而生,有效解决了这一问题,也为众多领域提供了更广阔的发展空间。测绘地理信息作为经济建设和社会发展的基础性行业之一,大数据技术的应用对其发展有着重要意义,本文就大数据技术在测绘地理信息数据的存储、管理、处理、挖掘等几个方面的具体应用进行相关探讨与分析。

1大数据技术概述

总体来讲,大数据技术是通过计算机技术、互联网技术、移动通信技术等现代科技手段,实现对数据信息的高效获取、整理与分析,是目前各领域都在加以应用的现代技术手段。该技术目前已经被应用在众多行业中,其改变了传统工作模式下信息资源的管理方式,使数据信息的应用效率也得到重大提升,这大大降低了各行业管理工作的工作难度与工作量。大数据技术可以实现对海量数据信息的高效整理与分析,同时通过网络渠道,也能让相关数据信息的共享性得到提升,这对各行业的发展都有着积极的影响。大数据技术具备数据量大、种类多、分析能力强、利用效率高等技术优势,这符合现代化发展对数据信息处理能力的要求。在实际工作中可以发现,单一的数据对社会的价值量是较低的,难以充分反映出社会的整体情况,在大数据技术的支持下,从多方面的数据信息入手,实现对诸多种类数据信息的综合分析,就能更加清晰地反映出社会情况,进而提高数据信息的价值。

2大数据技术在测绘地理信息中的应用

2.1注重发展新型测绘地理信息工作方式

在大数据时代背景下,测绘地理信息相关部门、单位要转变传统的思想,树立新的测绘思想思维,根据大数据技术自身的技术特点与应用要求,最大限度提供硬件、软件方面的支持,加强新型测绘工作方式的推广运用,这样才能显著提高测绘地理信息工作的工作水平,保证地理信息的获取质量,让地理信息的价值得到显著提升。首先,在工作中要转变以往的测绘地理息工作观念,从观念上实现相应的创新,将测绘技术、信息技术作为基础,实现产业升级,加强信息化建设,这样才能推动测绘地理信息工作向大数据的方向发展。其次,大数据技术作为一项发展空间较大的新型技术,必须要求测绘地理信息单位以及相关部门严格遵守大数据技术的应用标准,根据实际情况进一步完善。

2.2地理信息数据的存储和管理

目前,地理信息数据类型不仅包括各类图形、数据库等结构化数据,还包括文档、表格、像片、视频等非结构化数据。面对海量的多源异构地理信息数据,可以构建大数据处理平台,实现数据的有效存储和管理。以Hadoop分布式处理平台为例,首先,利用HDFS构建数据管理集群,数据管理集群节点的数量可根据现有数据量规模和近期需求状况进行配置,集群中所有节点协同工作,负责数据的存储和计算。其次,利用Hbase数据工厂对大量半结构化、非结构化数据进行处理,生成结构化数据存储到Hadoop的数据库中。再次,布设Hive数据仓库,对结构化数据进行管理入库。通过Hive、Hbase的联合使用,实现结构化与非结构化2类地理信息数据的集群式存储与管理。最后,利用MapReduee进行分布式计算,通过Hadoop集群中的并行计算来实现大量数据的同步处理,由此形成一个基于Hadoop框架,包括文件系统(HDFS)、数据库(Hive、Hbase)、数据处理(MapReduce)等功能的完整的地理信息档案大数据处理平台。

2.3转变数据整理方式

在传统的测绘工作中,测绘技术人员普遍应用经纬仪进行基础的三角网测量,测绘数据需要由测绘人员手工抄写,严重影响了测绘数据的准确性,导致测绘工作效率有所下降。并且,内业人员还需要利用这些数据进行平差和导线计算,获取各个点的坐标和数据,在外业人员抄写错误的情况下,内业计算结果也会出现很大偏差。现阶段,在测绘外业领域的发展中,测绘单位普遍应用新的测量仪器,如GPS测量仪器、全站仪测量技术,在特定项目地形、地貌局限性的影响下,每公顷需要设置上百个监测点,这些新仪器、新技术的应用为新型自动化测量平差软件开发和利用提供了便利网。在外业测绘过程中,测绘技术人员需要将传统的点位计算和报告制作转变成地理信息大数据开发和应用技术,与时俱进地增加更多现代化服务内容。

2.4数据技术在地理信息数据挖掘中的应用

在以数据为驱动的全新科学研究时代,从海量数据中挖掘隐藏价值信息成为一个重要的发展方向。大数据技术是地理信息数据挖掘的有力工具,利用大数据技术对海量的不同结构的地理时空数据进行处理分析,可得到对事物较为准确的认知和判断,为科学决策提供依据。例如,国内外一些专家利用大数据技术对全球夜光遥感影像进行了丰富多样的分析‘3爿J。在GDP估算方面,南于夜光能够客观地反映区域的繁荣程度,因此能解决统计数据中存在的误差以及空间信息量不足等问题。基于计量经济学模型,结合GDP统计数据和夜光影像,可以修正不同区域GDP以及GDP增长率。另外,‘8o对全球169个国家1992—2010年的夜光影像进行时空数据挖掘,发现战争爆发往往导致夜光减少,夜光波动较大的国家发生战争的概率较高。‘7o利用夜光影像对车臣战争和格鲁吉亚武装冲突进行了评估,较好地反映了居民迁徙等情况。

3发展方向

3.1云计算

云计算可谓是真正应“大数据时代”而生的一个产物。云表示后端,远程的意思,所以云计算顾名思义就是在后端或者远程进行计算。随着数据量的不断积淀,由于我们本地存储能力和运算能力的限制,很多时候一些计算量大的计算任务,我们没有办法在本地进行,这就需要云计算了。时至今日,云计算对我们大部分人来说已经不算陌生。但随着数据量级的增长,未来的云计算必将如水或电一样的公共资源惠及到每一个人。从这个角度说,云计算依然是大数据发展的一个重要方向。

3.2以更合理地方式对大数据进行分类

大数据的类型多种多样,从结构类型可以分为:结构化、非结构化和半结构化的数据;从对象的识别角度来看,有:文字,图像,视频等等。在实际应用中,往往我们需要处理的数据类型都非常复杂。而每种数据类型对应的处理方式又相对唯一,这就给数据处理带来了很大的困难。将多类型的数据更合理地划分为单个类型的数据,将会大大节约我们处理数据的成本与代价。这也是未来大数据技术发展的一个重要方向。

结语

综上,大数据技术不仅能解决测绘地理信息中海量数据的存储、管理问题,提高数据处理效率,增强分析和服务能力,未来在地理信息行业中具有更广阔的应用空间。因此,加快推进大数据技术的应用,在提高工作效率和服务能力的基础上,开展深入研究并不断创新,构建大数据地理信息时空大平台,为灾害预警、环境治理、资源保护、社会管理等方方面面提供强有力的技术支持,助推社会快速发展。

参考文献

[1]周斌_大数据及其对测绘地理信息工作的影响分析[J].世界有色金

属,2020(1):196.

[2]刘德福,欧阳维.大数据及其对测绘地理信息工作的启示[J].信息记

录材料,2019,20(12):46-47.