本站小编为你精心准备了大数据在测绘地理信息方面的运用参考范文,愿这些范文能点燃您思维的火花,激发您的写作灵感。欢迎深入阅读并收藏。
【摘要】大数据也称之为“BigData”,是随着计算机技术发展而来的一种技术,目前已应用于多个行业的数据处理分析中。本文首先概述了大数据处理技术,指出了新时代测绘地理信息服务面临的新矛盾新问题,重点分析了大数据在测绘地理信息方面的应用,旨在为相关工作人员提供参考。
【关键词】测绘地理信息;大数据;信息技术;数据库
引言
随着计算机网络技术的发展,网络信息量、传输量猛然增加,对于此类大数据的处理而形成为我所用信息的一种处理技术,称之为大数据技术,其具有较强的时代性和应用性,目前已经在各个领域产生了应用效应。测绘地理信息技术也是信息技术高度发展背景下产生的,为了满足人们对于准确地理信息的需求,使其更好的为人类服务,必须从各个方面对测绘地理信息进行评估,大数据在这其中可以大显身手,基于此笔者专门以此为课题展开研讨,以需求为导向,研究探索两者的结合部,希望能给相关专业人士以参考。
1大数据处理技术概述
(1)以Hadoop为核心的非结构存储方式可以为档案管理提供较好的解决方案。其主要优点主要体现在以下几个方面:①成本较低,系统扩容的成本较低,实施时也较为便捷,对于硬件的要求也不高。②支持较大的吞吐量,可以支持高并发的访问数据,可以在超大的数据集群中使用,并访问较大的文件。③具有较好的扩张性,其分布式运算方式,便于计算机实施运算任务,其集簇也可以便捷的扩展至千计节点,其不仅仅支持文档、音视频文件,还可以结合包含了HIVE与Impala相关的结构化数据库的HDFS基础数据库,适时进行数据的查询和更新。
(2)云存储。也称之为“云存储”,作为一种全新的存储技术,可以通过网络技术和HDFS技术将网络中的很多储存设备通过应用软件而共同协调工作,一起完成业务的访问和存储。
(3)知识图谱。作为一种图数据基础结构,其主要由边和节点构成,边主要表示实体之间的关系,节点则表现为实施实体存在,这种关系呈现方式可以有效将不同信息类型连接为一起,形成关系网络,以利于实施问题的分析,这一技术可以较好的应用到文档管理中。
2大数据在测绘地理信息工作应用的影响
(1)对于部门工作能力是一个有效有力的促进,地理信息数据的处理主要依靠测绘地理信息部门,拿中国地理空间框架来说,此基础地理信息数据库数据量非常丰富,相关的数据量达到13.5TB之多,拥有如此之大的数据量,对于其利用是一个较大的问题,也直接关联着测绘地理信息部门工作的质量,所以做好这部分工作非常重要,只有充分用好这些数据才能促进部门建设和发展,这对于地理测绘部门的人员提出了新的更高的要求,倒逼其提升自身能力素质,倒逼新的技术手段的运用。
(2)构建新的工作模式。大数据技术在新时代有许多优势,也为测绘地理信息部门发展带来了机遇,创造了条件,为了较好的提升测绘信息利用率,并对其应用范围不断扩大,必须结合大数据特点,构建其完善的信息系统,构建起全新的工作模式,并对其功能实施优化,达到促进云服务、云计算等领域的高效融合,确保测绘信息相关作业符合标准要求。
(3)对测绘地理信息系统实施有效升级。当前,测绘地理信息工作还存在很多方面的不足,最主要的原因还是工作性能的掣肘,导致其不能在相对较短的时间内精确控制,从而影响其整体应用效率,大数据由于其各个方面的优势可以促进信息系统的升级,作为测绘部门和相关企业要认识到此部分系统的重要性,并实施技术分析,达到不断优化和完善系统的目的,使其更好的满足实际需要。
3新时代测绘地理信息服务面临的新矛盾新问题
随着信息技术的发展,大数据技术已经渗透到我们生活工作的方方面面,较好的促进了经济的增长和人民生活水平的提升。在测绘地理信息领域,国家也颁布了相关的政策,有效的促进了大数据技术在其中的应用和发展,也有效的改善了地理信息服务的质量。但也要看到,新时代新的形势下测绘地理信息服务涌现出许多新的技术手段,人们的生活和工作也需要越来越精准的服务,需要越来越个性化和智能化的服务,这也是下一步测绘地理信息的发展方向,显然对照这一标准,差距和挑战是明显的。①对于其随之带来的弊端还未找到有效对策,比如大数据存储着大量的核心数据,对于这些地理信息数据如何得到有效的安全保障,此类安全隐患目前已经逐步显现,此类信息被泄露后还会产生后续恶性循环,严重影响了信息提供人员的合法权益。②一些新的采集手段产生了新的数据,此类数据难以成为新的管理模式,也会影响信息服务的质量,进而影响测绘地理信息服务的使用效率。
4大数据在测绘地理信息方面的应用
4.1大数据在测绘地理信息档案管理中的应用
该技术主要采取对大量非结构数据进行处理,使用HDFS技术对数据实施集中存放,使用Hadoop技术建设测绘地理信息档案资源处理平台,达到较好提升档案管理水平的目的。(1)构建大数据处理平台。众所周知,测绘地理信息档案包含的信息量是非常大的,其不仅仅包含了大量的测绘信息,还包含了大量的航天航空摄影信息,工程测量的信息等等,从存储信息的格式来看,不仅仅有文字的,还有图片格式的,甚至还有音频、视频格式等非结构化信息,从时间区分来看,其跨度也很长,有的形成年代久远,尤其是历史档案资料,则其信息化程度就相对较低,就会形成一些非结构数据。面对着如此大的数据中心,对其档案实施管理必定面临诸多的困难,使用大数据处理技术构建数据处理平台可以较好的解决这一问题,首先采用HDFS建设特定的档案管理群,这一初级阶段对于硬件资源要求不高,建设的节点可相对较多,一般在50~100节点之间,节点的共同工作可以较好的负责数据的计算和储存。对于后续工作,可以依据管理标准和实际进行节点的适时扩展,以符合不断增长的数据和计算的要求,接下来就可以采用Hbase数据工程对此类非结构化和半结构化的信息数据实施处理,使其结构化,并存放于Hadoop数据库,Hive、Hbase技术的共同运用可以完整的处理结构化数据和非结构化数据,从而构建起地理信息档案大数据处理平台。(2)实现对于相关数据的深入处理。随着传感器技术、激光扫描技术等测绘技术和手段的不断丰富,数据可以从很多的途径实施获取,其构成了大量的数据信息,要从这些档案资源中挖掘出有用信息,靠人工显然是不可能完成的,必须要依靠技术手段实施处理,大数据处理技术可以派上用场,大数据技术中数据的分析是其核心技术之一,也是大数据发展的主要方向,这一服务的关键方式可以对档案许多异源异构的数据进行采集、集成和处理分析,并载入系统之中,最后可以运用知识图谱技术,进行数据的引擎搜索,有效提升搜索的质量,为客户提供更为准确的信息服务。
4.2大数据在构建测绘地理信息系统方面的应用
当前大数据影响下海量数据在测绘地理信息系统中的利用效率逐渐提高,随着各种资源的改进,测绘地理信息的实际应用范围不断扩大,系统的服务功能不断地完善,各种测绘地理信息数据的挖掘效率逐渐增强,云计算、云服务等创新模式相互融合的几率不断提高,有效保障了地理信息资源利用效率,表1为大数据时代某测绘地理信息管理系统性能指标。
4.3大数据和测绘地理信息在智慧城市建设中的应用
随着国家城镇化建设的不断推进,城市规模越来越大,国家提出了智慧城市、海绵城市建设等一系列城市建设新理念,给大数据在其中的应用带来了很多机遇。随着移动互联网的不断发展,位置服务、物联网服务已经走进了商业服务的领域,并开始为城市建设发展服务,位置服务信息的优势越来越凸显,发挥着越来越重要的作用。通过综合使用不同类型数据和应用数字化地图,可实现智慧城市的构建,促使数字化城市的发展达到更高级的级别,形成适合现代城市发展的新模式。智慧城市与传统的城市发展模式相比,最大的特点是可以使所有产业的经营模式和人的生活方式高度智慧化,满足人们的实际需求。通过不断整合各种数据资源,在传感器及自动化控制技术的支持下,充分利用地理位置数据,建立符合智慧城市发展要求的新模式,实现大数据的深层次应用和挖掘。
5结语
测绘地理信息在新时代出现了许多新的特征,要使其应用价值不断提升,采用大数据技术是大势所趋,其不仅仅可以满足人类活动不断拓展的需要,也全面提升了地理信息服务的质量和效率,这就需要有全新的信息大数据处理平台作为支撑,就必须要求测绘地理信息部门拥有全新的工作模式,从传统的数据处理模式中解脱出来。同时在理念上,也要进一步认识到,随着大数据时代来临,人们比以往任何时候都需要地理信息,这也是其价值和发展意义之所在。
参考文献
[1]杜伟.大数据及其对测绘地理信息工作的启示[J].低碳世界,2016,30:104~105.
[2]施小溪.大数据处理技术在测绘地理信息档案管理中的应用[J].办公室业务,2017,09:103.
[3]羊冠耀.大数据时代测绘地理信息服务面临的机遇与挑战[J].住宅与房地产,2017,11:192.
作者:万学鑫 单位:柳州市勘察测绘研究院