gis大数据技术架构 arcgis大数据

GIS中，空间数据共享的意义和方法

意义：GIS基础软件技术是地理信息领域软件技术的制高点，是整个产业链条的关键。发展GIS基础软件对我国地理信息产业发展和保证国家地理信息安全至关重要。

创新互联-专业网站定制、快速模板网站建设、高性价比德州网站开发、企业建站全套包干低至880元,成熟完善的模板库,直接使用。一站式德州网站制作公司更省心,省钱,快速模板网站建设找我们，业务覆盖德州地区。费用合理售后完善，十载实体公司更值得信赖。

方法：大数据与GIS的结合正在改变传统地理研究与分析方法，也在悄然改变GIS的服务形态。IT新技术的融入，不断丰富和提升地理智慧的内核。而爆发式增长的市场需求，又为GIS技术的创新和应用发展提供了新的动力。

扩展资料

超图集团正式对外发布了基于大数据架构的GIS基础软件产品SuperMap GIS 9D，其在大数据GIS技术、新一代三维GIS技术、云端一体化GIS技术、跨平台GIS技术四大方面取得了全新进展和突破，

满足大数据应用、新型智慧城市和新型测绘等应用需求，解决了海量时空数据分布式管理、高性能、高可信分布式计算的新难题，以及传统GIS复杂图示制图与空间分析的老问题，开创了GIS与大数据等技术融合发展和创新应用的新格局。

此次会议围绕大数据领域的探索实践、GIS与空间大数据融合、大数据时代的地理信息应用转型升级、新一代三维GIS技术创新与应用、中国GIS的国际化探索等话题，测绘地信主管部门，阿里、腾讯等互联网企业，

超图等GIS基础软件企业，相关科研机构，众多海内外GIS用户单位的相关专家在主题大会环节呈现了数十场精彩报告，共同探讨大数据时代的GIS技术创新发展与应用落地。

参考资料来源：中国经济网——2017地理信息软件技术大会在京举办

大数据核心技术有哪些？

大数据技术的体系庞大且复杂，基础的技术包含数据的采集、数据预处理、分布式存储、数据库、数据仓库、机器学习、并行计算、可视化等。

1、数据采集与预处理：FlumeNG实时日志收集系统，支持在日志系统中定制各类数据发送方，用于收集数据；Zookeeper是一个分布式的，开放源码的分布式应用程序协调服务，提供数据同步服务。

2、数据存储：Hadoop作为一个开源的框架，专为离线和大规模数据分析而设计，HDFS作为其核心的存储引擎，已被广泛用于数据存储。HBase，是一个分布式的、面向列的开源数据库，可以认为是hdfs的封装，本质是数据存储、NoSQL数据库。

3、数据清洗：MapReduce作为Hadoop的查询引擎，用于大规模数据集的并行计算。

4、数据查询分析：Hive的核心工作就是把SQL语句翻译成MR程序，可以将结构化的数据映射为一张数据库表，并提供HQL(HiveSQL)查询功能。Spark启用了内存分布数据集，除了能够提供交互式查询外，它还可以优化迭代工作负载。

5、数据可视化：对接一些BI平台，将分析得到的数据进行可视化，用于指导决策服务。

基于GIS的通信管网管理系统架构设计

基于GIS的通信管网管理系统架构设计

管网资源监测管理系统充分利用 GIS 平台，将分布范围广泛的管网设施和地理位置有机地结合，不仅提高了企业的管理水平，而且提升了企业的服务能力。因此，该系统研究具有现实意义和广阔的应用前景。

1 设计方案及原则

1.1 系统设计方案

地理信息系统是对地理环境中的有关问题进行分析和研究的手段，它是一种采集、处理、传输、存储、管理、查询检索、分析、表达和应用地理信息的计算机系统。利用计算机建立地理数据库，将地理环境中的各种要素，包括它们的地理分布状况和所具有的属性数据，进行数字存储，建立有效的'数据管理系统，通过对各个要素的综合分析，方便快速地获取信息，满足应用和研究的需要，并用图形和数字的方式来表现结果。

通信管网资源与地理空间位置有着密切的关系，本系统充分利用GIS的特点，通过Visual Basic6.0高级语言嵌入 TopMapActiveX组件进行二次开发，设计了地理位置信息与管网资源数据有机融合的监控管理综合系统。Visual Basic能够提供创建图形用户界面(GUI)的方法，可以方便快捷地调用外部控件，具有功能强大的数据库访问特性;TopMap ActiveX地理信息系统开发组件具有完善的地图操作功能。利用成熟的技术和可靠的数据采集硬件设备，以 Windows 2000/NT为网络操作系统，使用MicroSoft的SQL Server2000作为后台数据库系统，利用 ADO技术实现数据库访问，能够满足系统的时实性和可靠性。

1.2 系统设计原则

(1)规范性。在系统设计中制定资源分类、编码等一系列方案，同时把通信行业标准考虑到方案之中，做到系统规范化。(2)科学性。编码时采用区段码和从属编码结构，利于计算机的直接存贮和数据库的管理，便于系统数据的快速检索和更新。(3)扩展性。建立一个开放的系统，留有充分的扩充空间，以便对系统扩充或移植。(4)实时性。能进行动态数据的管理，并保持数据的一致性和实时性要求。(5)安全性。对用户权限进行分级管理。

2 系统结构

2.1 系统功能结构

管网资源监控管理系统是对通信站辖区内的通信管网资源(如管道、人井等)进行计算机管理和监控，包括管网资源数据录入、查询、修改、统计分析、打印输出、地理图形显示、监控数据采集和故障报警显示等功能。系统的功能结构如图1所示。

2.2 系统网络结构

整个系统主要由GIS工作站、GIS服务器、数据服务器和多通道通信服务器组成，采用客户/服务器结构，各通信站点通过原有的内部 10/100 m网络访问。其中：GIS工作站负责本地管网数据的维护管理和监控;多通道数据服务器完成对管网监测数据的采集与通信;GIS 服务器实现对地理属性数据的存储;数据服务器用来存储管网资源数据信息。系统的网络结构如图2所示。

3 监控管理模块设计

3.1 资源数据管理

管网资源数据管理包括管网数据(地理信息数据和线路资源数据)录入、数据查询、数据统计和打印输出等模块。

(1)管网数据录入

管网数据录入模块用于对基础地理信息和线路资源信息进行录入、修改、删除、存储。数据库服务器完成基础图形与数据存储处理等功能;系统管理员有权修改用户权限、增删用户账号。

(2)数据查询/统计

系统根据工作人员的需求对基础地理信息和通信网络信息进行查询;按照给定的统计条件对各通信站的分布位置及覆盖区域、管道分布、缆线、人井等线路信息进行统计分析。

(3)打印输出

将GIS中的数据经过分析、转换处理，以直观的图表形式输出。

3.2 监控数据采集

监控数据采集模块通过传感器完成对管网资源状态数据(压力、温度、水位等模拟量)时实采集与通信，实时监测主要监控点的模拟量是否越限，监控数据判别流程如图3所示。

各通信站点通过监测设备从监测现场采样数据，上报数据经过预处理后输入到系统中，通过与监控标准库的数据进行对比分析来判断管网资源是否发生故障。如果检测判断发生管线受损、模拟量越限时发出报警信息，并对故障位置进行准确定位。如果检测判断没有发生故障，系统不报警，同时继续监测现场数据。

3.3 地理图形/监控报警显示

借助可视化技术，通过图形及其图形变换、声音传递消息等手段，可以实现更为人性化的人机交互。系统的显示包括地理图形显示和监控报警显示两部分。

地理图形显示是建立在对该系统内所有的管网资源实体分类的基础上，一类实体建立一个图层，整个系统是由所有实体相对应的图层叠加而成的。地理图形显示用于电子底图和线路资源符号的显示，具有漫游、无极缩放、分层显示等功能。监控报警显示将实时监控数据和地理图形相结合，在地理图形界面上实时监控网管设备的运行情况。当发生故障时，在GIS 图形界面上用特殊颜色进行标记，对管网设备故障准确定位显示，并进行声光报警，通知维护人员及时抢修。

;