现学现用大数据分布式集群环境部署

版权声明:本文为博主原创文章,欢迎转载,SuperMap技术问答社区 http://ask.supermap.com https://blog.csdn.net/supermapsupport/article/details/81740689

导读:
       随着大数据时代的到来,传统的GIS分析工具越来越难以满足对超大体量空间数据的分析需求。SuperMap iServer 9D(本文简称iServer)实现了地理信息服务的分布式集群架构,它可以利用集群及Spark分布式计算方式,对超大体量的空间数据进行空间分析,亦可接入分布式存储。功能如此强大,您是不是迫不及待想使用?那么,如何快速搭建大数据分布式集群计算环境呢?今天小编就现场演示iServer(内置Spark)集群环境部署全过程,您可快速入手,现学现用。
一. 实验环境说明
       本文将iServer分别部署在A和B两台PC机上,使用iServer的内置Spark搭建两个计算节点的分布式集群系统。
二. 部署流程

1.配置主节点
       操作流程如下:启动SuperMap iServer-配置并启动本机Spark集群-添加报告器,报告地址为A机器的集群服务地址,并勾选“报告器是否启用”和“是否分布式分析节点”-启用分布式分析服务。此时在集群概览里可以查看到已启用的集群以及加入到集群中的节点情况。下图为本步骤的操作演示。
这里写图片描述
2.配置子节点
       操作流程如下:启动B机器的SuperMap iServer配置并启动本机Spark集群添加报告器,报告器地址为A机器集群服务地址,并勾选“报告器是否启用”和“是否分布式分析节点”。注意在配置子节点的时候不用启用分布式分析服务。下图为本步骤的操作演示。
这里写图片描述
3.查看Spark节点
       在主节点集群概览中查看集群中的子节点是否已加入集群。还可以通过访问主节点8080端口查看Spark节点是否配置成功,该页面中Workers的数量代表了已加入该集群的Spark节点数量。
这里写图片描述
4.进行分布式分析
       到现在分布式集群部署已经完成了,下面就需要进行一次分布式分析来验证环境是否部署成功。以核密度分析为例,进行大数据分析。
这里写图片描述
       到此整个SuperMap iServer大数据分布式集群环境已经部署成功,是不是很简单呢?大家快试试吧!

猜你喜欢

转载自blog.csdn.net/supermapsupport/article/details/81740689
今日推荐