大数据环境部署

前言

2018-09-05我终于鼓起勇气奋不顾身投入大数据门槛,total零基础,total零经验,第一天上课,稍微有些激动,现在回想当初意识到自己(❤ ω ❤)喜欢大数据的时候,就应该抓紧时机学习和沉淀,现在毕业后做着一份力不从心的工作,拿着微薄的工资,实在对不起生活啊!我怎么可以选择安逸???有追求就要去追啊哈哈哈哈哈……头破血流又怎样?粉身碎骨又如何?那是我的梦啊!!


人生苦短,我选bigdata~


大数据环境部署

学习大数据,环境的配置很重要。一般情况下,环境配置有两种方式:
一、购买云服务器ECS。
我购买的就是阿里云的云主机,环境部署简单且稳定,电脑只有一个卡槽无法添加内存条的Big友们推荐使用!!(另外,如果是卡槽只有一个的电脑要去更换内存更大的内存条,可以某宝某东购买,但是有风险哦!!)
二、CentOS虚拟机搭建。
因为hadoop需要运行在Linux环境中,而且是分布式的,大家的电脑系统现在基本上是Windows系统,所以需要构建虚拟机环境,这样可以在一台电脑上同时运行Windows、Linux系统,方便操作!
工具:VMware8或以上、CentOS6.X
劣势:搭建起来有些麻烦哦,不过这个不会像云主机那样会过期哦!放心啦~


一、云主机环境部署
阿里云官网购买云服务器ECS,实名注册,点击购买,选择【CentOS6.8 64位】,地区选择【香港】。购买后:
1、【管理控制台】–【云服务器ECS】–【概览】–【云服务器1】
这里写图片描述
自动进入实例
2、修改实例名称和hostname:【更多】–【实例设置】–【修改信息】
这里写图片描述
这里写图片描述
3、重置密码:【更多】–【密码/密钥】–【重置密码】
这里写图片描述
这里写图片描述
这里一定要重启控制台!启控制台!控制台!制台!台!!!
这里写图片描述
4、web规则配置:【更多】–【网络和安全组】–【安全组配置】–【配置规则】–【出方向】–【添加安全组规则】
这里写图片描述
这里写图片描述
这里写图片描述
这里写图片描述
22/22是我们默认的入方向端口。
0.0.0.0/0表示任意电脑可以连接。
5、安装CRT/Xshell软件:就是使得你的电脑能够SSH远程连接你的Linux。
打开CRT软件:
这里写图片描述
这里写图片描述
这里写图片描述
部署成功!<( ̄︶ ̄)↗[GO!]


二、虚拟机部署
因为我使用的是云主机,所以我不需要虚拟机部署,但是我也记下了笔记,虽然暂时用不上,也没有实际操作过,所以我也不敢写,万一以后要用到了呢( ﹁ ﹁ ) ~→
所以我就不在这里写了,等以后要自己搭建虚拟机,有机会再写,这里有一篇文章可以提供参考:
https://blog.csdn.net/qq_24073707/article/details/80148439


三、几个简单常用命令
A、清屏命令:直接输入clear然后回车即可
B、vi命令:就是编辑你的记事本,如vi xxx.log。
情况一:永久修改,重启生效:
1、i键:编辑模式,下方有“INSERT”显示。(可修改内容)
2、Esc键:退出编辑模式,进入命令行模式,可输入命令,下方无“INSERT”显示。
3、Shift::从命令行模式进入到尾行模式,输入wq,回车,表示内容/命令已保存并退出。
情况二:临时修改,当前生效:
输入修改内容,然后回车;输入exit,回车,再回车。
C、cat命令:查看文件内容,如cat xxx.log


第一次写文章,用语有些口语化,因为刚学大数据,所以还有很多东西都不懂,以后会加油,多读多写多查资料多询问。
感想:神奇!!!坚持!!!

猜你喜欢

转载自blog.csdn.net/Sylvia_D507/article/details/82557790