hadoop集群启动及各服务启动命令

≯℡__Kan透↙ 提交于 2019-12-01 02:37:38
1)Hadoop的启动(先启动zookeeper)
 
  3台都得启动 zookeeper
        /export/servers/zookeeper-3.4.9/bin/zkServer.sh start  
      /export/servers/zookeeper-3.4.9/bin/zkServer.sh status  查看状态
      /export/servers/zookeeper-3.4.9/bin/zkServer.sh stop 关闭
 
在node01执行启动hadoop操作:
     cd /export/servers/hadoop-2.7.5/
       bin/hdfs namenode -format  此步只在初次启动时操作
       sbin/start-dfs.sh
       sbin/start-yarn.sh
    上面2步合并为  sbin/start-all.sh
    sbin/mr-jobhistory-daemon.sh start historyserver
 
 
2)node03开启mysql       /etc/init.d/mysqld start
    登录测试: mysql -uroot -p 123456
 
 
3)azkaban集群启动
1.先启动 exec-server
进入到azkaban-exec目录下执行2个命名
bin/start-exec.sh
curl -G "node03:$(<./executor.port)/executor?action=activate" && echo  //手动激活 executor
 
2.启动 web-server
进入到azkaban-web目录下执行
bin/start-web.sh
 
https://node03:8443/index 默认用户名密码 azkaban
  
4)hive启动( 使用beeline连接hiveserver2)
方式1:进入到hive目录下启动
cd  /export/servers/apache-hive-2.1.1-bin
启动元数据存储服务:
bin/hive --service metastore &
启动hiveserver2:
bin/hive --service hiveserver2 & 
 
方式2:nohup命令启动(带 & 后台启动,nohup深度后台启动)
nohup /export/servers/apache-hive-2.1.1-bin/bin/hive --service metastore &
nohup /export/servers/apache-hive-2.1.1-bin/bin/hive --service hiveserver2  > /dev/null 2>&1 &
 
可以把/dev/null 可以看作"黑洞". 它等价于一个只写文件. 所有写入它的内容都会永远丢失. 而尝试从它那儿读取内容则什么也读不到.
/dev/null 2>&1则表示吧标准输出和错误输出都放到这个“黑洞”,表示什么也不输出。
 
//使用beeline连接hiveserver2:
cd  /export/servers/apache-hive-2.1.1-bin
bin/beeline
beeline> !connect jdbc:hive2://node03:10000
 
 
5)impala集群启动
!必须先保证hive开启
主节点node03启动以下三个服务进程
service impala-state-store start
service impala-catalog start
service impala-server start
 
从节点启动node01与node02启动impala-server
service  impala-server  start
 
查看impala进程是否存在
ps -ef | grep impala
 
浏览器页面访问:
访问impalad的管理界面
访问statestored的管理界面
 
测试:
在node03机的任意目录
输入: impala-shell
 
6)oozie启动:
cd /export/servers/oozie-4.1.0-cdh5.14.0
关闭oozie服务
bin/oozied.sh stop
 
启动oozie服务
bin/oozied.sh start
浏览器页面访问:
 
7)hue启动:
cd /export/servers/hue-3.9.0-cdh5.14.0/
build/env/bin/supervisor 
 
登录页面: http://node03:8888
 
 
标签
易学教程内所有资源均来自网络或用户发布的内容,如有违反法律规定的内容欢迎反馈
该文章没有解决你所遇到的问题?点击提问,说说你的问题,让更多的人一起探讨吧!