这里总结一些检测hadoop是否正常启动的一些小技巧
1:查看hadoop的进程,利用java自带的jps
例如在master上执行后的输出
[dikar@dikar logs]$ jps
6652 Sancho
3813
9760 Jps
9629 SecondaryNameNode
9451 NameNode
[dikar@dikar logs]$
在slaves上执行的输出
[dikar@dikar121 data]$ jps
2210 Jps
2137 DataNode
[dikar@dikar121 data]$
2:检测监听端口是否启动,利用netstat
例如我需要检测54310是否开启并且有连接进来
[dikar@dikar logs]$ netstat -altnp | fgrep 54310
(Not all processes could be identified, non-owned process info
will not be shown, you would have to be root to see it all.)
tcp 0 0 ::ffff:10.0.18.105:54310 :::* LISTEN 9451/java
tcp 0 0 ::ffff:10.0.18.105:37804 ::ffff:10.0.18.105:54310 TIME_WAIT -
tcp 0 0 ::ffff:10.0.18.105:54310 ::ffff:10.0.18.121:40535 ESTABLISHED 9451/java
tcp 0 0 ::ffff:10.0.18.105:54310 ::ffff:10.0.18.122:51895 ESTABLISHED 9451/java
3:检测master 和slaves之间的端口访问控制
例如在slaves上telnet master的 54310端口 或者在 master上telnet slaves的 50010 端口
[dikar@dikar121 data]$ telnet 10.0.18.105 54310
Trying 10.0.18.105...
Connected to 10.0.18.105.
Escape character is '^]'.
^]
telnet> quit
Connection closed.
[dikar@dikar121 data]$
[dikar@dikar logs]$ telnet 10.0.18.122 50010
Trying 10.0.18.122...
Connected to 10.0.18.122.
Escape character is '^]'.
^]
telnet> quit
Connection closed.
[dikar@dikar logs]$
如果telnet可以通的话 会提示说:
Escape character is '^]'.
然后输入 ctrl + ]进入telnet命令提示符 然后quit 就退出了。
分享到:
相关推荐
Hadoop是大数据时代不可或缺的一个分布式系统基础架构,用户可以轻松地在Hadoop上开发和运行处理海量数据的应用程序。那么对于初学者来说怎么能够更快的掌握Hadoop的使用技巧呢?本电子书汇聚了业界知名专家撰写的...
《Hadoop集群程序设计与开发(数据科学与大数据技术专业系列规划教材)》系统地介绍了基于Hadoop的大数据处理和系统开发相关技术,包括初识Hadoop、Hadoop基础知识、Hadoop开发环境配置与搭建、Hadoop分布式文件系统、...
Hadoop 10周年生日之际,CSDN主办的“Hadoop英雄会——暨Hadoop 10周年生日大趴”,Hulu高级研发工程师董西成介绍了Hadoop YARN程序设计与应用案例。
Hadoop集群程序设计与开发教材最终代码.zip
详细介绍了用eclipse开发hadoop程序的过程
这是关于hadoop里面程序代码,有wordcount ,partition,onejoin, score,health,dedup,程序. 有.java,也有jar. 提示必须先装上hadoop才能运行
使用Hadoop API写的一个简单的Map Reduce程序。是我一门课的作业。
hadoop 云计算 mdfs mapreduce
hadoop流量统计程序hadoop流量统计程序hadoop流量统计程序hadoop流量统计程序
EMC Hadoop应用程序代理安装管理指南.pdf
在Windows上使用eclipse编写Hadoop应用程序
java WriteHDFS实现,hadoop应用java WriteHDFS实现,hadoop应用java WriteHDFS实现,hadoop应用java WriteHDFS实现,hadoop应用java WriteHDFS实现,hadoop应用java WriteHDFS实现,hadoop应用java WriteHDFS实现,...
Hadoop集群程序设计与开发PPT.rar
适合Hadoop初学者安装Hadoop
Hadoop集群程序设计与开发教学大纲.docx
Hadoop简单应用案例,包括MapReduce、单词统计、HDFS基本操作、web日志分析、Zookeeper基本使用、Hive简单操作等
,Hadoop 技术已经在互联网领域得到了广泛的应用。互联网公司往往需要 存储海量的数据并对其进行处理,而这正是Hadoop 的强项。如Facebook 使用Hadoop 存储 内部的日志拷贝,以及数据挖掘和日志统计;Yahoo !利用...
avg-time hadoop程序