Question

spark搭建后为什么显示的work节点数为0

Answer 1

描述下问题啊，spark需要先启动master，然后将worker注册到master上，或者在slaves里写下worker的ip，start-slaves.sh启动也可以

追问

我是按照网上教程搭建的，修改了slaves文件，加了两个名字，就是master和一个slave主机名，

追答

你把教程链接和启动日志给我看看

追问

http://blog.csdn.net/stark_summer/article/details/42424279
http://stark-summer.iteye.com/blog/2173219

追答

重点是日志，从日志里基本能看出什么错误。
还有hosts文件需要写明主机名和ip，这个应该没问题吧

追问

追答

cat ....worker-1-spark2.out 看看内容，成功的话会有一行写着Successfully registered with master spark://ip:7077的

追问

我查了下，在部署hadoop完成后，执行jps命令后就没有master和worker,说明这俩没有启动成功吧，这该咋办呢？我是按照教程一步步来的啊

追答

你这个是伪分布式还是分布式的？
从你最后一张图的jps看，NameNode和SecondaryNamenode，ResourceManager都起来了，但是没有datanode，所以想问你datanode是不是和namenode不同主机？
Master和Worker都没有说明spark没起来，去查查日志，日志没内容的话查查配置文件，对照网上的看看，注意主机hostname名的替换和java等的路径。
你上面给我看的是hadoop的输出，hadoop的logs下面分了.out和.log文件，log后缀的是日志，out是输出。spark日志目录logs下都是.out结尾，不带数字的是最新的日志，数字越大说明日志越老，可以按修改时间排序查看最新的。