Question

Spark 中用 Scala 和 java 开发有什么区别

Answer 1

自己分别用Java和Scala写了一个词频统计的例子，自己找了一个1000万的数据，然后模拟的是4个进程，读取的本地txt文件，然后统计两种语言的运行时间，做了十组对比，具体如下：
Java与Scala语言性能对比
组数/语言 Java语言(ms) Scala语言(ms)
1 18270 9070
2 17917 8476
3 17599 9297
4 16992 8605

5 17633 9193
6 18271 9157

7 18223 8387
8 17503 8583
9 17804 8445
10 17293 8315
从上面的对比中可以看到，Scala语言速度明显比Java快，上述实验也和自己的电脑配置有关，虽然不能精确的计算出具体的时间，但是我们能发现两者之间的差异很大。