Spark运行第一个Scala程序WordCount

AI算法攻城狮

于 2019-12-23 17:37:26 发布

阅读量2.7k

点赞数 1

分类专栏： # 深入浅出大数据

本文链接：https://blog.csdn.net/jxq0816/article/details/103669644

版权

深入浅出大数据专栏收录该内容

57 篇文章 ¥99.90 ¥299.90

订阅专栏

本篇博客详细介绍了如何使用Spark在Scala环境下运行第一个WordCount程序，从安装Scala环境到编写代码，再到最终的运行结果展示，适合Spark和Scala的初学者入门学习。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

1、前置条件安装

hadoop:https://blog.csdn.net/jxq0816/article/details/78736449

scala:https://www.runoob.com/scala/scala-install.html
2、Idea安装Scala插件

3、代码

object ScalaWordCount {
  def main(args: Array[String]): Unit = {
    var lines = List("hello scala", "hello world","hello java")
    //切分并压平
    val words = lines.flatMap(_.split(" "))

了解本专栏