搭建spark的yarn运行模式,并且截图
将wordcount打成的jar包,提交到spark的yarn模式client、cluster集群上运行,截图运行结果
安装IDEA,使用scala语言编写wordcount程序,并能在本地运行
修改编写之后的wordcount中需要计算文件的路径,将该路径改为hdfs上文件路径,并使用maven和Project Structure分别打包,并将打完的jar提交到spark的Standlone集群上运行,截图运行结果
求截图 交个作页
搭建spark的yarn运行模式,并且截图
将wordcount打成的jar包,提交到spark的yarn模式client、cluster集群上运行,截图运行结果
安装IDEA,使用scala语言编写wordcount程序,并能在本地运行
修改编写之后的wordcount中需要计算文件的路径,将该路径改为hdfs上文件路径,并使用maven和Project Structure分别打包,并将打完的jar提交到spark的Standlone集群上运行,截图运行结果
求截图 交个作页
先按步骤把环境搭建好来,然后运行代码打包。