分享

Spark环境搭建【图文】

本帖最后由 desehawk 于 2015-4-12 00:30 编辑
问题导读
1.如何现在安装、配置scala?
2.如何安装scala 插件?
3.创建scala 项目需要哪些步骤?






下载scala
方法一 1:在百度搜索框中输入”scala 下载

1.png


2:进入scala官方网站

2.png

3:进入下载列表
3.png

4.进入下载页
4.png


5.点击下载
5.png

6.png
注意:双击安装:安装路径:D:/    路径按自己的要求

6.配置Path

7.png



7.查看是否安装成功
8.png


9.png






idea 下载
1.百度中输入 “idea 下载
10.png






2.进入idea 官网
11.png

2.下载完成的zip
12.png
3.解压后目录
13.png


14.png

5.进入bin 目录 点击idea64.ext  运行
15.png

16.png

安装scala 插件
17.png 18.png 19.png 20.png



创建scala 项目
1File > NewProject

21.png






2:选择Scala >SBT
22.png



3:输入Project Name   例如:”sclas4 ”  请谅解我本意是想写scala4 手误
23.png
注意:scala version :如果不是2.10.5可能会出现
参考2 错误

选择 This Window
24.png

工具下方在加载
25.png


程序目录结构


26.png






创建Directory  src/man/scala
27.png


创建scala Class
28.png


Kind 选在Object
29.png

Copy SparkPi代码   缺少依赖
30.png

添加依赖
31.png







选择查看jdk  如果没有 要从新添加
32.png

添加依赖
33.png 34.png 35.png


依赖添加完成
36.png





代码不会报错
37.png




从提示中可以看出找不到程序运行的master,此时需要配置环境变量。
参考1
38.png
39.png



VM   optios : -Dspark.master=local
40.png


重新运行结果  

41.png
运行完成

项目打包
1.右击项目 选择open moduleSettings
42.png




2.进入 projectStructure  选择Artifacts
43.png




3.点击加号
44.png
4.Module 选择 Main Class 选择
45.png 46.png


47.png




5.删除多余jar
48.png

6. Build 项目
49.png





7. 点击 Build
50.png



8.项目对应路径下生成jar  

51.png





已有(6)人评论

跳转到指定楼层
feng01301218 发表于 2015-4-12 16:06:26
回复

使用道具 举报

hb1984 发表于 2015-4-12 22:41:53
谢谢楼主分享。            
回复

使用道具 举报

zhujun182104906 发表于 2015-4-12 22:52:45
回复

使用道具 举报

遇见遇见你 发表于 2015-4-14 21:57:24
谢谢楼主分享
回复

使用道具 举报

hlyz2008 发表于 2015-4-17 13:45:26
谢谢楼主分享
回复

使用道具 举报

xianzhi558 发表于 2016-8-1 12:14:08
详细,多谢分享
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条