spark 如何与java应用结合

 时间:2024-10-21 09:11:43

spark如何与java应用结合

工具/原料

spark

方法/步骤

1、1.创建一个文件夹sparkapp2作为应用程序根目录

spark 如何与java应用结合

2、2.在咯悝滩镞./sparkapp2/src/main/java下建立一个名为SimpleApp.java的文件(vim./sparkapp2/src/main砖镑苣逢/java/SimpleApp.java),添加代码如下:

spark 如何与java应用结合

3、3.该程碌食撞搁序依赖SparkJavaAPI,因此我们需要通过Maven进行编译打包。在./sparkapp2中新建文件pom.x罪焐芡拂ml(vim./sparkapp2/pom.xml),添加内容如下,声明该独立应用程序的信息以及与Spark的依赖关系:

spark 如何与java应用结合

4、4.使用maven打包应用程序

spark 如何与java应用结合

5、5.文件结构

spark 如何与java应用结合

6、6.下载依赖包

spark 如何与java应用结合

7、7.通过spark-submit提交应用程序

spark 如何与java应用结合

Notepad++怎么不自动检测字符编码 图解Navicat删除数据库、备份/还原和导出导入 MyEclipse注册码 navicat连接数据库详解 eclipse javaEE配置tomcat8,正常启动
热门搜索
漫画寻找前世之旅 景点图片 文具盒图片 刘雨欣图片 阴阳代理人漫画