在Ubuntu下使用Spring Boot调用Spark

先安装好Hadoop与spark

然后安装IntelliJ IDEA

直接下载解压后执行 ./idea.sh

然后在软件右上角点击搜索desk,选择第一个就好了,就创建了桌面快捷方式

创建SpringBoot工程

start.aliyun.com

要选择的包

driver按需求选择,非必须

创建好以后选择File-》Project Structure-》Libraries然后引入Spark里的jars文件,这里可能需要把Gson换成高版本,同时删除log4.jar文件(会与spring自带的冲突)。

然后测试就好了

发表评论

邮箱地址不会被公开。 必填项已用*标注