首页 > 数据库 >创建SparkSQL的项目

创建SparkSQL的项目

时间:2022-08-26 11:23:33浏览次数:47  
标签:core 项目 创建 pom SparkSQL sql org spark

创建项目方式和前面一样

pom依赖不一样

无需导入spark_core包,因为spark_sql中包含了spark_core

  • pom.xml文件
<?xml version="1.0" encoding="UTF-8"?>
<project xmlns="http://maven.apache.org/POM/4.0.0"
         xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
         xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0.0.xsd">
    <modelVersion>4.0.0</modelVersion>

    <groupId>org.example</groupId>
    <artifactId>sparkcode</artifactId>
    <version>1.0-SNAPSHOT</version>

    <dependencies>
        <dependency>
            <groupId>org.apache.spark</groupId>
            <artifactId>spark-sql_2.11</artifactId>
            <version>2.3.1</version>
        </dependency>
    </dependencies>


</project>

标签:core,项目,创建,pom,SparkSQL,sql,org,spark
From: https://www.cnblogs.com/jsqup/p/16626963.html

相关文章

  • 在uniapp目录下的uni_module中创建自定义组件
    一、前言  在使用uni-app框架时,可能里面的内置组件和扩展组件都不是我们想要的,或者不能满足我们的需求,这时就必须得创建自定义组件了,在低版本的HbuilderX中所有的组......
  • SparkSQL支持的数据源
    1.SparkSQL支持的数据源HiveScala内存中数据--集合支持从RDD读取数据作SQL操作支持从外部存储文件读取数据json,csv,普通结构文本文件支持从关系型数据库读取数据处理......
  • Maya 项目路径设置和查询
    #encoding:utf-8"""@Author:Meng@software:PyCharm@file:out_ch_bg.py@time:2023/08/2220:39"""importmaya.cmdsascmdsimportpymel.coreaspmcmds.wo......
  • 开源任务管理系统:创建一个任务
    GitHub地址:https://github.com/dom-bro/task-manager虽说是一个任务管理系统,但简单地讲,其实就是任务的增删改查(CRUD)。其中最重要的又当属增,即创建任务,此为数据之源,......
  • 手把手实践教你删除项目当中无用的npm包
    清理没有使用的Unuseddependencies*core-js*gulp-concat*gulp-connect*gulp-cssmin*gulp-less*gulp-uglify*open*save-devUnuseddevDependencies*@......
  • idea新建Java项目
    一、方法一1、打开idea选择NewProject新建项目2、选择Java项目,并指定jdk版本点击Next3、再次点击Next4、指定项目名称,及项目位置指定项目名称,及项目位置后,点......
  • 02.Android项目介绍
    一、Android工程的目录结构在AndroidStudio中,一个Android项目的文件结构有许多种表现形式,称之为视图。其中,Android视图是AndroidStudio默认的视图,在新建一个项目之后,And......
  • Idea中如何查看项目配置
    点击【File】→【ProjectStructure】或快捷键【Crlt+Alt+Shift+S】。  进入项目结构。......
  • Idea创建Maven Web工程的web.xml版本问题解决
    问题使用Maven创建web工程的时候,创建出来的web.xml版本有问题。临时解决方案将在Tomcat安装目录下的webapps/ROOT/WEB-INF下的web.xml替换项目下的web.xml......
  • Mac+Jenkins+Git+Python自动化项目集成-jenkins配置
    Mac+Jenkins+Git+Python自动化项目集成-jenkins配置一、下载安装jenkins(mac)1.Jenkins.war包下载地址:http://updates.jenkins-ci.org/download/war/2.打开终端输入:java......