关键词：
大家好，我是一条~
5小时推开Spark的大门，第二小时，带大家搭建开发环境。
主要分两步，
- Spark的安装
- Scala环境的搭建
话不多说，动起来！
Spark的安装
Spark是基于Scala语言编写的，需要运行在JVM上，运行环境Java7以上，本文使用Java8，Centos7。
用Python也是可以的，但本教程不详细讲。
1.下载Spark
我使用的是腾讯云的服务器，没有的同学用虚拟机也是可以的，Win和Mac如何安装虚拟机不再赘述，CSDN有很多教程，也比较简单。
记得要配置好Java的环境变量哦！
首先使用wget下载安装包（也可以本地下载之后上传）
cd /data/opt/spark
wget --no-check-certificate https://downloads.apache.org/spark/spark-3.2.0/spark-3.2.0-bin-hadoop3.2.tgz
项目一众筹网01_02环境搭建_日志系统搭建日志打印级别debuginfoerror(代码片段)
...统搭建文章目录文章目录日志系统搭建文章目录26-后台-环境搭建-日志系统-简介27-后台-环境搭建-日志系统-各个日志系统整合介绍28-后台-环境搭建-日志系统-替换Spring的JCL的方案29-后台-环境搭建-日志系统-操作-主动打印日志30-... 查看详情
django讲课笔记02：django环境搭建(代码片段)
...、两级结构4、三级结构5、反向代理的好处（二）环境搭建1、安装Python2、安装Django（1）在线安装方式 查看详情
02环境搭建(代码片段)
...一条~5小时推开Spark的大门，第二小时，带大家搭建开发环境。主要分两步，Spark的安装Scala环境的搭建话不多说，动起来！Spark的安装Spark是基于Scala语言编写的，需要运行在JVM上，运行环境Java7以上，本文使用Java8，Centos7。用Pytho... 查看详情
git学习day02|git环境搭建并将项目进行本地管理(代码片段)
进入终端输入GitHub或者给gitee的用户名和邮箱地址然后依次敲入一下信息gitcommit-m"initproject"gitinitgitadd. 正确结果如下 查看详情
02-kubernetes-集群环境搭建(代码片段)
集群环境搭建前言集群类型搭建集群方式kubeadm二进制包主机规划环境搭建1.主机安装2.环境初始化1.检查操作系统版本2.配置主机名解析3.时间同步4.禁用iptable和firewalld服务5.禁用selinux6.禁用swap分区7.修改linux的内核参数8.配置ipvs功... 查看详情
esp32上手笔记|02-esp32-arduino开发环境搭建(代码片段)
ESP32-Devkitc-v4一、arduino-esp32ArduinocorefortheESP32,ESP32-S2andESP32-C3是乐鑫官方为ESP32提供的Arduino内核引擎。开源仓库地址：ArduinocorefortheESP32,ESP32-S2andESP32-C3。在线文档地址：GettingStarted。目前支持以下ESP32系列&# 查看详情
02es集群搭建(代码片段)
前言呵呵最近有一系列环境搭建的相关需求记录一下es三个节点:192.168.110.150,192.168.110.151,192.168.110.152150为master,151为slave01,152为slave02三台机器都做了trustedshell es单节点docker搭建创建docker-compose.yml如下,然后docker-composeup-d启动es即可... 查看详情
02es集群搭建(代码片段)
前言呵呵最近有一系列环境搭建的相关需求记录一下es三个节点:192.168.110.150,192.168.110.151,192.168.110.152150为master,151为slave01,152为slave02三台机器都做了trustedshell es单节点docker搭建创建docker-compose.yml如下,然后docker-composeup-d启动es即可... 查看详情
商城项目02_环境搭建安装vagrantdockermysqlredis从0搭建各个微服务项目数据库初始化(代码片段)
文章目录①.安装virtualBox②.vagrant(用来安装虚拟机)③.虚拟机安装docker④.docker上安装mysql⑤.docker上安装redis⑥.从gitee初始化一个微服务⑦.从0搭建各个微服务项目⑧.数据库坏境初始化⑨.安装Nginx(高级篇)①.安装virtualBox①.下载、安... 查看详情
商城项目02_环境搭建安装vagrantdockermysqlredis从0搭建各个微服务项目数据库初始化(代码片段)
文章目录①.安装virtualBox②.vagrant(用来安装虚拟机)③.虚拟机安装docker④.docker上安装mysql⑤.docker上安装redis⑥.从gitee初始化一个微服务⑦.从0搭建各个微服务项目⑧.数据库坏境初始化⑨.安装Nginx(高级篇)①.安装virtualBox①.下载、安... 查看详情
seedemulator——环境搭建(代码片段)
0x01环境准备操作系统：ubuntu20.04安装docker-composesudoapt-getinstalldocker-compose安装dockersudoapt-getinstalldocker下载seed-emulator-mastergitclonehttps://github.com/seed-labs/seed-emulator.git0x02测试案例运行接下来 查看详情
商城项目02_环境搭建安装vagrantdockermysqlredis从0搭建各个微服务项目数据库初始化安装nginx(代码片段)
文章目录①.virtualBox-管理虚拟机②.vagrant-安装虚拟机③.虚拟机安装-docker④.docker上安装mysql⑤.docker上安装redis⑥.从gitee初始化一个微服务⑦.从0搭建各个微服务项目⑧.数据库坏境初始化⑨.高级篇-安装Nginx①.virtualBox-管理虚拟机①... 查看详情
昇腾ai推理环境搭建(代码片段)
官网参考文档：https://support.huaweicloud.com/devg-mindstudio302/atlasms_02_0033.html主机环境：ubuntu18.04初始化root密码sudopasswdroot允许root账号远程登录：sudovim/etc/ssh/sshd_config修改PermitRootLoginyes保存 查看详情
elementui环境搭建(代码片段)
1.node.js安装官网上下载node.js安装包，直接安装即可。安装完后查看nodejs版本:node-v.出现以下信息说明安装成功。p.p1margin:0.0px0.0px0.0px0.0px;font:11.0pxMenlo;color:#000000;background-color:#ffffffspan.s1$node-vv8.12.02.安装vue-cli输入命令npmi 查看详情
windows下visualstudiocode搭建golang开发环境(代码片段)
前言其实环境搭建没什么难的，但是遇到一些问题，主要是有些网站资源访问不了(如：golang.org)，导致一些包无法安装，最终会导致环境搭建失败，跟据这个教程几步，我们将可以快速的构建golang的开发环境。开发环境：一、安... 查看详情
spark基础学习笔记02：搭建spark环境(代码片段)
文章目录零、本讲学习目标一、搭建Spark单机版环境（一）在私有云上创建ied实例（二）修改ied实例的主机名（三）设置IP地址与主机名的映射（四）通过SecureCRT访问ied虚拟机（五）下载、安... 查看详情
hbase_学习_01_hbase环境搭建(单机)(代码片段)
一、前言本文承接上一篇：hadoop_学习_02_Hadoop环境搭建(单机) ，主要是搭建HBase的单机环境 二、环境准备在虚拟机中：操作系统:linuxCentOS6.8jdk:1.7hadoop:2.8.3hbase:1.4.2 三、hbase下载1.hbase下载地址http://mirror.bit.edu.cn/apache/hbas... 查看详情
day02(代码片段)
...JavaDevelopmentKitJRE:JavaRuntimeEnvironmentJVM:JavaVirtualMachineJDK开发环境搭建卸载JDK删除Java的安装目录在环境变量中删除JAVA_HOME在环境变量中删除path下关于java的目录Dos窗口查看java-version安装JDK百度搜索JDK8，找到下载地址下载电脑对应的... 查看详情