大数据学习之Linux环境搭建(导航)

环境搭建过程网上有挺多,但在安装过程,难免会出现一些其他错误,所以是对自己在搭建环境过程中的一个记录。

首先是VMware软件的安装,没什么说的,一直“下一步”就好了,虚拟机下安装Linux系统也比较简单,不赘述。

在系统主目录下新建software文件,用以存放大数据学习过程中可能用到的软件:mkdir /software

在系统主目录下新建download文件,用以存放临时安装包: mkdir /download

安装过程中,解压安装包到当前目录,均指/download目录,eg:

tar -zxvf filename.tar.gz

配置环境变量时候,如果对所有用户有效,编辑系统变量/etc/profile

vim /etc/profile

也可以在/etc/profile.d目录下新建bash脚本文件,将语句写入到此脚本中; 需要注意的是,Windows中,环境变量之间是以英文分号;间隔的,而在Linux中是以英文冒号:间隔的, eg:vim /etc/profile.d/bigdata.sh

export JAVA_HOME=/usr/lib/jvm/jdk1.7.0
export PATH=$PATH:$JAVA_HOME/bin

如果只针对当前用户有效,编辑用户主目录下的~/.profile文件或者~/.bashrc

vim ~/.profile

之后保存并更新文件:

source /etc/profile
or
source ~/.profile

生效。

  1. 安装配置ssh免密码登录
  2. Linux环境jdk的安装与配置
  3. Hadoop 2.8.2安装与配置(单机)
  4. Scala 2.12.4 安装与配置
  5. Spark 2.2.0 安装与配置
  6. SBT 1.0.3安装与配置
  7. Maven 3.5.2安装与配置

未完待续。。。

原文地址:https://www.cnblogs.com/NexTen/p/7856592.html