Hive学习记录

    xiaoxiao2022-07-06  221

    一、安装Mysql (1)在Windows下进行下载Mysql http://dev.mysql.com/get/mysql-community-release-el7-5.noarch.rpm (2)将压缩包从Windows传输到Linux当前目录下: put F:\大数据软件\mysql-community-release-el7-5.noarch.rpm (3)解压:rpm -ivh mysql-community-release-el7-5.noarch.rpm (4)安装yum install mysql-community-server (5)重启mysql服务:service mysqld restart (以后开机不需启动mysql) 进入mysql:mysql -u root (6)配置文件/etc/my.cnf加上编码配置:[mysql] default-character-set =utf8 远程连接设置: 把在所有数据库的所有表的所有权限赋值给位于所有IP地址的root用户: mysql> grant all privileges on . to root@’ %‘identified by ‘root’; mysql>flush privileges; 刷新权限 如果是新用户而不是root,则要先新建用户: mysql>create user ‘username’@’ %’ identified by ‘password’; 二、Hive安装与配置 1、在Windows下载压缩包 官网下载地址:http://mirror.bit.edu.cn/apache/hive/ 2、将压缩包从Windows传输到Linux当前目录下 SecureCRT 【File】→【Connect SFTP Session】开启sftp操作 put F:\大数据软件\apache-hive-2.3.5-bin.tar.gz 3、③解压 解压安装到指定目录下/home/shui(/home是系统自带目录,之下的/shui是自己创建的) 3、解压 解压安装到指定目录下/home/shui(/home是系统自带目录,之下的/shui是自己创建的) tar -zxvf apache-hive-2.3.5-bin.tar.gz -C /home/shui 修改解压目录名为hive。 mv apache-hive-2.3.5-bin.tar hive 4、修改环境变量 修改etc/profile文件,添加HIVE_HOME安装路径。 Source命令更新etc/profile文件,使其生效。 运行:hive --version 出现版本号及安装成功 5、配置hive-env.sh 进入/home/shui/hive/conf目录,修改hive-env.sh.template的文件名为hive-env.sh。(可以使用cp或者mv命令) 修改Hadoop的安装路径 HADOOP_HOME=/home/shui /hadoop-2.7.3 修改Hive的conf目录的路径 export HIVE_CONF_DIR=/home/shui/hive/conf 6、配置hive-site.xml 进入/home/shui/hive/conf目录,修改default.xml.template的文件名为hive-site.xml。(可以使用cp或者mv命令) mv hive- default.xml.template hive-site.xml 在最后添加以下属性: 三、MySQL Connector/J安装 1、官网下载地址:http://ftp.ntu.edu.tw/MySQL/Downloads/Connector-J/ mysql-connector-java-5.1.47.tar.gz 2、将压缩包从Windows传输到Linux当前目录下¬¬ SecureCRT 【File】→【Connect SFTP Session】开启sftp操作 put F:\大数据软件\mysql-connector-java-5.1.47.tar.gz 3、解压 解压到指定目录下/home/shui(/home是系统自带目录,之下的/shui是自己创建的) tar -zxvf mysql-connector-java-5.1.47.tar.gz -C /home/shui 4、④拷贝驱动包 将驱动包mysql-connector-java-5.1.47-bin.jar复制到/home/shui/hive/lib目录中。 三、启动hive 1、启动Hadoop:start-all.sh 2、初始化Metastore架构:schematool -dbType mysql -initSchema 3、启动Hive:hive 4、hive> 进入hive shell

    最新回复(0)