Ubuntu上安装MySQL以及hive

Ubuntu上安装MySQL以及hive

  • 一、安装MySQL
    • 1、更新软件源
    • 2、安装 MySQL
    • 3、启动 MySQL，并登录 MySQL
    • 4、关闭 MySQL 指令：
    • 5、修改登录密码
    • 6、关闭 mysql，然后重新进入
  • 二、安装hive
    • 1、创建 hive 的数据库
    • 2、下载压缩包
    • 3、修改环境配置文件并激活
    • 4、编辑 hive/conf/ 路径下的 hive-site.xml 文件
    • 5、编辑 Hadoop 里面 etc/hadoop/路径下 core-site.xml 文件
    • 6、初始化元数据库
    • 7、启动 hadoop 集群和 MySQL 服务
    • 8、启动 hive 并检测
    • 9、使用hive
    • 10、关闭

一、安装MySQL

1、更新软件源

      更新系统中可用软件包的信息。

sudo apt-get update # 更新软件源

在这里插入图片描述

2、安装 MySQL

sudo apt-get install mysql-server # 安装 mysql

在这里插入图片描述
      输入密码
在这里插入图片描述

在这里插入图片描述
      下载完成
在这里插入图片描述

3、启动 MySQL，并登录 MySQL

service mysql start # 启动sudo mysql -u root -p # 登录（eg.密码是 root）

注意：成功启动是无任何提示的
在这里插入图片描述

4、关闭 MySQL 指令：

service mysql stop

注意：成功关闭也是无任何提示的

5、修改登录密码

      【注意：不要随便修改密码，这个密码跟所需配置文件内容是相关的，动了需要自己改 hive 的配置文件】

      修改登录密码为 123456

ALTER USER 'root'@'localhost' IDENTIFIED BY '123456'; -- 修改密码
FLUSH PRIVILEGES; -- 刷新权限

(小坑：一定要先修改密码后刷新权限)

在这里插入图片描述

6、关闭 mysql，然后重新进入

      测试免密登录，一定要测，否则后面如果要使用hive会连不上sql

service mysql stop
mysql -u root -p

      如果 mysql -u root -p报错说：Access denied for user 'root'@'localhost' ，那证明不能免密登录，要更改验证方式：
      再次进入：sudo mysql -u root -p
      更 改 验 证 方 式 ： ALTER USER 'root'@'localhost' IDENTIFIED BY '123456';
      刷新权限：FLUSH PRIVILEGES;
      退出：exit;
      再次执行：mysql -u root -p

      确认是否启动成功，mysql节点处于LISTEN状态表示启动成功：

$ sudo netstat -tap | grep mysql

在这里插入图片描述

      至此，ubuntu系统上顺利完成安装mysql数据库。

二、安装hive

1、创建 hive 的数据库

create database hive; -- 【创建 database 无 s】show databases;       -- 【show database 有 s】exit;                 -- 退出：

在这里插入图片描述

2、下载压缩包

      hive压缩包下载：https://pan.baidu.com/s/1t262sOy5I729yiMvm3ty9w

      解压命令：unzip 文件名.zip -d /usr/local/hive
      这里注意，一定要是三级目录！！！也就是指明，你要 hive 压缩包的内容全部解压到 hive 这个文件夹下！如果/usr/local 下没有 hive 会自动和已有合并的，可能整个 hadoop 都出问题。不要解压到/usr/local下，不小心搞错了你就从头再来。

      这里的从头是指重新创建一个虚拟机，重新配置Hadoop。

3、修改环境配置文件并激活

文件地址：/usr/local/hive/bin

sudo vim ~/.bashrc

一共多了 5 行内容：

export HIVE_HOME=/usr/local/hive
export PATH=$PATH:$HADOOP_HOME/sbin:$HIVE_HOME/bin
export HADOOP_HOME=/usr/local/hadoop
export PATH=$PATH:$HADOOP_HOME/bin:$HADOOPA_HOME/sbin
export HADOOP_HOME_SBIN=/usr/local/hadoop/sbin

在这里插入图片描述

激活配置

source ~/.bashrc

4、编辑 hive/conf/ 路径下的 hive-site.xml 文件

编辑 hive/conf/ 路径下的 hive-site.xml 文件（改了密码的，就要修改这个文件）
在这里插入图片描述
（没有文件就自己创建）

hive-site.xml文件

<?xml version="1.0" encoding="UTF-8" standalone="no"?>
<?xml-stylesheet type="text/xsl" href="configuration.xsl"?>
<configuration><property><name>javax.jdo.option.ConnectionURL</name>   <value>jdbc:mysql://localhost:3306/hive?createDatabaseIfNotExsit=true;characterEncoding=UTF-8</value></property><property><name>javax.jdo.option.ConnectionDriverName</name><value>com.mysql.jdbc.Driver</value></property><property><name>javax.jdo.option.ConnectionUserName</name><value>root</value></property><property><name>javax.jdo.option.ConnectionPassword</name><value>这里加上自己的密码</value></property><property><name>datanucleus.readOnlyDatastore</name><value>false</value></property><property><name>datanucleus.fixedDatastore</name><value>false</value></property><property><name>datanucleus.autoCreateSchema</name><value>true</value></property><property><name>datanucleus.autoCreateTables</name><value>true</value></property><property><name>datanucleus.autoCreateColumns</name><value>true</value></property>
</configuration>

5、编辑 Hadoop 里面 etc/hadoop/路径下 core-site.xml 文件

编辑 Hadoop 里面 etc/hadoop/路径下 core-site.xml 文件（/usr/local/hadoop/etc/hadoop/），加入如下
具体步骤可看：大数据实战平台环境搭建

        <property>     <name>hadoop.proxyuser.root.hosts</name>     <value>*</value> </property> <property>     <name>hadoop.proxyuser.root.groups</name>     <value>*</value> </property>

在这里插入图片描述

6、初始化元数据库

schematool -dbType mysql -initSchema

【这一步在/usr/local/hive/bin 下执行】
【出现 schematool completed才是初始化成功，
如果出现schematool fail表示失败，看一下报错，驱动问题找驱动
连接问题返回mysql最后一点】

7、启动 hadoop 集群和 MySQL 服务

输入./sbin/start-dfs.sh启动hdfs。

在这里插入图片描述
输入jps确定Hadoop处于启动状态。

在这里插入图片描述

8、启动 hive 并检测

最好在/usr/local/hive/bin路径下启动

hive

在这里插入图片描述

9、使用hive

show databases;

9.1. 创建一个数据库

create database db_test1;

9.2. 创建一个表

create table emp
(empno int,
ename string,
job string,
mgr int,
hiredate string,
sal int,
comm int,
deptno int)
row format delimited fields terminated by ',';

9.3. 测试数据,自己创建txt文件

7369,SMITH,CLERK,7902,1980/12/17,800,0,20
7499,ALLEN,SALESMAN,7698,1981/2/20,1600,300,30
7521,WARD,SALESMAN,7698,1981/2/22,1250,500,30
7566,JONES,MANAGER,7839,1981/4/2,2975,0,20
7654,MARTIN,SALESMAN,7698,1981/9/28,1250,1400,30
7698,BLAKE,MANAGER,7839,1981/5/1,2850,0,30
7782,CLARK,MANAGER,7839,1981/6/9,2450,0,10
7788,SCOTT,ANALYST,7566,1987/4/19,3000,0,20
7839,KING,PRESIDENT,-1,1981/11/17,5000,0,10
7844,TURNER,SALESMAN,7698,1981/9/8,1500,0,30
7876,ADAMS,CLERK,7788,1987/5/23,1100,0,20
7900,JAMES,CLERK,7698,1981/12/3,950,0,30
7902,FORD,ANALYST,7566,1981/12/3,3000,0,20
7934,MILLER,CLERK,7782,1982/1/23,1300,0,10

9.4. 导入数据
加载本地的数据到Hive的表

load data local inpath '/root/temp/emp.txt into table emp;

加载HDFS的数据到Hive的表

load data inpath '/scott/emp.txt into table emp;

9.5. 查询数据

select  *  from emp;

运行截图：
在这里插入图片描述
在这里插入图片描述

10、关闭

在这里插入图片描述

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.rhkb.cn/news/221603.html

如若内容造成侵权/违法违规/事实不符，请联系长河编程网进行投诉反馈email:809451989@qq.com，一经查实，立即删除！

相关文章

ELFK日志收集

ELFK日志收集

文章目录 第一章：ELK日志收集系统介绍日志收集重要性ELK介绍EFK介绍ELFK介绍ES部署Kibana部署第二章：Logstach日志收集Logstash介绍Logstash安装Logstash Input输入插件Logstash Filter过滤插件Logstash Output输出插件Input fileFilter mutatesplit示例add_field示例remove_…
阅读更多...
Super访问父类成员

Super访问父类成员

1 问题 当子类的成员变量或方法与父类同名时&#xff0c;可能模糊不清&#xff0c;应该怎么解决&#xff1f;如果子类重写了父类的某一个方法&#xff0c;我们又该怎么调用父类的方法&#xff1f; 2 方法 super调用成员属性&#xff1a; 当父类和子类具有相同的数据成员时&…
阅读更多...
红日靶场-1

红日靶场-1

实战 &#xff5c; 记一次基础的内网Vulnstack靶机渗透一https://mp.weixin.qq.com/s/A3MIuT7RXTIIPNLjF42OTg 前言 kali一个nat网卡&#xff0c;模拟外网攻击机 win7一个nat网卡&#xff0c;一个VMnet 1网卡&#xff08;仅主机模式&#xff09;&#xff0c;模拟web服务器win2…
阅读更多...
（04）vite 插件 plugins

（04）vite 插件 plugins

文章目录 怎么使用插件vite官网和社区分别提供了许多vite 插件手写vite插件插件怎么命名插件什么时候执行插件引用场景控制可以使用的钩子 怎么使用插件 通过在vite.config.js中配置不同的插件使用 import { defineConfig } from "vite"; // 自定义插件 import myD…
阅读更多...
机器学习之随机森林 python

机器学习之随机森林 python

随机森林是一种集成学习方法&#xff0c;它是由多个决策树组成的模型&#xff0c;其中每棵树都是随机生成的。随机深林包括两种主要类型&#xff1a;随机森林和极端随机树。 废话不说上代码 import numpy as np import matplotlib.pyplot as plt from sklearn.datasets import…
阅读更多...
Git账户密码http方式的配置

Git账户密码http方式的配置

Git账户密码http方式的配置 入门 git在提交时每次都需要输入密码和账号信息&#xff0c;可以将账号和密码进行持久化存储&#xff0c; 当git push的时候输入一次用户名和密码就会被记录&#xff0c; 不需要每次输入&#xff0c;提高效率&#xff0c;进行一下配置&#xff1…
阅读更多...
2023_Spark_实验三十：测试Flume到Kafka

2023_Spark_实验三十：测试Flume到Kafka

实验目的&#xff1a;测试Flume采集数据发送到Kafka 实验方法&#xff1a;通过centos7集群测试&#xff0c;将flume采集的数据放到kafka中 实验步骤&#xff1a; 一、 kafka可视化工具介绍 Kafka Tool是一个用于管理和使用Apache Kafka集群的GUI应用程序。 Kafka Tool提供了…
阅读更多...
jmx_exporter安装

jmx_exporter安装

下载 wget https://repo1.maven.org/maven2/io/prometheus/jmx/jmx_prometheus_javaagent/0.13.0/jmx_prometheus_javaagent-0.13.0.jar 创建jmx_exporter.yml文件 文件内容为&#xff1a; rules: - pattern: ".*" 配置tomcatpinter/apache-tomcat-8.5.38/bin/ca…
阅读更多...
基于 Flink 的典型 ETL 场景实现方案

基于 Flink 的典型 ETL 场景实现方案

目录 1.实时数仓的相关概述 1.1 实时数仓产生背景 1.2 实时数仓架构 1.3 传统数仓 vs 实时数仓 2.基于 Flink 实现典型的 ETL 场景 2.1 维表 Join ■ 2.1.1 预加载维表 方案 1&#xff1a; 方案 2&#xff1a; ■ 2.1.2 热存储关联 ■ 2.1.3 广播维表 ■ 2.1.4 Tem…
阅读更多...
解决腾讯云CentOS 6硬盘空间不足问题：从快照到数据迁移

解决腾讯云CentOS 6硬盘空间不足问题：从快照到数据迁移

引言&#xff1a; 随着数据的不断增加&#xff0c;服务器硬盘空间不足变成了许多运维人员必须面对的问题。此主机运行了httpd&#xff08;apache服务&#xff09;&#xff0c;提供对外web访问服务,web资源挂载在**/data/wwwroot目录下,http日志存放在/data/wwwlogs目录下&…
阅读更多...
JavaWeb笔记之前端开发JavaScript

JavaWeb笔记之前端开发JavaScript

一、引言 1.1 简介 JavaScript一种解释性脚本语言&#xff0c;是一种动态类型、弱类型、基于原型继承的语言&#xff0c;内置支持类型。 它的解释器被称为JavaScript引擎&#xff0c;作为浏览器的一部分&#xff0c;广泛用于客户端的脚本语言&#xff0c;用来给HTML网页增加…
阅读更多...
51单片机定时器

51单片机定时器

51单片机有两个16位定时器&#xff0c;今天复习了一下使用方法&#xff0c;发现当初刚开始学习51单片机时并没有记录&#xff0c;特此今天补上这篇博客。 下面是定时器的总览示意图&#xff0c;看到这个图就能想到定时器怎么设置&#xff0c;怎么开始工作。 第一步&#xff1a…
阅读更多...
还在用nvm？来试试更快的node版本管理工具——fnm

还在用nvm？来试试更快的node版本管理工具——fnm

前言 &#x1f4eb; 大家好&#xff0c;我是南木元元&#xff0c;热衷分享有趣实用的文章&#xff0c;希望大家多多支持&#xff0c;一起进步&#xff01; &#x1f345; 个人主页&#xff1a;南木元元 目录 什么是node版本管理 常见的node版本管理工具 fnm是什么 安装fnm …
阅读更多...
【超详细】基于单片机控制的十字道路口交通灯控制

【超详细】基于单片机控制的十字道路口交通灯控制

目录 最终效果 一、设计任务 二、设计报告 1 设计说明 1.1功能分析 1.1.1整体系统功能分析 1.1.2显示状态功能分析 1.1.3设置状态功能分析 1.1.4紧急状态功能分析 1.2方案比选 1.2.1车辆LED数码管倒计时显示板块 1.2.2车辆信号灯显示板块 1.2.3行人信号灯显示板块 …
阅读更多...
高通平台开发系列讲解（SIM卡篇）SIM软件架构介绍

高通平台开发系列讲解（SIM卡篇）SIM软件架构介绍

文章目录 一、SIM软件架构二、MMG SDI Task三、GSTK Task四、Simlock Task沉淀、分享、成长，让自己和他人都能有所收获！😄 📢本篇文章将介绍SIM的相关组件。 SIM软件架构： SIM软件架构指的是与SIM卡（Subscriber Identity Module，订阅者身份模块）相关的软件系统设计和…
阅读更多...
Web请求与响应

Web请求与响应

目录 Postman Postman简介 Postman的使用 请求 简单参数 实体参数 数组参数 集合参数 日期参数 Json参数 路径参数 响应 ResponseBody 统一响应结果 Postman Postman简介 postman是一款功能强大的网页调试与发送网页http请求的Chrome插件&#xff0c;常用于进行…
阅读更多...
Python 爬虫之下载视频（一）

Python 爬虫之下载视频（一）

爬取某平台视频 文章目录 爬取某平台视频前言一、大致内容二、基本思路三、代码编写1.引入库2.前期准备3.获取视频标题和地址3.下载保存视频 总结 前言 今天写个从好K视频平台爬取正在播放的视频&#xff0c;并下载保存到本地。 注意&#xff1a;建议大家先看看我之前的比较简…
阅读更多...
u盘加密软件合辑丨u盘怎么上锁某个文件夹

u盘加密软件合辑丨u盘怎么上锁某个文件夹

毫无疑问&#xff0c;U盘是我们生活中最常使用的移动储存设备&#xff0c;常见的U盘普遍没有使用限制&#xff0c;任何人都可以浏览其中的数据&#xff0c;这就可能导致数据泄密和隐私泄露&#xff0c;那么普通U盘怎么变成加密U盘呢&#xff1f; 一、上锁某个U盘文件夹 可以将…
阅读更多...
【线性代数】两个向量组等价,其中一个向量组线性无关,另一个向量组也是线性无关吗?

【线性代数】两个向量组等价,其中一个向量组线性无关,另一个向量组也是线性无关吗?

一、问题 两个向量组等价,其中一个向量组线性无关,另一个向量组也是线性无关吗? 二、答案 不一定,当两个向量组中的向量个数也相同时,结论才成立.若向量个数不相同,结论不成立. 例如&#xff1a; 向量组一&#xff1a;(1,0),(0,1) 向量组二&#xff1a;(1,0),(0,1),(1,1) 两…
阅读更多...
【大数据实训】python石油大数据可视化(八)

【大数据实训】python石油大数据可视化(八)

2014到2020年石油加工产品产量数据处理分析 一、任务描述 石油是工业的命脉。 一直到2020年&#xff0c;我国原油产量基本处于平稳的状态&#xff0c;大部分原油来自国外进口&#xff1b;中国原油加工产量在华东、东北地区占比较大&#xff0c;华南地区相对较少。原油的加工…
阅读更多...
最新文章
推荐文章

Copyright @ 2022~2023