主页 > 知识库 > 配置hive元数据到Mysql中的全过程记录

配置hive元数据到Mysql中的全过程记录

热门标签:芒果电话机器人自动化 湖南人工外呼系统多少钱 申请外呼电话线路 百度地图图标标注中心 日照旅游地图标注 广东人工电话机器人 石家庄电商外呼系统 信阳稳定外呼系统运营商 南通自动外呼系统软件
  • 在hive的安装目录下,进入conf目录,创建一个hive-site.xml文件
  • 根据官方文档配置参数,拷贝数据到hive-site.xml文件中
    https://cwiki.apache.org/confluence/display/Hive/AdminManual+MetastoreAdmin

注意:先创建一个metastore数据库,字符集要用latin1


将mysql驱动复制到hive的lib目录里。(这有关上一篇安装MySQL的内容)

解压驱动包

将mysql驱动复制到hive的lib目录里

启动hive(别忘了先启动hdfs和yarn~~)

start-dfs.sh
start-yarn.sh
hive

创建一张表,试试看元数据能否保存到MySQL里

查看一下metastore库

TBLS表


COLUMNS_V2表


DBS表

从上图中,可得知

元数据的结构

  1. 表的信息都存储在tbls表中,通过db_id和dbs表中的库进行外键约束!
  2. 库的信息都存储在dbs表中!
  3. 字段信息存在在column_v2表中,通过CD_ID和表的主键进行外键约束!

总结

到此这篇关于配置hive元数据到Mysql中的全过程的文章就介绍到这了,更多相关配置hive元数据到Mysql内容请搜索脚本之家以前的文章或继续浏览下面的相关文章希望大家以后多多支持脚本之家!

您可能感兴趣的文章:
  • Mysql元数据如何生成Hive建表语句注释脚本详解

标签:公主岭 呼和浩特 沈阳 天津 阿里 惠州 牡丹江 合肥

巨人网络通讯声明:本文标题《配置hive元数据到Mysql中的全过程记录》,本文关键词  配置,hive,元,数据,到,Mysql,;如发现本文内容存在版权问题,烦请提供相关信息告之我们,我们将及时沟通与处理。本站内容系统采集于网络,涉及言论、版权与本站无关。
  • 相关文章
  • 下面列出与本文章《配置hive元数据到Mysql中的全过程记录》相关的同类信息!
  • 本页收集关于配置hive元数据到Mysql中的全过程记录的相关信息资讯供网民参考!
  • 推荐文章