hive的数据存储在哪里

Question

如题所述

Answer 1

Hive日志默认存储在什么位置

1、重要的hive日志配置 property.hive.log.level 决定了hive的日志级别， property.hive.log.dir 决定了hive的日志存储路径，默认存储在/tmp/user.name/hive.log文件。

2、其次，Hive 中所有的数据都存储在 HDFS 中，Hive 中包含以下数据模型：表(Table)，外部表(External Table)，分区(Partition)，桶(Bucket)。

3、Hive 的元数据存储在RDBMS中，一般常用 MySQL 和 Derby。默认情况下，Hive元数据保存在内嵌的 Derby 数据库中，只能允许一个会话连接，只适合简单的测试。

4、说明：hive 的表存放位置模式是由 hive-site.xml 当中的一个属性指定的，默认是存放在该配置文件设置的路径下，也可在创建数据库时单独指定存储路径。

5、tar zvxf sqoop-bin__hadoop-0.0.tar.gz 下载合适的JDBC驱动，将下载的JDBC的驱动放到Sqoop的lib文件夹下。

hive工作时,数据是存储在mysql还是hdfs

hive是把数据存储在hdfs上，而mysql数据是存储在自己的系统中；数据格式不同：hive数据格式可以用户自定义，mysql有自己的系统定义格式；数据更新不同：hive不支持数据更新，只可以读，不可以写，而sql支持数据更新。

其次，Hive 中所有的数据都存储在 HDFS 中，Hive 中包含以下数据模型：表(Table)，外部表(External Table)，分区(Partition)，桶(Bucket)。

第hive本身是不存储数据的，不论外表、内表，hive的所有数据是存放在hdfs文件系统的。

hive表数据是在hdfs中储存的并没有固定的储存格式，hive只保存管理表元数据。

国内最常用的是一款基于Hadoop的开源数据仓库，名为 Hive ，它可以对存储在 HDFS 的文件数据进行 查询、分析 。Hive对外可以提供HiveQL，这是类似于SQL语言的一种查询语言。

hive能存储数据吗

1、首先，Hive 没有专门的数据存储格式，也没有为数据建立索引，用户可以非常自由的组织 Hive 中的表，只需要在创建表的时候告诉 Hive 数据中的列分隔符和行分隔符，Hive 就可以解析数据。

2、第hive本身是不存储数据的，不论外表、内表，hive的所有数据是存放在hdfs文件系统的。

3、hadoop是一个分布式的软件处理框架，hive是一个提供了查询功能的数据仓库，而hadoop底层的hdfs为hive提供了数据存储。hive将用户提交的SQL解析成mapreduce任务供hadoop直接运行，结合两者的优势，进行数据决策。

4、国内最常用的是一款基于Hadoop的开源数据仓库，名为 Hive ，它可以对存储在 HDFS 的文件数据进行 查询、分析 。Hive对外可以提供HiveQL，这是类似于SQL语言的一种查询语言。

5、Pig与HIVE工具类似，都可以用类sql语言对数据进行处理。但是他们应用场景有区别，Pig用于数据仓库数据的ETL，HIVE用于数仓数据分析。

hive和mysql的区别是什么?

当然不是，hive支持jdbc和odbc数据源连接，可以连接很多种数据库，mysql、oracle等等等等，它自己的metastore用的就是derbyDB。

首选在编译安装MySQL的时候指定两个参数使用utf8编码。次选在配置文件my.cnf或my.ini设定两个参数，同时设置init_connect参数。第三在配置文件my.cnf或my.ini设定两个参数，同时客户端的连接指定set names命令。

全不同应用场景吧，HBase 速度比 Hive 快了不知道多少。HBase 是非关系型数据库（KV型），对 key 做索引，查询速度非常快（相比较 Hive ），适合实时查询；而Hive是关系型数据结构，适合做后期数据分析。