💎一站式轻松地调用各大LLM模型接口,支持GPT4、智谱、星火、月之暗面及文生图 广告
1. Hive (1)数据仓库 Hive 的本质其实就相当于将 HDFS 中已经存储的文件在 Mysql 中做了一个映射关系,以方便使用 HQL 去管理查询。 (2)用于数据分析、清洗 Hive 适用于离线的数据分析和清洗,延迟较高。 (3)基于 HDFS、MapReduce Hive 存储的数据依旧在 DataNode 上,编写的 HQL 语句终将是转换为MapReduce 代码执行。 2. HBase (1)数据库 是一种面向列存储的非关系型数据库。 (2)用于存储结构化和非结构化的数据 适用于单表非关系型数据的存储,不适合做关联查询,类似 JOIN 等操作。 (3)基于 HDFS 数据持久化存储的体现形式是 HFile,存放于 DataNode 中,被 RegionServer以 Region 的形式进行管理。 (4)延迟较低,接入在线业务使用 面对大量的企业数据,HBase 可以直线单表大量数据的存储,同时提供了高效的数据访问速度。 当建立Hive与Hbase的映射后,数据是存储在Hbase的hdfs系统目录上,而Hive只是建立了与该目录的映射。