hive hbase关系_hive hadoop hbase_hive hbase关系

Hadoop 生态上几肛系与区眎ve、pig、hbase 关系与差别偿 Hadoop 技氏定会对它体系下寄生的釜源项目糊涂了，我敢保证 Hive,Pig,HBase 这些开源技恃你弄的有些糊涂，不要娇的不止你一哥某柑拥囊晌剩瑆hen to use Hbase and when to use Hive？....请教了^_^没关系这里我给蠢砬迕扛砗退悸贰 Pig 一种操譫oop 的轻量级脚本语言，最撑虎公司推郴过以后正在走下坡路了。当 尝自己渐渐退砱 的维护之狐开源贡献到开源社区由所有爱好者来维护。 不过现 在而是有些公司在用，不过我觉得与其使用 pig 不如使用 hive。 ： ） Pig 是一种数据猎hive hbase关系，用来迅速轻松的处理巨待据。 Pig 包含两钢：Pig Interface,Pig Latin。 Pig 可以比较方便的处理 HDFS 和 HBase 的数据，和 Hive 一样,Pig 可以比较高效的处理其 需要赚通过直接操譯 查询可以节约茨劳动跟时间。当你想在你的数据上砖 转换，并且不想编写 MapReduce jobs 就可以用 Pig. Hive 不想用程性开发 MapReduce 的湃如 DB 们， 熟悉 SQL 的派以使用 Hive 开离线 的进行数据处理与分巫⒁ Hive 现在适合在离线下进行数据的操淄是说不合适在挂在真实的制造环境中进行 实时的查询换赴慢”。

相反 期 FaceBook,Hive 在 Hadoop 中扮演数据仓库的角色。建立在 Hadoop 集群的更顶层， 对存储在 Hadoop 群上的数据提供类 SQL 的接口进行操啄憧梢杂 HiveQL 进行 select,join, 等等操兹绻阌惺莶挚獾男枨夷闵贸ば SQL 并且不想写 MapReduce jobs 就可以用 Hive 代 替。 HBase HBase 祖夏运行在 HDFS 之上，HDFS 缺乏随即读写操譈ase 正是为此 而常HBase 以 Google BigTable 为蓝本，以键值对的方式存储。项目的目标就是快速在 众数十亿行数据中定位所需的数据并访问它。 HBase 是一篙库hive hbase关系， 一窼ql 的， 消一样提供随即读写功能， Hadoop 不能满足实时需要， HBase 正可以满足。 如果你必须即时访问一些数据， 就把它存入 HBase。 你可以用 Hadoop 撞态数据仓库，HBase 据存储，放这些进行一些操啄变的 数据。 Pig VS Hive Hive 更适合于数据仓库的任蝘ve 置于静态的结构及其需要频繁分韦譱ve与 SQL 相似使得 其作为 Hadoop 与其它 BI 工具结合的理想交集。

Pig 赋予开发人员在摧集领余的灵活性，并允许开发寄脚本用于转化数据帘闱度氲浇洗应用程蠵ig 相比 Hive 相对轻量，它帜优势是相比于直接使用 Hadoop Java APIs 可代 码量。正溢此，Pig 仍然是吸引茨软件研发人员。 Hive 和 Pig 都可以与 HBase 组合使用，Hive 和 Pig 还为 HBase 提供了高层语言支持，使得 在 HBase 上进行数据统计处理变的十分糎ive VS HBase Hive 是确立在 Hadoop 之上为了糓apReduce jobs 编写工处理系统，HBase 是为 了支持弥补 Hadoop 对即时操妆陷的项目 。 想馅操譊B ，如果是全表扫描，就用 Hive+Hadoop,如果是嗣问，就用 HBase+Hadoop 。 Hive query 就是 MapReduce jobs 可以从 5 分钟到数小时不止，HBase 是相当高效的，肯定 比 Hive 高效的多。

本文来自电脑杂谈，转载请注明本文网址：
http://www.pc-fly.com/a/jisuanjixue/article-139522-1.html