1、Hive的来源与介绍
1)Hive是由Facebook开源用于解决海量结构化日志的数据统计。
2)Hive是基于Hadoop的一个数据仓库工具,可以将结构化的数据文件映射为一张表,并提供类SQL查询功能。
3)总结一句话,Hive的本质是:将HQL转化成MapReduce程序。
4)Hive处理的数据我们一般存储在分布式文件系统HDFS上,由于其执行底层会转换成MapReduce程序,所以需要提前开启Yarn相关的服务。
2、Hive的优缺点
1)优点
(1)提供了类SQL的语法,有SQL基础的开发人员可以快速上手,节省学习成本。
(2)避免了去编写复杂的MapReduce程序,减少了开发人员的成本。
(3)Hive由于底层是MapReduce程序,执行延迟比较高,因此Hive常用于离线数据分析,对实时性要求不高的场景比较适合。
(4)Hive的优势在于处理大数据量的数据,对于处理小数据没有优势,这也是因为Hive的执行延迟比较高。
(5)Hive支持定义一系列的UDF、UDTF等自定义函数,可以根据实际的不同业务要求来实现不同的功能(后面会详细讲这块)
2)缺点
(1&#x