粗暴烤鸡

文章
7
资源
0
加入时间
2年10月21天

【hive】hive的查询注意事项以及优化总结

一、控制Hive中Map和reduce的数量Hive中的sql查询会生成执行计划,执行计划以MapReduce的方式执行,那么结合数据和集群的大小,map和reduce的数量就会影响到sql执行的效率。除了要控制Hive生成的Job的数量,也要控制map和reduce的数量。1、 map的数量,通常情况下和split的大小有关系,之前写的一篇blog“map和reduc