要减肥小松鼠

文章
3
资源
0
加入时间
3年0月28天

spark.sql.hive.convertMetastoreParquet参数优化

Hive metastore Parquet表转换(Hive metastore Parquet table conversion) 当向Hive metastore中读写Parquet表时,Spark SQL将使用Spark SQL自带的Parquet SerDe(SerDe:Serialize/Deserilize的简称,目的是用于序列化和反序列化),而不是用Hive的SerDe,Spark