个性学姐

文章
8
资源
0
加入时间
2年10月17天

Spark SQL调优

1 spark.sql.codegen 默认值为false,当它设置为true时,Spark SQL会把每条查询的语句在运行时编译为java的二进制代码。可以提高大型查询的性能,但是如果进行小规模的查询的时候反而会变慢,就是说直接用查询反而比将它编译成为java的二进制代码快。所以在优化这个选项的时候要视情况而定。2 spark.sql.inMemoryColumnStorage.compressed 默认值为false 它的作用是自动对内存中的列式存储进行压缩3 spark.sql.inMem

脚本

在浏览网页时经常会弹出对话框,说当下浏览的网页脚本出现错误,问是否要继续运行该脚本。那么什么叫“脚本”呢