怕孤单铅笔

文章
6
资源
0
加入时间
3年0月21天

Spark如何删除无效rdd checkpoint

spark可以使用checkpoint来作为检查点,将rdd的数据写入hdfs文件,也可以利用本地缓存子系统。当我们使用checkpoint将rdd保存到hdfs文件时,如果任务的临时文件长时间不删除,长此以往,hdfs会出现很多没有用的文件,spark也考虑到了这一点,因此,用了一些取巧的方式来解决这种问题。spark config:spark.cleaner.referenceTrack...

对触发器的认识

一:事件-条件-动作模型。二:创建触发器的语句格式:create trigger 触发器名 触发时间 触发事件on 表名feferencing 旧/新值别名...for each row|statementwhen(条件)被触发的SQL语句其中:触发时间有before和after。触发事件有insert,delete,update,update of 触发列..