SparkStreaming 过滤日志
由于sparkStreaming日志太多不便于查找关键的日志,而且在spark1.6版本,日志默认是打印在根目录所在磁盘,实时任务日志会随着时间越来越大,可能会给服务造成影响,此时需要过滤掉某些类的日志。// 屏蔽不必要的日志 ,在终端上显示需要的日志import org.apache.log4j.{Level, Logger}Logger.getLogger("org.apache.spa...