在idea上链接hive 并将mysql上的数据抽取到hive表中
最近刚看spark的数据处理在数据抽取上分为增量和全量全量数据抽取把源系统所有数据复制到系统目标表同步方式就叫做—>全量增量数据增量抽取指的是只抽取前次抽取之后发生变化或者新增的数据这是全量数据抽取 def main(args: Array[String]): Unit = { val conf = new SparkConf().setMaster("local").setAppName("kks") val spark = S