野性河马

文章
3
资源
0
加入时间
3年0月21天
用json实现深拷贝

用json实现深拷贝

一、代码 private SaleDetailReportRespDTO deepCopy(SaleDetailReportRespDTO obj) { String json = JSON.toJSONString(obj); return JSON.parseObject(json, SaleDetailReportRespDTO.class); ...
json 2023-10-02
Spark源码解析03-Submit提交流程及Driver启动流程

Spark源码解析03-Submit提交流程及Driver启动流程

1、前言由前面的文章Spark基础06-Spark client和cluster提交流程我们已经知道了Spark client和cluster提交模式流程启动Driver进程，并向集群管理器注册应用程序集群资源管理器根据任务配置文件分配并启动ExecutorExecutor启动之后反向到Driver注册，Driver已经获取足够资源可以运行Driver开始执行main函数，Spark查询为懒执行，当执行到action算子时开始反向推算，根据宽依赖进行stage的划分，随后每一个stage对应一个
spark 2023-09-22

他的专栏

JavaScript（0）
VBS编程（0）
Windows 10（0）
Python（1）
spark（1）
json（1）

他的归档

2023年10月（1）
2023年09月（1）
2023年07月（1）

热门文章

1
Python编程：namedtuple命名元组和dict字典相互转换
2
Spark源码解析03-Submit提交流程及Driver启动流程
3
用json实现深拷贝