酷炫冰淇淋

文章
4
资源
0
加入时间
3年1月8天

cache和persist区别

cache()是persist()的特例,persist可以指定一个StorageLevel(缓存级别)cache的缓存级别是memory_only区别就是cache默认是在内存中存储的,而persist可以设置存储的级别:如何选择一种最合适的持久化策略默认情况下,性能最高的当然是MEMORY_ONLY,但前提是你的内存必须足够足够大,可以绰绰有余地存放下整个RDD的所有数据。...