💎一站式轻松地调用各大LLM模型接口,支持GPT4、智谱、星火、月之暗面及文生图 广告
检查点:类似于快照。 ```scala // 设置检查点生成数据在hdfs上的存储目录 sc.setCheckpointDir("hdfs:/checkpoint0918") val rdd=sc.parallelize(List(('a',1), ('a',2), ('b',3), ('c',4))) rdd.checkpoint // 使用检查点 rdd.collect // 调用Action算子后生成快照 rdd.isCheckpointed // rdd是否启用了检查点,是返回true rdd.getCheckpointFile // 获取此RDD检查点所在的目录的名称 ```