这里想问个问题。
我用Spark SQL从HDFS load上来了一张表。
然后我现在有如下两种情况：
- 新增数据都是通过Spark SQL load进去的
- 这时候我HDFS和RDD上面的数据是否一致
- 我数据是直接load到了HDFS上面（例如是个分区表，增加了一个分区）
- 这时候我HDFS和RDD上面的数据是否一致
麻烦给出详细的原理过程或者参考链接
Spark RDD和HDFS数据一致性问题
- 写回答
- 好问题 0 提建议
- 追加酬金
- 关注问题
分享- 邀请回答
-
0条回答 默认 最新
悬赏问题
- ¥15 drone 推送镜像时候 purge: true 推送完毕后没有删除对应的镜像,手动拷贝到服务器执行结果正确在样才能让指令自动执行成功删除对应镜像，如何解决？
- ¥15 求daily translation（DT）偏差订正方法的代码
- ¥15 js调用html页面需要隐藏某个按钮
- ¥15 ads仿真结果在圆图上是怎么读数的
- ¥20 Cotex M3的调试和程序执行方式是什么样的？
- ¥20 java项目连接sqlserver时报ssl相关错误
- ¥15 一道python难题3
- ¥15 牛顿斯科特系数表表示
- ¥15 arduino 步进电机
- ¥20 程序进入HardFault_Handler