有一个RDD，想对元组中的数组的不重复的部分计数然后生成另一个RDD，但生成的RDD的collect会报空指针，实在是不知道为什么，有没有大神指点一下问题出在哪或者怎么修改能达到目的
1条回答 默认 最新
- 2020-05-11 23:57回答 1 已采纳 https://blog.csdn.net/high2011/article/details/53138279
- 2022-11-29 12:53回答 1 已采纳 RDD.getNumPartitions()返回 RDD 中的分区数所以答案是：2
- 2022-11-29 12:45回答 1 已采纳 RDD.getNumPartitions()返回 RDD 中的分区数所以返回结果是2
- 2020-10-11 14:28冽夫的博客 这空值动不动就Null point error，是个巨大的坑，昨天调试了一天的程序发现，dataframe转rdd进行类似于filter一些的操作，最后count的时候就会报空指针的错误，但是df不转为rdd而是直接df.filter(func)的话，就可以...
- 2022-05-17 10:42回答 1 已采纳 target字段转数字失败，你看一下数据对应的该字段是不是有非数字的值
- 2021-10-28 11:43回答 1 已采纳 用flatmap
- 2022-06-03 20:23回答 1 已采纳 Python SparkConf.setAppName方法代码示例 - 纯净天空 Python SparkConf.setAppName方
- 2019-02-28 13:58大胖头leo的博客 RDD.take(), RDD.first() .collect() 方法把RDD的所有元素返回给驱动，驱动将其序列化成了一个列表 .take() 返回前几个元素
- 2020-04-10 01:01回答 1 已采纳 https://blog.csdn.net/wzq294328238/article/details/48054525/
- 2021-11-24 10:01回答 1 已采纳 你把它复制到记事本发给我
- 2022-02-09 14:38
在使用Spark连接数据库时发生Caused by: java.sql.SQLException: Out of range value for column 'age' : value age
java
spark
sql
回答 1 已采纳 http://cn.voidcc.com/question/p-ozcajljc-dh.html，看下这个 - KuaiLe的小黑的博客 但在集群环境中，输出会被executors唤起，被写到executors的输出，而不是驱动所在的主机，所以在主机上不会显示打印信息，为了能够在主机上打印信息，要使用collect()函数首先把RDD放到主机节点上，rdd.collect()....
- 2023-01-17 22:05回答 2 已采纳 这是一个连接Doris服务器失败的错误，具体原因可能是Doris服务器无法连接或网络故障导致的。
- 2022-01-23 12:35不断学习的克里斯的博客 发现问题 object serialDemo { def main(args: Array[String]): Unit = { val sparConf = new SparkConf().setMaster("local").setAppName(... val rdd: RDD[String] = sc.makeRDD(Array("hello world", "hello sp
- 2018-08-24 17:01潮生明月的博客 Spark内有collect方法，是Action操作里边的一个算子，这个方法可以将RDD类型的数据转化为数组，同时会从远程集群是拉取数据到driver端。 已知的弊端 首先，collect是Action里边的，根据RDD的惰性机制，真正的计算...
- 没有解决我的问题, 去提问
问题事件
已采纳回答
12月8日
悬赏问题
- ¥15 关于#matlab#的问题：在模糊控制器中选出线路信息，在simulink中根据线路信息生成速度时间目标曲线（初速度为20m/s，15秒后减为0的速度时间图像）我想问线路信息是什么
- ¥15 banner广告展示设置多少时间不怎么会消耗用户价值
- ¥16 mybatis的代理对象无法通过@Autowired装填
- ¥15 可见光定位matlab仿真
- ¥15 arduino 四自由度机械臂
- ¥15 wordpress 产品图片 GIF 没法显示
- ¥15 求三国群英传pl国战时间的修改方法
- ¥15 matlab代码代写，需写出详细代码，代价私
- ¥15 ROS系统搭建请教（跨境电商用途）
- ¥15 AIC3204的示例代码有吗，想用AIC3204测量血氧，找不到相关的代码。