爱创新的小萌 2022-01-18 20:31 采纳率: 100%
浏览 38
已结题

spark sql数据如何求交集?

工作中想求一行数组是否在很多个数字中,这时候想到了数据交集,但是搜了很多资料也没找到,求解惑
实现两个数组交集,或者这一组数组有没有数据在另外一组数组里
  • 写回答

3条回答 默认 最新

  • DarkAthena ORACLE应用及数据库设计方案咨询师 2022-01-18 21:57
    关注

    spark sql中可以使用except来获得两组数据的交集

    SELECT * FROM student_1 
    EXCEPT 
    SELECT * FROM student_2;
    

    你如果是某一行中的某一列是个数组,把它展开成多行后再用上面这个方法一样可以得出交集,即explode +except +collect_list

    当然,也可以直接用数组函数得到交集

    img


    参考

    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论 编辑记录
查看更多回答(2条)

报告相同问题?

问题事件

  • 系统已结题 1月30日
  • 已采纳回答 1月22日
  • 创建了问题 1月18日

悬赏问题

  • ¥20 怎么在stm32门禁成品上增加记录功能
  • ¥15 Source insight编写代码后使用CCS5.2版本import之后,代码跳到注释行里面
  • ¥50 NT4.0系统 STOP:0X0000007B
  • ¥15 想问一下stata17中这段代码哪里有问题呀
  • ¥15 flink cdc无法实时同步mysql数据
  • ¥100 有人会搭建GPT-J-6B框架吗?有偿
  • ¥15 求差集那个函数有问题,有无佬可以解决
  • ¥15 【提问】基于Invest的水源涵养
  • ¥20 微信网友居然可以通过vx号找到我绑的手机号
  • ¥15 寻一个支付宝扫码远程授权登录的软件助手app