qq_27406855 2019-06-14 15:48 采纳率: 33.3%
浏览 283
已结题

HADOOP分区表并行插入的疑问?

在HADOOP中建了一张分区表,举个简单的例子:比如产品表PRODUCT
其中有个产品代码、产品类别等字段,
按产品类别分区,比如有10个产品类别;
现在根据每个产品类别开发了一个脚本,共10个脚本,目标是往同一张表里插入数据,有2种方式:
1、建10张临时表,并行插入数据,最后再统一插入到目标表

2、十个脚本直接并行插入到目标表;

疑问:第二种方式会存在传统数据库的锁表吗?如果会的话是不是会等待一个跑完了才能跑下一个?
因为HADOOP是按分区建目录的,所以我理解是每个目录插入数据互不干扰,不知道是不是这样的?

  • 写回答

1条回答 默认 最新

  • dabocaiqq 2019-06-17 00:22
    关注
    评论

报告相同问题?

悬赏问题

  • ¥15 素材场景中光线烘焙后灯光失效
  • ¥15 请教一下各位,为什么我这个没有实现模拟点击
  • ¥15 执行 virtuoso 命令后,界面没有,cadence 启动不起来
  • ¥50 comfyui下连接animatediff节点生成视频质量非常差的原因
  • ¥20 有关区间dp的问题求解
  • ¥15 多电路系统共用电源的串扰问题
  • ¥15 slam rangenet++配置
  • ¥15 有没有研究水声通信方面的帮我改俩matlab代码
  • ¥15 ubuntu子系统密码忘记
  • ¥15 保护模式-系统加载-段寄存器