qq_27406855 2019-06-14 15:48 采纳率: 33.3%
浏览 283
已结题

HADOOP分区表并行插入的疑问?

在HADOOP中建了一张分区表,举个简单的例子:比如产品表PRODUCT
其中有个产品代码、产品类别等字段,
按产品类别分区,比如有10个产品类别;
现在根据每个产品类别开发了一个脚本,共10个脚本,目标是往同一张表里插入数据,有2种方式:
1、建10张临时表,并行插入数据,最后再统一插入到目标表

2、十个脚本直接并行插入到目标表;

疑问:第二种方式会存在传统数据库的锁表吗?如果会的话是不是会等待一个跑完了才能跑下一个?
因为HADOOP是按分区建目录的,所以我理解是每个目录插入数据互不干扰,不知道是不是这样的?

  • 写回答

1条回答 默认 最新

  • dabocaiqq 2019-06-17 00:22
    关注
    评论

报告相同问题?

悬赏问题

  • ¥30 这是哪个作者做的宝宝起名网站
  • ¥60 版本过低apk如何修改可以兼容新的安卓系统
  • ¥25 由IPR导致的DRIVER_POWER_STATE_FAILURE蓝屏
  • ¥50 有数据,怎么建立模型求影响全要素生产率的因素
  • ¥50 有数据,怎么用matlab求全要素生产率
  • ¥15 TI的insta-spin例程
  • ¥15 完成下列问题完成下列问题
  • ¥15 C#算法问题, 不知道怎么处理这个数据的转换
  • ¥15 YoloV5 第三方库的版本对照问题
  • ¥15 请完成下列相关问题!