m0_63207666 2022-02-22 09:00 采纳率: 100%
浏览 56
已结题

条件判断后删除hive表分区

需求：保留当日数据和每月月末收据
想法：判断当日是否为月初第一天，即日期是01，如果不是，删除昨日数据。
有其他更好的想法也欢迎指点

  • 写回答

2条回答 默认 最新

  • Keifei 2022-02-22 09:23
    关注

    按月分区，overwrite...这有什么难的

    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论
查看更多回答(1条)

报告相同问题？

  • hive删除分区，判断是否存在
    2025-07-17 17:52
    大数据同盟会的博客 在shell脚本里，删除hive分区时，如果该分区不存在，会报错，可以使用if exists 判断。
  • 使用 PySpark 批量清理 Hive 表历史分区
    2025-04-18 13:44
    D愿你归来仍是少年的博客 通过 PySpark 批量清理 Hive 表历史分区，可以有效释放存储空间，提升 Hive 元数据管理效率。该方法简单高效，适用于大多数基于时间分区的 Hive 表维护场景。
  • 【大数据】一篇认识Hive
    2024-10-09 19:24
    编码人生_的博客 文章目录一、数据仓库1.1、数据仓库概念1.2、数据仓库核心特征1.3、数据库和数据仓库的区别1.4、数据仓库分层架构[**重要**]1.5、ETL和ELT二、Apache Hive2.1、Hive的概念2.2、Hive的架构组件(非常重要)2.3、Hive和...
  • Hive大分区表查询不带分区，查询慢
    2025-01-31 15:31
    500佰的博客 Hive 大分区表查询不带分区，查询慢
  • 大数据开发笔记（四）：Hive分区详解
    2021-02-10 14:33
    GoAI的博客 hive分区（partition） 1、在Hive Select查询中一般会扫描整个表内容，会消耗很多时间做没必要的工作。有时候只需要扫描表中关心的一部分数据，因此建表时引入了partition概念。 2、分区表指的是在创建表时指定的...
  • HIVE 分区表详解
    2021-02-21 18:49
    Charles Gao的博客 1、在Hive Select查询中一般会扫描整个表内容，会消耗很多时间做没必要的工作。有时候只需要扫描表中关心的一部分数据，因此建表时引入了partition概念。 2、分区表指的是在创建表时指定的partition的分区空间。 3、...
  • 大数据面试题整理——Hive
    2024-10-28 18:45
    自节码的博客 Hive是一个构建在Hadoop上的数据仓库软件，它提供了类似SQL的查询语言，使得用户可以用SQL来查询存放在Hadoop上的数据。Hive是一种结构化数据的存储和查询机制，它可以将SQL语句转换为MapReduce任务在Hadoop上执行。...
  • Hive分区表的基本操作及结构
    2020-07-29 19:10
    大数据点滴的博客 在Hive数仓中也有分区分桶的概念，在逻辑上分区表与未分区表没有区别，在物理上分区表会将数据按照分区键的列值存储在表目录的子目录中，目录名=“分区键=键值”。其中需要注意的是分区键的值不一定要基于表的某一列...
  • 大数据开发之Hive(查询、分区表和分桶表、函数)
    2024-01-12 15:13
    Key-Key的博客 炸裂函数，一进多出，类似：explode()3、编程步骤1）继承Hive提供的类2）实现类中的抽象方法3）在hive的命令行窗口创建函数4、hive中引入自定义函数步骤1）添加jar2）创建function3）在hive的命令行窗口删除函数ok ...
  • HIVE 大数据学习
    2024-03-09 08:50
    OutRoading的博客 Apache Hive是一款建立在Hadoop之上的开源系统，可以将存储在Hadoop文件中的，基于表提供了一种类似SQL的查询模式，称为，用于访问和分析存储在Hadoop文件中的大型数据集Hive核心是将 HQL转换成MapReduce程序，然后...
  • 没有解决我的问题, 去提问

问题事件

  • 系统已结题 4月15日
  • 已采纳回答 4月7日
  • 创建了问题 2月22日