MySQL UNION拼接查询时，如何去除重复字段并保留所有结果？

Question

在使用MySQL的UNION拼接查询时，如何去除重复字段并保留所有结果是一个常见的技术问题。默认情况下，UNION会自动去除重复的行，但如果需要保留所有结果且避免重复字段的影响，可以使用UNION ALL来包含所有记录，同时通过SELECT时明确指定字段来控制输出。例如，当两个查询结果集存在同名但意义不同的字段时，可通过别名重命名字段，如`SELECT field1 AS unique_name FROM table1 UNION ALL SELECT field2 AS unique_name FROM table2`。这样既能保留所有数据，又可避免字段冲突或重复。此外，若需进一步去重，可在最终结果上应用DISTINCT。此方法适用于多表联合查询场景，确保数据完整性和一致性。

Answer 1

1. 基础理解：MySQL UNION 的默认行为

在 MySQL 中，UNION 是一种用于合并两个或多个 SELECT 查询结果的工具。默认情况下，UNION 会自动去除重复的行。例如：

SELECT field1 FROM table1
UNION
SELECT field2 FROM table2;

上述查询将返回两个表中所有唯一的结果。然而，在某些场景下，我们可能希望保留所有记录，即使它们包含重复项。

2. 进阶方法：使用 UNION ALL 保留所有结果

如果需要确保所有记录都被保留，可以使用 UNION ALL 替代 UNION。UNION ALL 不会对结果进行去重操作，因此可以保留所有数据。例如：

SELECT field1 AS unique_name FROM table1
UNION ALL
SELECT field2 AS unique_name FROM table2;

通过这种方式，我们可以避免因默认去重而导致的数据丢失问题。

3. 字段冲突处理：通过别名重命名字段

当两个查询结果集中存在同名但意义不同的字段时，可以通过别名对字段进行重命名。这有助于避免字段冲突并提高查询结果的可读性。例如：

SELECT id AS table1_id, name FROM table1
UNION ALL
SELECT id AS table2_id, description AS name FROM table2;

在这里，我们将第一个查询中的 id 字段命名为 table1_id，第二个查询中的 id 字段命名为 table2_id，从而避免了字段名称冲突。

4. 高级技巧：结合 DISTINCT 进行进一步去重

尽管 UNION ALL 保留了所有记录，但在某些情况下，我们仍希望对最终结果进行去重。此时可以结合 DISTINCT 使用：

SELECT DISTINCT unique_name FROM (
    SELECT field1 AS unique_name FROM table1
    UNION ALL
    SELECT field2 AS unique_name FROM table2
) AS combined_results;

这种方法首先通过 UNION ALL 合并所有数据，然后在外部查询中应用 DISTINCT 来消除重复项。

5. 实际应用场景：多表联合查询

UNION 和 UNION ALL 在多表联合查询中非常常见。例如，假设我们需要从多个日志表中提取特定字段并生成统一的报告：

Query	Result
SELECT action FROM log_table1	Action1, Action2
SELECT action FROM log_table2	Action3, Action4
Combined Query	Action1, Action2, Action3, Action4

通过合理使用 UNION 或 UNION ALL，我们可以轻松实现跨表数据整合。

6. 流程图：查询执行逻辑

以下是查询执行的逻辑流程图：

graph TD;
    A[Start Query] --> B{Use UNION?};
    B --Yes--> C[Remove Duplicates];
    B --No--> D[Use UNION ALL];
    D --> E[Preserve All Rows];
    C --> F[Output Results];
    E --> F;
    

此流程图展示了如何根据需求选择合适的 UNION 类型。