mysql单表4000万行数据,如何按单个字段快速去重呢?电脑内存只有8G 5C

mysql单表4000万行数据,如何按单个字段快速去重呢?电脑内存只有8G

4个回答

使用distinct关键字,且给需要去重字段加上索引。

看你是什么类型的数据,可以先hash入表,然后分组。

看你的Where 条件是什么? 给这些Where 条件的column 增加索引(index)
保证查询的数据在几秒内即可求出

  1. 目标字段加索引;
  2. 单个字段过滤,用distinct即可;
Csdn user default icon
上传中...
上传图片
插入图片
抄袭、复制答案,以达到刷声望分或其他目的的行为,在CSDN问答是严格禁止的,一经发现立刻封号。是时候展现真正的技术了!
立即提问
相关内容推荐