hive统计词频，找出top30的词

Question

老师的一个作业需要统计一个文件的词频
请加微信13234477182
200元红包
很简单的一个任务。。。

Answer 1

第一步、按照像规则拆分词，主要是词典，不断匹配
第二步、保存到表中
第三步、SQL select * from （selec count(*) as cnt , 词 from 表 group by 词 ） t order by cnt desc limit 30;