Count(Distinct) 怎样去重统计

时间:2025-01-04 11:34:28

1、1. 创建一张大表

Count(Distinct) 怎样去重统计

2、2.加载数据

Count(Distinct) 怎样去重统计

3、3.设置5个reduce个数

Count(Distinct) 怎样去重统计

4、4.执行去重id查询

Count(Distinct) 怎样去重统计

5、5.采用GROUP by去重id

Count(Distinct) 怎样去重统计

6、虽然会多用一个Job来完成,但在数据量大的情况下,这个绝对是值得的。

© 2025 长短途
信息来自网络 所有数据仅供参考
有疑问请联系站长 site.kefu@gmail.com