elasticsearch去重计数（distinct、cardinality）

最新推荐文章于 2025-07-07 17:00:53 发布

原创最新推荐文章于 2025-07-07 17:00:53 发布 · 2.3w 阅读

2 ·

CC 4.0 BY-SA版权

ELK 专栏收录该内容

63 篇文章

订阅专栏

本文介绍了如何在Elasticsearch中利用Cardinality聚合查询来统计索引中某个字段的不同值数量。通过示例查询展示了针对'domain.keyword'字段进行去重计数的方法，并给出了响应结果，结果显示该字段有121618个独特的domain名称。此外，还提供了一个针对'oltopvarname.keyword'字段进行相同操作的例子，得出存在495个不同的'oltopvarname'值。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

如果需要针对ES索引统计某个字段上出现的不同值的个数时，可以使用cardinality聚合查询完成:

GET /urlAttributes/_search?search_type=count
{
"aggs": {
"uniq_attr": {
"cardinality": {
"field": "domain.keyword"
}
}
}
}

注释：如上，是查询索引urlAttributes中domain字段上的不同值个数， "uniq_attr"是用户自己取的bucket名字。

得到的响应如下所示：

{
"took": 28,
"timed_out": false,
"_shards": {
"total": 6,
"successful": 6,
"failed": 0
},
"hits": {
"total": 68000,
"max_score": 0,
"hits": []
},
"aggregations": {
"uniq_attr": {
"value": 1216
}
}
}

返回结果表示该字段出现过121618个不同的domain名字。

GET gather-000/_search
{
"size": 0,
"aggs": {
"distinct_oltopvarname": {
"cardinality": {
"field": "oltopvarname.keyword"
}
}
},
"_source":["oltopvarname"]
}

{
"took": 216,
"timed_out": false,
"_shards": {
"total": 3,
"successful": 3,
"failed": 0
},
"hits": {
"total": 14404611,
"max_score": 0,
"hits": []
},
"aggregations": {
"distinct_oltopvarname": {
"value": 495
}
}
}