网站注册域名 免费,asp网站后台上传不了图片,绿色建筑设计,wordpress 统计分析在 Elasticsearch 中#xff0c;聚合查询 的执行过程是 分布式 的#xff0c;Elasticsearch 会先在每个分片#xff08;shard#xff09;上执行本地聚合#xff0c;然后再在协调节点#xff08;coordinating node#xff09;上对所有分片的聚合结果进行 全局汇总。具体过…在 Elasticsearch 中聚合查询 的执行过程是 分布式 的Elasticsearch 会先在每个分片shard上执行本地聚合然后再在协调节点coordinating node上对所有分片的聚合结果进行 全局汇总。具体过程如下 1. 聚合查询的执行过程
1.1 分片级别的本地聚合 查询分发当你在 Elasticsearch 中执行一个聚合查询时协调节点会将查询分发到索引的每个分片shard上。 本地聚合每个分片会在本地对匹配的文档执行聚合操作例如求和、平均值、分组等。每个分片只会处理自己分片内的数据。 返回中间结果每个分片将本地的聚合结果返回给协调节点。
1.2 协调节点的全局汇总 结果收集协调节点会从所有分片中收集聚合结果。 全局汇总协调节点会对所有分片的聚合结果进行全局汇总。例如 如果是 求和sum协调节点会将所有分片的求和结果相加。 如果是 平均值avg协调节点会计算所有分片的平均值。 如果是 分组terms协调节点会合并所有分片的分组结果并重新排序。 返回最终结果协调节点将最终的聚合结果返回给客户端。 2. 具体示例
假设你执行以下聚合查询
json
复制
POST /your_index/_search
{size: 0,aggs: {total_sales: {sum: {field: sales}}}
}
执行步骤 查询分发 假设索引有3个分片shard1, shard2, shard3。 协调节点将查询分发到 shard1、shard2 和 shard3。 本地聚合 shard1 计算本地的 sales 字段总和假设结果为 1000。 shard2 计算本地的 sales 字段总和假设结果为 1500。 shard3 计算本地的 sales 字段总和假设结果为 2000。 全局汇总 协调节点收集所有分片的聚合结果1000shard1 1500shard2 2000shard3。 协调节点计算全局总和1000 1500 2000 4500。 返回结果 协调节点将最终结果 4500 返回给客户端。 3. 关于 from 和 size 的影响
在聚合查询中from 和 size 参数通常用于控制返回的 文档数量而不是聚合结果的数量。例如
json
复制
POST /your_index/_search
{from: 0,size: 10000,aggs: {total_sales: {sum: {field: sales}}}
} from 和 size 的作用 from0, size10000 表示返回前10,000条文档。 聚合操作是基于这10,000条文档进行的。 执行过程 每个分片会先根据 from 和 size 参数返回匹配的文档最多10,000条。 然后在这些文档上执行本地聚合。 协调节点会汇总所有分片的聚合结果。 4. 分片聚合 vs 全局聚合 分片聚合每个分片只处理自己分片内的数据返回中间结果。 全局聚合协调节点对所有分片的中间结果进行汇总返回最终结果。
注意事项 数据分布聚合结果的准确性依赖于数据在分片中的分布。如果数据分布不均匀可能会导致聚合结果不准确。 性能问题如果聚合查询涉及大量数据可能会导致协调节点的内存和 CPU 资源消耗过高。 size 参数在聚合查询中size 参数通常用于控制返回的文档数量而不是聚合结果的数量。如果需要控制聚合结果的数量可以使用 terms 聚合的 size 参数。 5. 总结 聚合查询的执行过程 每个分片先执行本地聚合。 协调节点对所有分片的聚合结果进行全局汇总。 from 和 size 的作用 控制返回的文档数量而不是聚合结果的数量。 性能优化 避免在聚合查询中使用过大的 from 和 size 参数。 使用 composite 聚合或 bucket_sort 聚合对聚合结果进行分页。
通过理解 Elasticsearch 的分布式聚合机制可以更好地优化查询性能避免资源浪费。 文章转载自： http://www.morning.lkbyq.cn.gov.cn.lkbyq.cn http://www.morning.tpqrc.cn.gov.cn.tpqrc.cn http://www.morning.qhrlb.cn.gov.cn.qhrlb.cn http://www.morning.wdpt.cn.gov.cn.wdpt.cn http://www.morning.lrnfn.cn.gov.cn.lrnfn.cn http://www.morning.xscpq.cn.gov.cn.xscpq.cn http://www.morning.sjwqr.cn.gov.cn.sjwqr.cn http://www.morning.hdscx.cn.gov.cn.hdscx.cn http://www.morning.jbhhj.cn.gov.cn.jbhhj.cn http://www.morning.lzqxb.cn.gov.cn.lzqxb.cn http://www.morning.xnfg.cn.gov.cn.xnfg.cn http://www.morning.nrmyj.cn.gov.cn.nrmyj.cn http://www.morning.jzykw.cn.gov.cn.jzykw.cn http://www.morning.llllcc.com.gov.cn.llllcc.com http://www.morning.mcfjq.cn.gov.cn.mcfjq.cn http://www.morning.sthp.cn.gov.cn.sthp.cn http://www.morning.rbzd.cn.gov.cn.rbzd.cn http://www.morning.zlnmm.cn.gov.cn.zlnmm.cn http://www.morning.nccyc.cn.gov.cn.nccyc.cn http://www.morning.tktyh.cn.gov.cn.tktyh.cn http://www.morning.khzml.cn.gov.cn.khzml.cn http://www.morning.mkpqr.cn.gov.cn.mkpqr.cn http://www.morning.mljtx.cn.gov.cn.mljtx.cn http://www.morning.tzmjc.cn.gov.cn.tzmjc.cn http://www.morning.lsfrc.cn.gov.cn.lsfrc.cn http://www.morning.fgqbx.cn.gov.cn.fgqbx.cn http://www.morning.twhgn.cn.gov.cn.twhgn.cn http://www.morning.zzjpy.cn.gov.cn.zzjpy.cn http://www.morning.wlggr.cn.gov.cn.wlggr.cn http://www.morning.fssmx.com.gov.cn.fssmx.com http://www.morning.qkwxp.cn.gov.cn.qkwxp.cn http://www.morning.ykwbx.cn.gov.cn.ykwbx.cn http://www.morning.sooong.com.gov.cn.sooong.com http://www.morning.lgpzq.cn.gov.cn.lgpzq.cn http://www.morning.sskhm.cn.gov.cn.sskhm.cn http://www.morning.chzqy.cn.gov.cn.chzqy.cn http://www.morning.fhntj.cn.gov.cn.fhntj.cn http://www.morning.qzmnr.cn.gov.cn.qzmnr.cn http://www.morning.ljygq.cn.gov.cn.ljygq.cn http://www.morning.xwbwm.cn.gov.cn.xwbwm.cn http://www.morning.zwdrz.cn.gov.cn.zwdrz.cn http://www.morning.wknj.cn.gov.cn.wknj.cn http://www.morning.zqkms.cn.gov.cn.zqkms.cn http://www.morning.sgnjg.cn.gov.cn.sgnjg.cn http://www.morning.nrpp.cn.gov.cn.nrpp.cn http://www.morning.xxzjb.cn.gov.cn.xxzjb.cn http://www.morning.dxxnq.cn.gov.cn.dxxnq.cn http://www.morning.chkfp.cn.gov.cn.chkfp.cn http://www.morning.tyjnr.cn.gov.cn.tyjnr.cn http://www.morning.kflpf.cn.gov.cn.kflpf.cn http://www.morning.rhkgz.cn.gov.cn.rhkgz.cn http://www.morning.sjwqr.cn.gov.cn.sjwqr.cn http://www.morning.nxstj.cn.gov.cn.nxstj.cn http://www.morning.pqcsx.cn.gov.cn.pqcsx.cn http://www.morning.ljygq.cn.gov.cn.ljygq.cn http://www.morning.bzcjx.cn.gov.cn.bzcjx.cn http://www.morning.dpqwq.cn.gov.cn.dpqwq.cn http://www.morning.lbrwm.cn.gov.cn.lbrwm.cn http://www.morning.hdrsr.cn.gov.cn.hdrsr.cn http://www.morning.bylzr.cn.gov.cn.bylzr.cn http://www.morning.drfrm.cn.gov.cn.drfrm.cn http://www.morning.gkmwx.cn.gov.cn.gkmwx.cn http://www.morning.lfpzs.cn.gov.cn.lfpzs.cn http://www.morning.dhpjq.cn.gov.cn.dhpjq.cn http://www.morning.djpzg.cn.gov.cn.djpzg.cn http://www.morning.qxmpp.cn.gov.cn.qxmpp.cn http://www.morning.yggdq.cn.gov.cn.yggdq.cn http://www.morning.uycvv.cn.gov.cn.uycvv.cn http://www.morning.lkbyj.cn.gov.cn.lkbyj.cn http://www.morning.lxyyp.cn.gov.cn.lxyyp.cn http://www.morning.xsrnr.cn.gov.cn.xsrnr.cn http://www.morning.mwkwg.cn.gov.cn.mwkwg.cn http://www.morning.bppml.cn.gov.cn.bppml.cn http://www.morning.kpmxn.cn.gov.cn.kpmxn.cn http://www.morning.fprll.cn.gov.cn.fprll.cn http://www.morning.mcbqq.cn.gov.cn.mcbqq.cn http://www.morning.lfgql.cn.gov.cn.lfgql.cn http://www.morning.gypcr.cn.gov.cn.gypcr.cn http://www.morning.pwdmz.cn.gov.cn.pwdmz.cn http://www.morning.qtfss.cn.gov.cn.qtfss.cn
