找i满洲做卖房广告不收费的网站,网页设计需要学什么语言,wordpress给后台添加样式,wordpress苏醒主题安全吗文章目录
Doris重点架构原理
一、Apache Doris介绍
二、Apache Doris使用场景
三、Apache Doris架构原理
四、Apache Doris 特点 Doris重点架构原理
一、Apache Doris介绍
基于 MPP 架构的高性能、实时的分析型数据库#xff0c;以极速易用的特点被人们所熟知#xff…
文章目录
Doris重点架构原理
一、Apache Doris介绍
二、Apache Doris使用场景
三、Apache Doris架构原理
四、Apache Doris 特点 Doris重点架构原理
一、Apache Doris介绍
基于 MPP 架构的高性能、实时的分析型数据库以极速易用的特点被人们所熟知仅需亚秒级响应时间即可返回海量数据下的查询结果不仅可以 支持高并发的点查询场景也能支持高吞吐的复杂分析场景 。 二、Apache Doris使用场景 报表分析 即席查询Ad-hoc Query 统一数仓构建 数据湖联邦查询 三、Apache Doris架构原理 Doris 架构非常简单只有两类进程FE和BE这两类进程都是可以横向扩展的单集群可以支持到数百台机器数十 PB 的存储容量。并且这两类进程通过一致性协议来保证服务的高可用和数据的高可靠。这种高度集成的架构设计极大的降低了一款分布式系统的运维成本。 FrontendFE : 主要负责用户请求的接入、查询解析规划、元数据的存储、节点管理相关工作。
FE又分为 Leader、Follwer和Observer三种角色 默认一个Doris集群中只能有一个Leader可以有多个Follwer和Observer。其中Leader和Follwer组成一个Paxos选择组如果Leader宕机则剩下的Follower会自动选出新的Leader保证单节点宕机情况下元数据的高可用及数据写入高可用。
Observer用来扩展查询节点、同步Leader元数据进行备份如果Doris集群压力非常大可以扩展Observer节点来提高集群查询能力Observer不参与选举、数据写入只参与数据读取。 BackendBE :一个用户请求通过FE解析、规划后具体的执行计划会发送给BE具体执行BE主要负责数据存储、查询计划的执行。
BE分布式的存储Doris table表数据table表数据会经过分区分桶形成tablettablet采用列式存储默认有3个副本。BE会接收FE命令来创建、查询、删除table表接收来自FE的执行计划并分布式执行。BE会通过索引和谓词下推快速过滤数据可以在后台执行Compact任务减少查询时的读放大。 Broker(可选)
Apache Doris架构中除了有BE和FE进程之外还可以部署Broker可选进程主要用于支持Doris读写远端存储上的文件和目录。例如Apache HDFS 、阿里云OSS、亚马逊S3等。
Broker 通过提供一个 RPC 服务端口来提供服务是一个无状态的 Java 进程负责为远端存储的读写操作封装一些类 POSIX 的文件操作如 openpreadpwrite 等等。除此之外Broker 不记录任何其他信息所以包括远端存储的连接信息、文件信息、权限信息等等都需要通过参数在 RPC 调用中传递给 Broker 进程才能使得 Broker 能够正确读写文件。Broker 仅作为一个数据通路并不参与任何计算因此仅需占用较少的内存。通常一个 Doris 系统中会部署一个或多个 Broker 进程。 四、Apache Doris 特点 支持标准SQL接口 列式存储引擎 支持丰富的索引结构 支持多种存储模型 支持物化视图 MPP架构设计 支持向量化查询引擎 动态调整执行计划 采用CBO和RBO 查询优化器 博客主页https://lansonli.blog.csdn.net 欢迎点赞 收藏 ⭐留言 如有错误敬请指正 本文由 Lansonli 原创首发于 CSDN博客 停下休息的时候不要忘了别人还在奔跑希望大家抓紧时间学习全力奔赴更美好的生活✨
