下一代实时数据库：Apache Doris 【一】简介

2023-08-06 16:50:06

文章目录

第 1 章 Doris 简介

1.1 Doris 概述

Apache Doris 由百度大数据部研发(之前叫百度 Palo，2018 年贡献到 Apache 社区后， 更名为 Doris ) ，在百度内部， 有超过 200 个产品线在使用， 部署机器超过 1000 台， 单一 业务最大可达到上百 TB。

Apache Doris 是一个现代化的 MPP (Massively Parallel Processing，即大规模并行处理) 分析型数据库产品。仅需亚秒级响应时间即可获得查询结果，有效地支持实时数据分析。 Apache Doris 的分布式架构非常简洁，易于运维， 并且可以支持 10PB 以上的超大数据集。

Apache Doris 可以满足多种数据分析需求，例如固定历史报表，实时数据分析， 交互式

数据分析和探索式数据分析等。

img

img

1.2 Doris 架构

img

Doris 的架构很简洁， 只设 FE(Frontend)、BE(Backend)两种角色、两个进程， 不依赖于 外部组件， 方便部署和运维， FE 、BE 都可线性扩展。

⚫ FE (Frontend) ：存储、维护集群元数据；负责接收、解析查询请求，规划查询计划，

调度查询执行， 返回查询结果。主要有三个角色：

(1)Leader 和 Follower：主要是用来达到元数据的高可用，保证单节点宕机的情况下， 元数据能够实时地在线恢复，而不影响整个服务。

(2) Observer：用来扩展查询节点，同时起到元数据备份的作用。如果在发现集群压力 非常大的情况下，需要去扩展整个查询的能力，那么可以加 observer 的节点。observer 不 参与任何的写入，只参与读取。

⚫ BE (Backend) ：负责物理数据的存储和计算；依据 FE 生成的物理计划， 分布式地执行查询。

数据的可靠性由 BE 保证，BE 会对整个数据存储多副本或者是三副本。副本数可根据 需求动态调整。

⚫ MySQL Client

Doris 借助 MySQL 协议，用户使用任意 MySQL 的 ODBC/JDBC 以及 MySQL 的客户 端，都可以直接访问 Doris。

⚫ Broker

Broker 为一个独立的无状态进程。封装了文件系统接口， 提供 Doris 读取远端存储系统 中文件的能力， 包括 HDFS ，S3 ，BOS 等。

后记

📢博客主页：https://manor.blog.csdn.net

📢欢迎点赞 👍 收藏 ⭐留言 📝 如有错误敬请指正！
📢本文由 Maynor 原创，首发于 CSDN博客🙉
📢不能老盯着手机屏幕，要不时地抬起头，看看老板的位置⭐
📢专栏持续更新,欢迎订阅：https://blog.csdn.net/xianyu120/category_12401955.html

更多推荐

39.地址算术运算

如果p是一个指向数组中某个元素的指针，那么p++将会对p进行自增运算并指向下一个元素，而p+=i将对p进行加i的增量运算，使其指向指针p当前所指向的元素之后的第i个元素。这类运算时指针或地址算术运算中最简单的形式。allocbuf中的空间使用状况也是我们需要了解的信息。我们使用指针allocp指向allocbuf中的下

Docker实践：使用Docker搭建个人开发环境（极简版）

文章目录说明教程1.编写Dockerfile2.编写docker-compose.yml3.使用容器创建容器启动容器进入容器命令行VSCode4.关闭容器5.备份容器导出导入6.重置容器相关资料文章合集详细了解本文在个人电脑上安装Docker容器使用NVIDIA显卡托管镜像运行GUI程序说明本文是在服务器已经配置好Do

python入门篇03 基础案例 python版与java版 语法不同之处

目录1.前言:->上篇传送门:python入门篇02python的语法基础2.案例:pzy超市的收银系统(控制台输入版)->2.0需求摘要:->2.1python代码答案:<直接可以运行>->2.2java代码答案:<必须有main方法>2.3两种代码运行的结果:(一样的结果)--->2.3.2python运行结果(图

【实用 Python 库】Python glob库：轻松应对文件和目录管理

导言在Python编程中，我们经常需要处理文件和目录。为了更便捷地处理这些任务，Python提供了glob库，它允许我们根据特定模式匹配文件和目录。本篇博客将详细介绍glob库的用法，并通过实例演示它的各种功能。什么是glob库？glob库是Python标准库中的一个模块，它提供了一个简单而强大的方法来匹配文件和目录的

springboot整合SSE

SSE简介SSE(ServerSentEvent)，是一种可以主动从服务端推送消息的技术。SSE的本质其实就是一个HTTP的长连接，只不过它给客户端发送的不是一次性的数据包，而是一个stream流，格式为text/event-stream。所以客户端不会关闭连接，会一直等着服务器发过来的新的数据流。SSE服务端代码sp

Vulnhub系列靶机---Deathnote: 1死亡笔记

文章目录信息收集主机发现端口扫描目录扫描dirsearchgobusterdirb扫描漏洞利用wpscan扫描Hydra爆破总结靶机文档：Deathnote:1下载地址：Download(Mirror)难易程度：soEasy信息收集主机发现端口扫描访问靶机的80端口，报错，如下图显示：地址栏输入地址后，自动跳转到一个域

让Mac菜单栏变得更加美观整洁——Bartender 5

Bartender5是一款Mac电脑上的菜单栏图标管理软件，能够帮助您把菜单栏上的图标整理得更加美观、整洁和易于使用。如果您的菜单栏上充斥着许多图标，导致视觉上很不舒适和疲劳，那么Bartender5就是解决这一问题的最佳选择！Bartender5的操作相当简单，它可以隐藏菜单栏上不常用的图标，只在需要时出现。也可以把

Python是人工智能的最佳选择吗？看看它的优势和局限

人工智能（ArtificialIntelligence，AI）是当今科技领域最热门的话题之一，它涉及到计算机科学、数学、统计学、心理学等多个学科的交叉和融合。人工智能的目标是让机器能够模拟和超越人类的智能，实现自主学习、推理、决策等能力。要实现人工智能，就需要用到编程语言。编程语言是人类和机器之间沟通的桥梁，它可以让我

Python asynchat模块-异步套接字处理-服务器程序示例

介绍此模块在asyncore架构上建立，简化了异步客户端和服务器，并且使得处理元素为任意字符串结束或者为变长度的协议更加容易。asynchat定义了一个可以由使用者来子类化的抽象类async_chat，提供了collect_incoming_data()和found_terminator()等方法的实现。它使用与asy

【腾讯云 Cloud Studio 实战训练营】使用云IDEA，快速构建React完成点餐H5页面

文章目录前言简介优势项目介绍实战教学注册流程创建工作空间环境配置安装antd-mobile安装less和less-loader暴露webpack配置文件修改config/webpack.config.js文件安装normalize上传项目素材替换App.js主文件创建index.less文件启动项目清理实验先停止项目再

在 Windows 上直接安装 React

🎬岸边的风：个人主页🔥个人专栏:《VUE》《javaScript》⛺️生活的理想，就是为了理想的生活!目录必备条件创建React应用本指南将介绍如何使用create-react-app工具链直接在Windows上安装React。如果你不熟悉React并且正好有兴趣学习，我们建议遵循以下说明。如果你要创建一个单页应用

热文推荐
  1. 下一代实时数据库：Apache Doris 【二】编译与安装

    文章目录第2章编译与安装2.1安装Docker环境2.2使用Docker开发镜像编译后记第2章编译与安装安装Doris，需要先通过源码编译，主要有两种方式：使用Docker开发镜像编译(推荐)、直接编译。直接编译的方式，可以参考官网：https://doris.apache.org/zh-CN/installing/c

  2. vuex的state,getters,mutations,actions,modules

    目录Vuex核心概念：1、State1）全局state2）使用modules中的state2、Getters1）全局Getters2）使用modules中的getters3、Mutations1）全局Mutations2）使用modules中的mutations（namespaced:true）4、Actions1）全

  3. Day69：283. 移动零、11. 盛最多水的容器、42. 接雨水

    283.移动零leetcode链接：https://leetcode.cn/problems/move-zeroes/给定一个数组nums，编写一个函数将所有0移动到数组的末尾，同时保持非零元素的相对顺序。请注意，必须在不复制数组的情况下原地对数组进行操作。示例1:输入:nums=[0,1,0,3,12]输出:[1,3

  4. 华为云云耀云服务器L实例评测｜怎么搭建企业综合Web平台

    前言记得2019年，公司搞混合云的时候，测试过多家公有云，其中就有华为云。因公司也在深圳，项目也比较急，我司业务上云经验又不足，华为官方获悉情况后，第二天就派了4人小团队到我司来交流，整个交流过程非常流畅，从华为云的优势，华为POP点到我司机房网络，我司金融Web业务的特点，金融行业的通用迁云经验，甚至到后台团队连线，

  5. 数据库的模糊查询

    命中率越高–策略越好数据库的模糊查询work918在SQL中，模糊查询可以使用LIKE关键字来实现。LIKE关键字后面可以跟一个模式，其中%表示任意数量的字符，_表示一个字符。例如，如果你想在一个名为students的表中查找所有名字以Li开头的学生，你可以这样做：SELECT*FROMstudentsWHEREnam

  6. uview组件库的安装

    更多的请查看官方文档uView2.0-全面兼容nvue的uni-app生态框架-uni-appUI框架(uviewui.com)//如果您的根目录没有package.json文件的话，请先执行如下命令：//npminit-y安装npminstalluview-ui@2.0.36//更新//npmupdateuview-

  7. 【基本数据结构 四】线性数据结构：队列

    学习了栈后，再来看看第四种线性表结构，也就是队列，队列和栈一样也是一种受限的线性表结构，和栈后进先出的操作方式不同的是，队列是FIFO的结构，也就是先进先出的操作方式。队列的定义队列这个概念非常好理解。可以把它想象成排队买票，先来的先买，后来的人只能站末尾，不允许插队。先进者先出，这就是典型的“队列”.栈只支持两个基本

  8. 在Docker中使用MindSpore GPU版本

    文章目录在Docker中使用MindSporeGPU版本获取安装命令安装安装nvidia-container-toolkit获取MindSpore镜像测试运行MindSpore镜像运行代码使用VSCode开发在Docker中使用MindSporeGPU版本参考官方文档：安装指南获取安装命令如图所示命令为dockerpu

  9. 【深入理解ES6】函数

    箭头函数这是ES6中引入的一个有趣的新特性。箭头函数，顾名思义就是一种使用箭头（=>）定义的新语法，与传统函数的差别如下：没有this、super、arguments和new.target绑定，他们由外围最近一层非箭头函数决定。不能通过New关键字调用。箭头函数没有construct方法，所以不能用作构造函数。没有原型