news 2026/2/10 11:29:17

Apache Doris的部署

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
Apache Doris的部署

Apache Doris 部署有单机快速部署和生产环境的集群部署两种常见方式,单机部署适合测试与开发,集群部署适用于正式业务场景。以下是基于主流 2.x 版本的详细部署步骤,以 Linux 系统为例:

前期准备

  1. 环境依赖安装
    组件要求及安装命令
    JDKFE 依赖 JDK 8,下载后配置环境变量。示例配置:export JAVA_HOME=/root/jdk1.8.0_431export PATH=$PATH:$JAVA_HOME/bin
    系统依赖库BE 需依赖相关库,CentOS 执行:yum install -y libstdc++-devel zlib-devel snappy-devel lz4-devel;Ubuntu 执行:apt-get install -y libstdc++6 zlib1g-dev libsnappy-dev liblz4-dev
    辅助工具安装 mysql - client 用于连接 FE,ntp 用于时间同步:yum install -y mysql - client ntp(CentOS)或apt install -y mysql - client-core - 8.0 ntp(Ubuntu)
  2. 系统参数优化执行以下命令调整系统配置,避免部署后出现运行异常:

    bash

    运行

    # 调整虚拟内存映射数 sysctl -w vm.max_map_count=2000000 # 关闭swap分区 swapoff -a # 提高文件描述符限制 ulimit -n 655350 # 写入配置文件确保重启生效 echo "* soft nofile 65535" >> /etc/security/limits.conf echo "* hard nofile 65535" >> /etc/security/limits.conf
  3. 下载安装包从Doris 镜像站下载稳定版安装包,示例命令:

    bash

    运行

    wget https://apache-doris-releases.oss-accelerate.aliyuncs.com/apache-doris-2.1.10-bin-x64.tar.gz # 解压到指定目录 mkdir -p /opt/doris tar -zxvf apache-doris-2.1.10-bin-x64.tar.gz -C /opt/doris cd /opt/doris

单机部署(测试环境)

单机部署会在同一台机器上同时启动 FE 和 BE,步骤简单适合快速测试。

  1. 部署 FE(前端节点)
    1. 编辑 FE 配置文件conf/fe.conf,关键配置如下:

    bash

    运行

    # 指定本机内网IP priority_networks = 192.168.0.118/24 # 配置JDK路径 JAVA_HOME=/root/jdk1.8.0_431 # JVM内存配置,根据机器内存调整 JAVA_OPTS="-Xms2g -Xmx2g -XX:+UseG1GC"
    1. 启动 FE 并验证:

    bash

    运行

    # 后台启动FE bin/start_fe.sh --daemon # 查看进程,存在DorisFE则启动成功 jps
  2. 部署 BE(后端节点)
    1. 编辑 BE 配置文件conf/be.conf,配置内网 IP:

    bash

    运行

    priority_networks = 192.168.0.118/24
    1. 启动 BE 并验证:

    bash

    运行

    # 后台启动BE bin/start_be.sh --daemon # 查看进程,存在DorisBE则启动成功 jps
  3. 注册 BE 到 FE通过 MySQL 客户端连接 FE,完成 BE 节点注册:

    bash

    运行

    # 连接FE,默认无密码 mysql -uroot -P9030 -h127.0.0.1 --default-auth=mysql_native_password # 执行注册命令,IP为本机地址 alter system add backend "192.168.0.118:9050"; # 查看BE状态,Alive为true表示注册成功 show proc '/backends'\G

集群部署(生产环境)

生产环境建议 FE 节点≥3 台(1 主 2 从)、BE 节点≥3 台,保障高可用,以下是核心步骤。

  1. 节点规划示例
    节点 IP角色说明
    192.168.1.10FE(Leader)主前端节点,管理元数据
    192.168.1.11FE(Follower)从前端节点,实现高可用
    192.168.1.12BE数据存储与计算节点
    192.168.1.13BE数据存储与计算节点
    192.168.1.14BE数据存储与计算节点
  2. 批量部署 FE
    1. 先在 192.168.1.10 启动主 FE,步骤同单机部署的 FE 部署。
    2. 在 192.168.1.11 等从 FE 节点,修改fe.conf后,执行命令加入集群:

    bash

    运行

    # 从FE节点启动并关联主FE bin/start_fe.sh --daemon --helper 192.168.1.10:9010
  3. 批量部署 BE
    1. 每台 BE 节点修改conf/be.conf中的priority_networks为对应本机 IP。
    2. 启动所有 BE 后,通过 MySQL 客户端连接主 FE,批量注册 BE:

    bash

    运行

    alter system add backend "192.168.1.12:9050","192.168.1.13:9050","192.168.1.14:9050";

验证部署

  1. 访问 FE 的 Web 界面,默认端口 8030,如http://192.168.1.10:8030,可查看集群节点状态。
  2. 通过 MySQL 客户端执行简单查询,验证功能正常:

    sql

    create database test_db; use test_db; create table test_table(id int) distributed by hash(id) buckets 1; insert into test_table values(1); select * from test_table;
版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/2/8 16:22:31

GLM-4-9B全面解析:开源大模型如何重塑企业AI应用格局

GLM-4-9B全面解析:开源大模型如何重塑企业AI应用格局 【免费下载链接】glm-4-9b 项目地址: https://ai.gitcode.com/zai-org/glm-4-9b 导语 智谱AI推出的GLM-4-9B开源大模型以其超越Llama-3-8B的综合性能、多模态能力和企业级功能,正在成为2024…

作者头像 李华
网站建设 2026/2/6 23:53:17

3分钟快速上手:Qwen3-VL多模态AI模型的完整使用指南

3分钟快速上手:Qwen3-VL多模态AI模型的完整使用指南 【免费下载链接】Qwen3-VL-4B-Instruct-FP8 项目地址: https://ai.gitcode.com/hf_mirrors/unsloth/Qwen3-VL-4B-Instruct-FP8 想要体验最新一代的多模态人工智能吗?Qwen3-VL-4B-Instruct-FP8…

作者头像 李华
网站建设 2026/2/8 6:46:36

动态GIF库gif-h使用教程

动态GIF库gif-h使用教程 【免费下载链接】gif-h Simple C one-header library for the creation of animated GIFs from image data. 项目地址: https://gitcode.com/gh_mirrors/gi/gif-h 1. 项目介绍 gif-h 是一个简单的C单头文件库,用于创建从图像数据生成…

作者头像 李华
网站建设 2026/2/9 7:48:44

电池行业全景分析:产业链、上市企业与职业发展指南

从材料到整车,一场能源革命的产业图谱一、电池行业全景:万亿赛道的黄金十年 2025年全球动力电池装机量预计突破2000GWh,市场规模超2万亿元中国占全球动力电池产能70%以上,宁德时代、比亚迪等龙头引领全球技术三大核心驱动力&#…

作者头像 李华
网站建设 2026/2/6 10:37:26

Python性能测试神器:pyperf基准测试工具深度解析

Python性能测试神器:pyperf基准测试工具深度解析 【免费下载链接】pyperf Toolkit to run Python benchmarks 项目地址: https://gitcode.com/gh_mirrors/py/pyperf 在当今快节奏的软件开发环境中,Python性能优化已成为开发者必须掌握的技能。面对…

作者头像 李华