news 2026/2/6 6:31:58

doris的动态分区,可以yyyy-MM这种年月格式的日期格式来做为分区吗

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
doris的动态分区,可以yyyy-MM这种年月格式的日期格式来做为分区吗

Doris 的动态分区(dynamic partition)默认支持的分区字段格式是标准的DATEDATETIME类型,但你提到的yyyy-MM(即只有年月,没有日)的格式属于不完整日期(非标准 DATE 类型),不能直接用作分区字段。

但可以通过以下方法间接实现以年月为粒度的分区

一、推荐方式:使用DATE字段 + 动态分区,按月分区

虽然不能直接用yyyy-MM,但你可以用DATE类型字段(例如2024-05-01),然后通过动态分区的 granularity 为 MONTH的方式实现「按月分区」。

示例:

CREATE TABLE example_table ( id INT, event_time DATE ) DISTRIBUTED BY HASH(id) BUCKETS 10 PARTITION BY RANGE(event_time) () PROPERTIES ( "dynamic_partition.enable" = "true", "dynamic_partition.time_unit" = "MONTH", "dynamic_partition.start" = "-12", "dynamic_partition.end" = "3", "dynamic_partition.prefix" = "p", "dynamic_partition.buckets" = "10", "dynamic_partition.create_history_partition" = "true" );

效果:

会自动创建如下分区:

分区名分区范围(event_time)
p202405[2024-05-01, 2024-06-01)
p202406[2024-06-01, 2024-07-01)

你在写入数据时,只需往event_time列写入标准的DATE类型值(如2024-05-10),Doris 会自动路由到对应分区p202405

二、如果你的原始数据字段是yyyy-MM字符串格式

你需要:

  1. 在写入时用 SQL 转换成DATE类型;
  2. 或者使用视图或计算列。

示例:将yyyy-MM字符串转换为DATE

-- 假设有个 staging 表字段是 "2024-05" SELECT STR_TO_DATE(CONCAT(partition_ym, '-01'), '%Y-%m-%d') AS event_time FROM staging_table;

然后写入主表中。

🚫 不推荐:直接使用字符串yyyy-MM作为分区字段

虽然技术上可以用VARCHAR字段做 RANGE 分区,但:

  • 无法使用动态分区功能(只支持DATE/DATETIME字段);
  • 不能使用时间函数做范围推导、自动创建分区等操作
  • 写入和查询逻辑不直观、不易维护。
版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/2/6 17:25:22

C++thread pool(线程池)设计应关注哪些扩展性问题?

简单来说,线程池就是一堆预先创建好的线程,随时待命去处理任务,避免频繁创建和销毁线程带来的开销。在服务器开发、游戏引擎或者大数据处理中,这玩意儿几乎是标配。不过,要真想把线程池设计得靠谱,光会用可…

作者头像 李华
网站建设 2026/2/5 10:20:32

通达信缠论插件:从新手到高手的实战进阶指南

通达信缠论插件:从新手到高手的实战进阶指南 【免费下载链接】Indicator 通达信缠论可视化分析插件 项目地址: https://gitcode.com/gh_mirrors/ind/Indicator 还在为复杂的缠论分析头疼吗?通达信缠论可视化分析插件将专业级的技术分析变得简单直…

作者头像 李华
网站建设 2026/2/6 1:32:36

RevokeMsgPatcher终极使用指南:3步搞定微信QQ消息防撤回

RevokeMsgPatcher终极使用指南:3步搞定微信QQ消息防撤回 【免费下载链接】RevokeMsgPatcher :trollface: A hex editor for WeChat/QQ/TIM - PC版微信/QQ/TIM防撤回补丁(我已经看到了,撤回也没用了) 项目地址: https://gitcode.…

作者头像 李华
网站建设 2026/2/5 23:18:33

Photoshop图层批量导出插件完整指南:5分钟实现高效工作流

Photoshop图层批量导出插件完整指南:5分钟实现高效工作流 【免费下载链接】Photoshop-Export-Layers-to-Files-Fast This script allows you to export your layers as individual files at a speed much faster than the built-in script from Adobe. 项目地址: …

作者头像 李华
网站建设 2026/2/5 1:17:22

安卓基于Android的家庭食谱烹饪菜谱分享交流系统

目录系统概述核心功能技术实现应用场景优势与创新本项目技术栈Android前端设计思路开发核心技术Kotlin核心代码部分展示java开发Android的缺点和Kotlin开发Android的优点对比源码获取详细视频演示:文章底部获取博主联系方式!!!&am…

作者头像 李华
网站建设 2026/2/5 18:42:21

超强PowerPoint LaTeX插件:告别公式排版烦恼的终极解决方案

超强PowerPoint LaTeX插件:告别公式排版烦恼的终极解决方案 【免费下载链接】IguanaTex A PowerPoint add-in allowing you to insert LaTeX equations into PowerPoint presentations on Windows and Mac 项目地址: https://gitcode.com/gh_mirrors/ig/IguanaTex…

作者头像 李华