SQL 方言通

首页 / 工具 / 迁移清单 / Doris → MaxCompute

Doris 迁移到 MaxCompute 的函数改写清单

从 Doris 迁移到 MaxCompute 时,在 Doris 有对应写法的 44 个常用函数中,15 个需要改写,另有 1 个可以改用 MaxCompute 的原生函数。逐个列出两边写法和注意事项。

需要改写的函数 · 可以改用原生函数 · 迁移注意事项 · 可以直接用的函数 · 反向:MaxCompute 迁移到 Doris

需要改写的函数

函数Doris 写法MaxCompute 写法MaxCompute 说明
ADD_MONTHSMONTHS_ADD(date, nums)支持 ADD_MONTHS(startdate, num_months)返回 yyyy-mm-dd 格式的 STRING,不是 DATE。格式不对时返回 NULL,例如 '20170214'。
APPROX_COUNT_DISTINCTAPPROX_COUNT_DISTINCT(expr)别名 APPROX_DISTINCT(colname)MaxCompute 2.0 扩展函数,返回 BIGINT,文档写明会有 5% 的误差。
DATEADDTIMESTAMPADD(unit, n, datetime_expr)支持 DATEADD(date, delta, datepart)datepart 必须是常量,可选 yyyy、q、mm、week、dd、hh、mi、ss、ff3 等。返回类型与 date 相同。date 为 NULL 时报错,delta 或 datepart 为 NULL 时返回 NULL。2.0 数据类型版本下,字符串要先 CAST 成 DATETIME。
DATETRUNCDATE_TRUNC(datetime, 'month')支持 DATETRUNC(date, date_part)返回类型与输入相同。单位支持 yyyy、q、mm、week、isoweek、dd、hh、mi、ss、ff3,week 默认从周一开始,也可以写 week(sunday)。
FROM_JSONJSON_PARSE(json_str)支持 from_json(jsonStr, schema)schema 写法与建表时的类型一致,例如 'a bigint, b double'、'array<bigint>'、'map<string,string>'。返回 ARRAY、MAP 或 STRUCT。STRUCT 的 key 区分大小写,缺失的 key 返回 NULL,类型不匹配的值会被忽略。
GET_JSON_OBJECTGET_JSON_STRING(json_str, json_path)支持 GET_JSON_OBJECT(json, json_path)返回 STRING,路径以 $ 开头,不支持正则。转义行为受 odps.sql.udf.getjsonobj.new 控制。
GETDATENOW([precision])支持 GETDATE()返回 DATETIME,以东八区时间为标准。同一条 SQL 中总是返回固定值,精度到秒;开启 2.0 数据类型后精度到毫秒。
LENGTHCHAR_LENGTH(str)支持 LENGTH(str)返回 BIGINT,输入不是 UTF-8 编码时返回 -1。按字节计算长度要用 LENGTHB。
SIZEARRAY_SIZE(arr) / MAP_SIZE(m)支持 SIZE(array_or_map)同一个函数可以处理 ARRAY 和 MAP,返回 INT。
SORT_ARRAYARRAY_SORT(arr)支持 SORT_ARRAY(a[, isasc])isasc 默认为 True,即升序,传 False 时降序。NULL 视为最小值。
SPLITSPLIT_BY_STRING(str, separator)支持 SPLIT(source, delimiter[, trimTailEmpty])返回 ARRAY<STRING>。分隔符支持正则表达式。trimTailEmpty 默认为 true,会去掉末尾的空字符串。任一参数为 NULL 时返回 NULL。
SUBSTRSUBSTRING(str, pos[, len])支持 SUBSTR(str, start_position[, length])从 1 开始计数,负数从末尾倒数。start_position 为 0 时返回空字符串;Hive 兼容模式和 BigQuery 兼容模式下按 1 处理。length 为 0 或负数时返回空字符串。
TO_CHARDATE_FORMAT(date, '%Y-%m-%d %H:%i:%s')支持 TO_CHAR(date, format)格式符为 yyyy、mm、dd、hh、mi、ss,也支持 %Y、%m 这类写法。日期输入时 format 必填。date 为 NULL 时报错,format 为 NULL 时返回 NULL。也可以传入 BIGINT、DOUBLE 等数值,直接转成字符串。
TO_DATEstr_to_date(str, format)支持 TO_DATE(date_str[, format])不传 format 时返回 DATE,传入 format 时返回 DATETIME。格式符为 yyyy、mm、dd、hh、mi、ss、ff3,format 必须包含 yyyy。
WM_CONCATGROUP_CONCAT([DISTINCT] str[, sep] [ORDER BY ...])支持 WM_CONCAT(separator, colname)分隔符必须是常量且写在前面。支持 DISTINCT 和 WITHIN GROUP (ORDER BY ...),值为 NULL 的行不参与计算。

可以改用原生函数

下面的函数在 Doris 中只能用替代写法,MaxCompute 有对应的函数。原来的写法通常仍能运行,换成原生函数会更简洁。

函数Doris 写法MaxCompute 写法MaxCompute 说明
DECODECASE expr WHEN search THEN result ... ELSE default END支持 DECODE(expression, search, result[, search, result]...[, default])没有匹配且没有 default 时返回 NULL。所有 result 的类型必须一致,search 与 expression 的类型也必须一致,否则报错。在 DECODE 中 NULL 与 NULL 视为相等。

迁移注意事项

以下内容摘自各函数页中提到 Doris 或 MaxCompute 的注意事项。

ADD_MONTHS 按月加减

APPROX_COUNT_DISTINCT 近似去重计数

DATEADD 按单位加减日期

DATETRUNC 日期截断

FROM_JSON 按 schema 解析 JSON

GET_JSON_OBJECT 提取 JSON 字段

GETDATE 获取当前时间

LENGTH 字符串长度

SIZE 数组和 Map 元素个数

SORT_ARRAY 数组排序

SPLIT 字符串拆分

SUBSTR 截取子串

TO_CHAR 日期转字符串

TO_DATE 字符串转日期

WM_CONCAT 分组拼接字符串

DECODE 多值匹配

可以直接用的函数

下面 28 个函数在两个引擎中写法相同。参数、返回值和边界情况仍可能不同,点开函数页查看细节。

相关页面:Doris 函数写法 · MaxCompute 函数写法 · 全部迁移清单 · 用 SQL 迁移检查器检查自己的 SQL