动态表 DML 操作

Dynamic Table (DT) 提供了对数据的直接修改能力,通过 DML(Data Manipulation Language)语句实现数据的插入、更新和删除操作。但出于安全考虑,这些操作默认是禁用的,以防止误操作导致数据损坏。若需启用 DML 操作,用户必须显式设置系统参数

set cz.optimizer.incremental.backfill.enabled=true;
set cz.optimizer.incremental.backfill.enabled=true;
,所有非refresh修改数据都认为是backfill操作。

启用后,DT 将支持以下 DML 操作:

  • 插入操作:支持
    INSERT
    INSERT
    INSERT OVERWRITE
    INSERT OVERWRITE
    语句。
  • 删除操作:支持
    DELETE
    DELETE
    TRUNCATE
    TRUNCATE
    语句。

注意事项

  • 全量刷新:一旦对 DT 进行了 DML 修改,下一次数据刷新将自动转为全量刷新。这是因为中间计算结果的状态将变得不可预测,为了保证数据的一致性和准确性,系统将重新计算所有数据。
  • 参数化定义的带分区的 DT:对于参数化定义且带有分区的 DT,如果仅修改了部分分区,未被修改的分区仍然可以维持增量刷新。

插入数据

CREATE dynamic TABLE event_gettime AS SELECT event, process, YEAR(event_time) event_year, MONTH(event_time) event_month, DAY(event_time) event_day FROM event_tb; set cz.optimizer.incremental.backfill.enabled=true; INSERT INTO event_gettime VALUES ('event-update', 20, 2024, 9, 19); SELECT * FROM event_gettime;

删除数据

CREATE dynamic TABLE event_gettime AS SELECT event, process, YEAR(event_time) event_year, MONTH(event_time) event_month, DAY(event_time) event_day FROM event_tb; set cz.optimizer.incremental.backfill.enabled=true; DELETE FROM event_gettime WHERE event_day = 19; SELECT * FROM event_gettime;

联系我们
预约咨询
微信咨询
电话咨询
邮件咨询