数据处理方法、装置、设备、可读存储介质及程序产品

著录项目

摘要

本申请实施例提出了一种数据处理方法、装置、设备、可读存储介质及程序产品，该方法包括：从数据库任务对应的物理算子树中确定物理混洗节点；获取物理混洗节点所记录的第一分区数量，以及获取物理混洗节点的子节点所记录的第二分区数量；若第一分区数量等于目标值、且第二分区数量等于目标值，则对物理算子树执行优化处理，优化处理包括：删除物理算子树中物理混洗节点对应的混洗操作；按照优化后的物理算子树响应数据库任务。通过本申请实施例，可以减少Shuffle数据量，提高分布式计算引擎的计算性能。

附图

附图 1