一、 Dolphin Scheduler简介

Dolphin Scheduler是一个开源的分布式干活流调度平台，用于在麻烦的干活流中施行各种任务。在CentOS系统上运行Dolphin Scheduler时兴许会遇到材料占用过高大的问题。

二、 材料占用过高大原因琢磨

1. 系统材料不够：当Dolphin Scheduler的任务量许多些时系统材料兴许会成为瓶颈。

2. 优化配置不当：Dolphin Scheduler的配置参数兴许设置不当，弄得材料浪费。

3. 任务依赖关系麻烦：当任务之间的依赖关系麻烦时兴许会弄得材料分配不合理。

三、 少许些材料占用的方法

1. 调整系统材料分配

1.1 许多些CPU和内存材料：根据任务需求，适当许多些系统的CPU和内存材料。

1.2 调整操作系统内核参数：优化操作系统内核参数，搞优良系统材料利用率。

2. 优化Dolphin Scheduler配置

2.1 调整并发任务数：根据系统材料情况， 适当调整并发任务数，避免材料争用。

2.2 优化任务调度策略：调整任务调度策略，少许些材料占用。

2.3 关闭不少许不了的功能：关闭Dolphin Scheduler中不少许不了的功能，少许些材料占用。

3. 优化任务依赖关系

3.1 简化任务依赖关系：尽量简化任务依赖关系，少许些材料争用。

3.2 合并任务：将相关任务合并为一个任务，少许些材料争用。

四、 具体操作方法

4.1.1 修改centos系统CPU和内存材料：在centos系统中，能用以下命令查看CPU和内存材料。

cat /proc/cpuinfo

free -m

根据系统材料情况，用以下命令修改centos系统CPU和内存材料。

ulimit -n 65535

ulimit -m unlimited

4.2.1 调整并发任务数：

在Dolphin Scheduler的配置文件中，能找到以下参数。

master.exec.threads

worker.exec.threads

的值。

4.3.1 简化任务依赖关系：

在Dolphin Scheduler的任务管理界面中，能查看任务之间的依赖关系。

根据任务需求，尽量简化任务依赖关系。

少许些Dolphin Scheduler在CentOS上的材料占用需要综合考虑优良几个因素。通过调整系统材料分配、 优化Dolphin Scheduler配置和优化任务依赖关系，能有效少许些材料占用。在实际操作中，需要根据具体情况选择合适的优化方法。