本文源自:金融界
金融界 2024 年 11 月 27 日消息，国家知识产权局信息显示，华为技术有限公司申请一项名为“一种资源调度方法、调度器、数据处理系统及相关设备”的专利，公开号 CN 119025015 A ，申请日期为 2023 年 7 月。
专利摘要显示，本申请提供了一种资源调度方法，调度器获取数据流描述信息和用户提交的作业流，该数据流描述信息用于指示作业流包括的多个作业中各个作业的输入数据或输出数据之间的关系；在多个作业中的第一作业的输入数据或者输出数据存储于多个计算节点中的第一计算节点时，调度器根据数据流描述信息将与第一作业的输入数据或者输出数据有关系的第二作业及第一作业调度至第一计算节点。如此，其中一个作业所需的输入数据可以持续存储在计算节点中的本地缓存区域，这可以避免该数据在计算节点、缓存池以及存储集群之间产生不必要的迁移，从而有效提高数据处理系统的IO性能，缓解资源浪费问题。此外，本申请还提供了对应的调度器、数据处理系统及相关设备。
