作者 | Draveness 导读:本文作者写这篇文章前前后后大概 2 个月的时间,全文大概 2w 字,建议收藏后阅读或者通过电脑阅读。 调度是一个非常广泛的概念,很多领域都会使用调度这个术语,在计算
HDFS 分布式文件系统YARN 资源管理系统MapReduce 分布式计算框架ZooKeeper分布式协调服务Hbase分布式数据库Flume 日志收集Sqoop 数据同步工具Oozie 作业流调度
调度是一个非常广泛的概念,很多领域都会使用调度这个术语,在计算机科学中,调度就是一种将任务(Work)分配给资源的方法。任务可能是虚拟的计算任务,例如线程、进程或者数据流,这些任务会被调度到硬件资源上