(國防科學技術大學,計算機學院,湖南,410073)
摘要Hadoop[1]平臺下的作業調度器主要有三種:先進先出調度器(FIFO)[4]、計算能力調度器(Capacity Scheduler) [4]和公平調度器(Fair Scheduler) [4],其中公平調度器是為應對多用戶共享集群下多類型作業的并行執行而設計。本文首先介紹了Hadoop平臺下作業調度機制,然后分析了公平調度器的算法,針對存在的不足之處提出了相應的改進方法。最后對作業調度技術的發展趨勢進行了展望。
關鍵詞:Hadoop,作業調度,FIFO,公平調度器。
參考文獻
[1] Apache hadoop官方文檔:
[2] 王峰,Hadoop集群作業的調度算法,程序員,2009年12期。
[3] 高源,云計算Hadoop平臺調度策略研究,科海故事博覽,2011年2期。
[4] Hadoop Fair Scheduler Design Document, October 18, 2010.
作者簡介
周根鴻,男,1980年生,籍貫湖北天門,工程碩士研究生,主要從事云計算架構下數據庫性能擴展的研究。
陽國貴,男,1964年生,籍貫湖南冷水江,博士,研究員,主要研究領域為操作系統和數據庫。