一种在线管理Hadoop集群资源的方法和装置_淮海经济区技术产权交易中心

欢迎进入淮海经济区技术产权交易中心官方网站！

0516-83896168 Email：jshtec@163.com 旧版回顾

发明专利

专利名称：一种在线管理Hadoop集群资源的方法和装置

专利类型：发明专利

专利号：CN201310646044.7

发布日期：2025-12-19

授权公告日：
详细内容

本发明公开了一种在线管理Hadoop集群资源的方法和装置,以根据作业在线运行的特点动态地调整所需虚拟资源,避免资源的浪费。所述方法包括:对生产环境集群中用户所提交作业运行情况进行监控;获取在生产环境集群中使用k台运行代价最小的虚拟机中的任意一台作为虚拟资源时m个map任务的槽平均处理速度和r个reduce任务的槽平均处理速度;根据保存的运行代价最小的虚拟机的性能特征、MapSlotSpeed、ReduceSlotSpeed和用户对所提交作业的期望完成时间,重新确定在生产环境集群中运行用户所提交作业需要运行代价最小的虚拟机的数量knew;若knew和k不等,则将生产环境集群中运行代价最小的虚拟机调整至knew台。本发明使得用户所提交作业能够按时按需完成,提高了用户使用虚拟机的性价比。

扫描访问手机版

国家部委

科技与知识产权

友情链接

关于我们

电话：0516-83896168 传真：0516-83896168 邮箱：jshtec@163.com 网址：www.jshtec.com 地址：江苏徐州市金山东路中国矿业大学国家大学科技园科技大厦