首页 > 编程知识 正文

分布式计算框架,简述大数据处理的一般性框架

时间:2023-05-03 13:55:58 阅读:165602 作者:3558

之前写的本文隶属于专栏《100个问题搞定大数据理论体系》。 这个专栏是笔者的原创。 引用请注明出处。 不足和错误请在评论区域指出。 谢谢你。

本专栏的目录结构和文献引用请参考100个问题解决大数据理论体系

答案1 .子系统有效调度任务之间的资源隔离,减少争夺。 在任务分配调度时结合资源分配,各任务分配合理的资源,充分利用系统资源,减少资源利用不足的问题。 资源调度与优先级相关联,优先级高的可以分配更多的资源。 2 .提高全系统资源利用率各子系统在不同时期对资源的需求可能不同,从而平滑系统资源的利用。 3 .支持资源动态调整划分,提高系统可扩展性子系统对资源的规划难以一次性确定,通过资源调度管理系统支持动态扩展,提高系统可扩展性

版权声明:该文观点仅代表作者本人。处理文章:请发送邮件至 三1五14八八95#扣扣.com 举报,一经查实,本站将立刻删除。