今天看啥  ›  专栏  ›  OSC开源社区

华为发布Volcano开源项目,让AI算力像火山一样迸发

OSC开源社区  · 公众号  · 程序员  · 2019-07-03 18:00
Volcano 是基于 Kubernetes 的批处理系统,源自于华为云 AI 容器。Volcano 方便 AI、大数据、基因、渲染等诸多行业通用计算框架接入,提供高性能任务调度引擎,高性能异构芯片管理,高性能任务运行管理等能力。整体架构Volcano 提供一整套目前 Kubernetes 在批量和弹性工作负载处理中缺失的机制,包括:机器学习/深度学习生物信息学/基因组学其他“大数据”应用这些类型的应用程序通常运行在 Volcano 集成的 Tensorflow,Spark,PyTorch,MPI 等通用域框架上。Volcano 为 Kubernetes 添加的机制和功能的一些例子:作业管理的扩展和改进,如:Multi-pod 作业生命周期管理扩展,包括挂起、恢复和重启提升错误处理作业的索引任务依赖调度扩展联合调度公平调度队列调度抢先和收回预订和回填 ………………………………

原文地址:访问原文地址
快照地址: 访问文章快照