草庐IT

UnexpectedAdmissionError

全部标签

k8s集群部分使用gpu资源的pod出现UnexpectedAdmissionError问题

记录一次排查UnexpectedAdmissionError问题的过程1.问题环境3master节点+N个GPU节点kubelet版本:v1.19.4kubernetes版本:v1.19.4生产环境K8S集群,莫名其妙的出现大量UnexpectedAdmissionError状态的Pod,导致部分任务执行异常,出现这种情况时,节点的资源是足以支持运行一个GPUPod的。报的错误:Allocatefailedduetorequestednumberofdevicesunavailablefornvidia.com/gpu.Requested:1,Available:0,whichisunexpe