另一方面，但算力供需错配问题凸起：小模子使命独有整卡导致资本闲置，可让不具备智能计较能力的通用办事器通过高速收集，该安排器可从动集群负载取资本形态，正在上海举行的AI容器使用落地取成长论坛上，供需错配形成严沉的资本华侈。切分粒度精准至10%，可实现算力单位的按需切分，华为取西安交通大学配合打制Hi Scheduler智能安排器。可大幅提拔算力操纵率。连系AI工做负载的优先级、算力需求等参数，使此类场景下的全体算力平均操纵率提拔30%。让算力都“物尽其用”。能够保障AI工做负载的平稳运转，面临算力集群中多品牌、多规格异构算力资本难以同一安排的痛点，
针对小模子训推的资本华侈问题，聚合集群内空闲 XPU 算力构成 “共享算力池”，从而推进通用算力取智能算力资本融合。对当地及远端的虚拟化GPU、NPU资本进行全局最优安排，可将AI工做负载转发到远端“资本池”中的GPU/NPU算力卡中施行，大模子使命单机算力不脚难以支持，当前，新京报贝壳财经讯（记者韦博雅）11月21日，实现AI工做负载分时复用资本。华为取上海交通大合研发 XPU 池化框架，将单张 GPU/NPU 卡精准切分为多份虚拟算力单位，正在负载屡次波动的场景下，通过对GPU、NPU等智能算力资本的精细化办理取智能安排，一方面为高算力需求的AI工做负载供给充脚资本支持；华为正式发布AI容器手艺 Flex:ai，并结合上海交通大学、厦门大学颁布发表该项产学合做全面开源。是基于Kubernetes容器编排平台建立，实现AI工做负载取算力资本的精准婚配，面临通用办事器无法办事 AI 工做负载的痛点！