周宜波

字节跳动火山引擎 - AI基础设施架构师

AI Agent专家 | GPU池化 | LLM推理优化

技术专长

AI Agent

GPU池化

推理优化

高性能虚拟化

大模型部署

容器化AI

分布式推理

模型压缩

AI Agent架构设计
大模型推理优化
GPU资源池化
分布式训练系统

推理加速技术
模型压缩优化
内存管理策略
计算图优化

云原生AI平台
弹性GPU服务
高性能计算集群
AI容器编排

articles

序言首先需要说明的是这并不是一项很新的技术，因为早在2017年intel就对外expose了相关的spec。但是直到今天仍然还是停留在spec层面，不过好在随着intel SPR平台的推出intel也终于下定决心要enable这个feature了(其主 …

SIOV

获取最新的AI基础设施技术文章和深度解析