跳到正文
原文
Bloter· [email protected] (강준혁 기자)·· 18 小时前AI 评分22

韩企 Innogrid 将 GPU 推理与成本管理整合为 AI 平台

이노그리드, GPU 추론·비용관리 'AI 플랫폼'으로 통합 [현장+]

AI 导读

韩国 Innogrid 正把 GPU、NPU 等异构加速器纳入统一资源池,并在顶层控制平面统一观测资源状态与成本、下发调度策略。其已推出的 AICubeit 平台可部署在客户数据中心或封闭网内,管理 AI 模型的训练、部署与运营,面向难以将数据外传的企业和机构。公司还计划将 GPU 管理平台与 AI PaaS 打通,使推理变慢时能定位是 GPU 资源争用、模型数据变更还是资源分配不足。

来源:Bloter · bloter.net