混合運算工作流程
在你擁有的運算資源上執行代理、沙盒、推論與任務佇列,之後在需要更多容量時再擴展到 Beam。
Beam 是隨需 AI 運算平台,支援 GPU/CPU 的沙盒、任務佇列、自訂模型推論與訓練;結合無伺服器執行、自動擴展、快照與常駐工作負載。
Beam 是隨需 AI 運算平台,支援 GPU 或 CPU 資源上的沙盒、任務佇列、自訂模型推論與訓練工作負載。此產品定位於需要快速啟動時間、自動擴展,以及在不自行管理整套基礎架構堆疊的情況下,更簡單地推出 AI 應用程式的開發者。
此平台結合無伺服器執行與常駐工作負載選項,因此應用程式可以在請求後自動縮減,或在低延遲很重要時持續執行。Beam 也支援自帶雲端、連接多個雲端帳戶,並從單一執行環境跨這些帳戶執行工作負載。
在你擁有的運算資源上執行代理、沙盒、推論與任務佇列,之後在需要更多容量時再擴展到 Beam。
透過記憶體快照與檢查點還原快速啟動 GPU 容器,旨在縮短 AI 工作負載的冷啟動時間。
即時在雲端與區域之間路由工作負載,並在 30+ 個區域進行分散式執行,以降低延遲。
將執行中的沙盒拍攝快照、分支,並還原成多個隔離執行,搭配串流輸出,適合平行實驗或代理。
建立具備重試、回呼、排程工作與依佇列深度或請求量自動擴展的持久佇列。
透過平台儀表板與內建監控工具追蹤請求量、錯誤、延遲與資源使用率。
使用自訂映像與自動擴展,在 GPU 或 CPU 上建置代管模型端點,以處理變動的請求量。
在具備持久儲存、快照與受控執行的隔離沙盒中,執行由 LLM 生成或使用者提交的程式碼。
透過重試、回呼與排程工作,對媒體、音訊或其他批次工作負載進行排隊與處理。
在需要可向上擴展、適合長時間運作工作的環境時,以 GPU 支援的工作來訓練或微調模型。
部署需要快速啟動與受管理執行環境的 Streamlit、Gradio 或筆記型電腦式前端。
Beam 可按需執行沙盒、推論與任務佇列。預設支援無伺服器執行,且定價頁也說明,當低延遲工作負載需要時,你可以讓應用程式 24/7 持續執行。
定價頁指出儲存空間免費包含在內,而常見問題也提到使用者不會因冷啟動而被收費。Beam 也支援從第三方登錄檔匯入既有的 Docker 映像。
Beam 提供隔離的非 root 容器。其常見問題也提到一項完全在你自有環境中執行的自架產品,因此該部署選項下資料不會離開你的 VPC。
Beam 為無伺服器資源、沙盒與 GPU 提供按用量計費,也提供團隊用量方案。定價頁顯示 Developer 方案、Team 方案,以及需聯絡業務的 Growth 方案。