概念解說 · 2026-10-26

免費攞:WhatsApp 催約・追覆・續會 30 條粵語模板

直接 copy 落 WhatsApp 用,留 email 即寄。唔會賣你資料。

免費下載 →
書桌變超算
本地跑大模型NVIDIA DGX Spark Review

想本地跑 AI 但怕當機?DGX Spark 用統一記憶體解決痛點,將數據中心級算力搬返書桌。

重點摘要 · Key Takeaways

  • 資料完全留在本地,符合私隱要求
  • 無按月訂閱費,硬件回本後近乎免費
  • 離線可用,唔受網絡穩定性影響
  • 適合處理敏感數據或高頻重複任務

相關:工具包 · 更多文章 · 免費清單

解決算力與噪音痛點

好多人都想有專業級算力,但唔想養一部噪音似飛機嘅伺服器。

NVIDIA DGX Spark 將數據中心級算力打縮成細細個盒子。

唔使機房亦唔使複雜佈線,等於將超算直接放喺你書桌上。

核心規格與頻寬

佢採用 GB10 晶片配 128GB 統一記憶體,令 CPU 同 GPU 共用同一堆空間。

頻寬達到每秒 273GB,好似一條好闊嘅高速公路,數據行車唔會塞車。

內置 20 核 ARM CPU 同 6144 個 CUDA 核心,FP4 精度算力最高達 1 PFLOPS。

模型參數支援上限

官方指單機支援最高 2000 億參數,兩部機串聯可跑 4050 億參數。

好似有個超大型書架,以前要分幾個書架先放得下,而家一個就搞掂。

不過要留意,雖然賽得入唔代表跑得飛快,大模型生成速度會受頻寬限制。

實測速度與瓶頸

根據 LMSYS 測試,跑 GPT-OSS 20B 模型約每秒 70 個 Token。

跑 GPT-OSS 120B 模型約每秒 50 個 Token,雖然唔算極快但已經好順暢。

主要瓶頸在於記憶體頻寬,表現唔似獨立顯示卡咁誇張但足夠日常開發。

安裝使用與注意事項

使用 240W 外置火牛,接好網絡線後可透過 SSH 或官方工具設定系統。

通常本地開啟端口(如 11434)提供 API 服務,用瀏覽器或指令行即可互動。

機身僅 1.2 公斤但散熱要好,千祈唔好遮擋通風口,並要配合軟件優化。

常見問題

DGX Spark 適合邊類人?

適合做 AI 研究或想開發私人助理嘅開發者,對於本地跑大模型已經夠用。

跑大模型速度會好慢嗎?

速度主要受記憶體頻寬限制,雖唔似遊戲卡咁快,但對於開發測試已經算順暢。

本地AI會唔會好慢?

對於日常文書、代碼生成同簡單對話,現代家用硬件嘅速度完全足夠,甚至因為無網絡延遲而感覺更順暢。

設置本地模型好難嗎?

以前需要寫程式,現在有唔少開箱即用嘅工具(如LM Studio、Ollama),幾分鐘內就可以開始運行模型。

我部機跑唔到點算?

可以嘗試量化模型(Quantized Models),佢哊體積細、記憶體需求低,喺普通電腦上都能跑動。

想睇實測?

免費清單每週更新本地 AI 工具對比,唔賣你 email。

Free download · 免費清單

免費 30 條粵語 WhatsApp 模板30 free Cantonese WhatsApp templates

留低 email,即收模板清單同新片通知。Leave your email for the free template list and new-video notices.