BTC $84,580.22 -2.07%
ETH $2,680.49 -2.50%
BNB $767.51 -1.17%
XRP $1.48 -3.71%
SOL $119.27 -2.15%
TRX $0.3358 +0.45%
DOGE $0.0927 -4.41%
ADA $0.2442 -4.97%
BCH $311.07 -1.72%
LINK $13.93 -3.16%
HYPE $88.00 -2.49%
AAVE $180.64 -2.40%
SUI $1.18 -0.12%
XLM $0.2140 -5.27%
ZEC $1,319.09 -5.04%
AAPL $333.52 +0.82%
AMZN $252.00 +0.96%
GOOGL $343.53 +0.74%
MSFT $517.62 +0.30%
META $728.06 -0.24%
NVDA $234.49 +0.27%
TSLA $370.67 +3.84%
SNDK $1,716.38 -4.73%
INTC $118.09 -3.58%
SPCX $159.03 +6.37%
MU $1,070.44 -3.86%
AMD $632.66 +1.20%
BTC $84,580.22 -2.07%
ETH $2,680.49 -2.50%
BNB $767.51 -1.17%
XRP $1.48 -3.71%
SOL $119.27 -2.15%
TRX $0.3358 +0.45%
DOGE $0.0927 -4.41%
ADA $0.2442 -4.97%
BCH $311.07 -1.72%
LINK $13.93 -3.16%
HYPE $88.00 -2.49%
AAVE $180.64 -2.40%
SUI $1.18 -0.12%
XLM $0.2140 -5.27%
ZEC $1,319.09 -5.04%
AAPL $333.52 +0.82%
AMZN $252.00 +0.96%
GOOGL $343.53 +0.74%
MSFT $517.62 +0.30%
META $728.06 -0.24%
NVDA $234.49 +0.27%
TSLA $370.67 +3.84%
SNDK $1,716.38 -4.73%
INTC $118.09 -3.58%
SPCX $159.03 +6.37%
MU $1,070.44 -3.86%
AMD $632.66 +1.20%

Vitalik 分享本地私有 LLM 方案,強調隱私與安全優先

2026-04-02 14:53:42

ChainCatcher 消息,Vitalik Buterin 發文分享其截至 2026 年 4 月的本地化、私有化 LLM 部署方案,核心目標是將隱私、安全與自主可控作為前提,儘量減少遠程模型及外部服務接觸個人數據的機會,並透過本地推理、文件本地存儲及沙箱隔離等方式降低數據洩露、模型越獄及惡意內容利用風險。

在硬體方面,其測試了搭載 NVIDIA 5090 GPU 的筆記本、AMD Ryzen AI Max Pro 128 GB 統一記憶體設備及 DGX Spark 等方案,並使用 Qwen3.5 35B 與 122B 模型進行本地推理。

其中,5090 筆記本在 35B 模型下可達約 90 tokens/s,AMD 方案約 51 tokens/s,DGX Spark 約 60 tokens/s。Vitalik 表示,其更傾向於基於高性能筆記本構建本地 AI 環境,同時使用 llama-server、llama-swap 及 NixOS 等工具搭建整體工作流。

app_icon
ChainCatcher 與創新者共建Web3世界