ash2023

vip
幣齡 4.4 年
最高等級 0
用戶暫無簡介
Darkbloom計畫:將閒置的Mac轉變為AI基礎設施
每次使用AI工具時,請求都會經過多層基礎設施,才到達實際執行工作的硬體。
流程通常穿越不同層級的資料中心、冷卻系統、GPU硬體和層層利潤 → 全部都包含在你支付的費用中。
@eigenlabs團隊稱之為推理稅。
Darkbloom是他們為解決此問題的研究計畫。
前提:已存在超過1億台Apple Silicon Mac,已付費,且大部分時間閒置。若將這些計算資源組織成一個可用的推理網絡,具有真正的隱私保障和更佳的經濟性,會是怎樣?
- - - - -
為何選擇Apple Silicon
Apple Silicon不僅數量充足,而且在推理方面在技術上也非常適合:
• 統一記憶體:CPU與GPU共享同一池,消除獨立GPU瓶頸
• 模型效率:Apple Silicon只處理每個請求實際需要的模型部分,而非整個模型 → 較大模型運行得更快、更便宜
• 能源效率:約30W即可運行一個60B模型,而資料中心GPU則需多倍電力
• 對Mac用戶的邊際成本:主要是電力,硬體已經購買
- - - - -
困難之處:建立可信任
一個基本問題是:如果提示在陌生人的Mac上運行,什麼能阻止他們讀取?
Darkbloom的解答是讓竊聽在架構上不可能,而非僅在合約上禁止:
• 調試器:在核心層阻擋
• 記憶體讀取:通過Hardened Runtime拒絕
EIGEN1.89%
查看原文
post-image
post-image
  • 打賞
  • 回覆
  • 1
  • 分享
你說錢買不到快樂?
對不起,來日本吧
查看原文
post-image
post-image
post-image
post-image
  • 打賞
  • 回覆
  • 轉發
  • 分享
零售商模仿塑料色卡和紙板,你還在推銷你的代理幣嗎?
查看原文
  • 打賞
  • 回覆
  • 轉發
  • 分享
清晰法案這個清晰法案那個
不如登出來,獲得一些射後清晰感
查看原文
  • 打賞
  • 回覆
  • 轉發
  • 分享
每個人似乎都已退出加密貨幣,因為他們是
查看原文
post-image
  • 打賞
  • 1
  • 轉發
  • 分享
NexaCrypto :
到月球 🌕
🇲🇾 馬來西亞人在想說“我確定”時:
Level 1:確認(普通)
Level 2:conlanfirm(非常確定)
Level 3:conlan7firm(他媽的確定)
Level 4:con9lan7firm(他媽的確定)
Level 5:con9lan7hai9firm(核子他媽的確定 @#$%)
他們在中間加入廣東話的屌 + 屄 + 數字,以達到最大力量等級
還有什麼是馬來西亞文化的巔峰?
查看原文
  • 打賞
  • 回覆
  • 轉發
  • 分享
我們現在實際上必須用腦子來工作
查看原文
post-image
  • 打賞
  • 回覆
  • 轉發
  • 分享
字面上的一切遊戲化
參與度普遍下降 + 人們到處被多巴胺/資訊轟炸
隨著公司必須為越來越少的注意力份額而戰,遊戲似乎成為一種便宜的方式來吸引人們回到他們的平台
查看原文
post-image
post-image
post-image
post-image
  • 打賞
  • 回覆
  • 轉發
  • 分享
“是的兄弟,我最近空閒時喜歡編程,並且在使用肽類”
查看原文
post-image
  • 打賞
  • 回覆
  • 轉發
  • 分享
為什麼在草莓交換(Strawberry Swap)時代,DeFi 感覺更安全,當時我只需安靜地賺取 6,769% 的年化收益率(APY)? 😭
查看原文
  • 打賞
  • 回覆
  • 轉發
  • 分享
今年的座右銘:「我沒有一覺醒來就是失敗者」
查看原文
  • 打賞
  • 回覆
  • 轉發
  • 分享
歷史不會重演,但它會押韻
查看原文
post-image
  • 打賞
  • 回覆
  • 轉發
  • 分享
當一個失敗的鞋類品牌股票在轉型為人工智慧後飆升420%時
查看原文
post-image
  • 打賞
  • 1
  • 轉發
  • 分享
aldirham74:
HODL 緊 💪
下一個星星來了
說實話,不需要天才也能看出來
查看原文
  • 打賞
  • 回覆
  • 轉發
  • 分享
加密貨幣的導航是殘酷的
每週,我們都會得知區塊鏈、消費者應用程式或去中心化金融應用程式的又一個漏洞。
然後我們就會想知道為什麼一般人不會接觸加密貨幣。為什麼他們會呢?
查看原文
post-image
  • 打賞
  • 回覆
  • 轉發
  • 分享