DeepSeek的負擔能力是一個神話：革命性的AI實際上花費了16億美元
Feb 19,25(2 前個月)
DeepSeek的開創性AI模型挑戰了行業巨頭，盡管聲稱培訓成本最低。本文研究了DeepSeek的創新技術和大量投資，揭示了比最初提出的更複雜的情況。
DeepSeek的AI吹噓甚至使創作者感到驚訝的功能已成為強大的競爭對手，尤其影響了NVIDIA的股價。它的成功源於建築創新和培訓方法的獨特組合。
圖像：ensigame.com
關鍵技術進步包括：
- 多語預測（MTP)：同時預測多個單詞，提高準確性和效率。
- 專家（MOE)的混合物：利用256個神經網絡，每個令牌激活8個，加速培訓並提高性能。
- 多頭潛在注意力（MLA)：反複提取關鍵細節，最大程度地減少信息丟失並增強細微的理解。
DeepSeek最初僅使用2048 GPU的DeepSeek V3的培訓成本非常低600萬美元。然而，通過半分析的進一步研究顯示，基礎設施明顯更大，包括在多個數據中心分布的大約50,000個NVIDIA HOPPER GPU（包括H800，H100和H20單位)。這意味著服務器總投資約為16億美元，運營費用估計為9.44億美元。
圖像：ensigame.com
中國對衝基金的高飛行員的子公司DeepSeek受益於擁有其數據中心，促進控製和快速創新。它的自我資助性質有助於敏捷性和迅速的決策。該公司吸引了頂尖人才，一些研究人員每年收入超過130萬美元，主要來自中國大學。
圖像：ensigame.com
因此，這筆600萬美元的數字僅代表培訓前的GPU成本，不包括研究，改進，數據處理和基礎架構。 DeepSeek對AI開發的總投資超過5億美元。它的精益結構允許有效的創新，與更大，更官僚的公司形成鮮明對比。
圖像：ensigame.com
盡管DeepSeek的成功凸顯了資金龐大的獨立AI公司的潛力，但最初的“預算友好”敘述具有誤導性。它的競爭優勢源於大量投資，技術突破和高技能的團隊。但是，即使有了這些巨大的支出，DeepSeek的成本仍然大大降低了競爭對手。例如，與Chatgpt4的1億美元相比，其R1型號的價格為500萬美元。
發現更多
-
Botola與球迷的終極同伴Botola一起體驗摩洛哥Botola足球錦標賽的興奮。觀看現場比賽，檢查結果和日程安排，保持摩洛哥足球新聞的最新信息，並在一個地方享受獨家視頻內容。使用此應用程序，您可以沉浸在 -
8.8 Shopee Live Maraton革命性數字錢包Shopee通過消除對傳統信用卡或借記卡的需求來改變您購物的方式和購買方式。 Shopee APK擁有Google Play商店的超過1億個安裝，為在線Transa提供了一個安全且用戶友好的平台 -
Pixel Animator:GIF MakerPixel Animator：GIF Maker是一個很棒的工具，可以使用戶能夠製作令人驚嘆的像素藝術並輕鬆製作精靈。最新更新引入了兩種強大的像素藝術工具，增強了像素藝術和GIF的創建。形狀工具使您可以選擇各種形狀和輕鬆 -
Kyosk AppKyosk應用程序正在通過其創新平台改變非洲的零售景觀。通過將非正式零售商（例如自助亭擁有者）與快速移動消費品的供應商聯繫起來，京都消除了中介機構並簡化了供應鏈。零售商現在可以訂購DIV -
Kalkulator Masa Subur介紹排卵估算器加上應用程序，這是一對夫妻的遊戲改變者，以迅速受孕，或者那些只是希望建立家庭的人！這個科學支持的應用程序是您查明肥沃窗口的最終工具。只需輸入您的HPHT數據（上次月經的第一天） -
ProVPN - Secure Internet Proxy引入ProVPN-在Android設備上瀏覽安全和私人互聯網的最終解決方案。憑藉100％的免費訪問，無限的帶寬和閃電般的速度，ProvPN脫穎而出，成為Premier VPN應用程序。您可以從各種服務器位置中進行選擇，包括
熱門下載
