×
In

研究顧問機構Gartner於今日(30日)發布最新警告,指出儘管人工智慧(AI)推論代幣的單位價格預期將大幅下滑,企業在AI方面的總體支出負擔卻可能不減反增。這項看似矛盾的趨勢,主要源於AI應用模式的根本性轉變,特別是AI代理的普及,正重塑企業的成本結構與未來競爭力。

AI推論成本的黃金交叉:效率與支出的雙面刃

說真的,聽到AI代幣價格會大降,許多企業主或許會鬆一口氣,覺得未來AI導入的門檻將會降低。Gartner的預測確實令人振奮:到2030年,一個擁有高達一兆參數的大型語言模型(LLM)的推論費用,相較於2025年將銳減超過九成。不只如此,相同規模模型的運算效率,也預計能提高驚人的百倍。

這項顯著的成本效益提升,並非憑空而來。Gartner高級總監分析師Will Sommer點出,背後有幾項關鍵驅動力在發酵。他觀察到:

  • 半導體與基礎設施效率的持續精進
  • 模型設計上的創新突破
  • 晶片利用率的大幅提高
  • 推論專用半導體的市場擴展
  • 邊緣裝置應用的日益普及

這些技術進步確實讓AI推論的單位成本不斷下探,但有趣的是,這並不保證企業的AI總體支出會同步下降,反而可能出現一個「黃金交叉」的現象,讓總體負擔不減反增。

AI代理崛起:推升總體支出的關鍵推手

為什麼AI推論代幣價格下降,企業總體AI支出卻可能增加?Gartner的洞察指出,關鍵在於AI代理(AI agent)的普及正在徹底改變企業使用AI的模式。過去,我們可能只用AI來處理單一任務,但現在AI代理的出現,讓每項任務所需的AI代幣使用量暴增,據估計,比過去增加了五到三十倍之多。這意味著,即使單一代幣的成本降低了,但由於使用量的爆炸式成長,企業的總體推論費用反而水漲船高。

分析師Will Sommer進一步解釋:「基本的AI功能正朝向幾乎零成本的方向發展,但用於進階推論(advanced reasoning)的運算資源和系統仍然有限。」他警告企業,切勿將基礎架構上的效率不足,誤解為通用代幣價格下跌就代表進階推論能力已普及。如果企業只圖便宜的代幣成本,而忽略了系統架構的缺陷,那麼在未來代理導向的AI擴展階段,恐怕將面臨發展受限的困境。

Gartner高級總監分析師Will Sommer強調:「單一AI代幣單位價格的下跌,並不直接等同於企業AI總成本的降低。主要原因是AI代理的普及正在重塑整體支出結構。」

智慧佈局決勝負:Gartner建議的多模型協作策略

面對這樣的挑戰,企業應如何有效管理AI成本並提升競爭力呢?Gartner給出的建議是採行「多模型協作」(multi-model orchestration)策略,而非單純依賴單一大型模型。這就好比一個智慧的分工系統,讓不同規模、不同專長的AI模型各司其職。

具體來說,企業應該建立一種分層架構。將那些重複性高、任務相對簡單的工作,交給成本較低、體積較小或特定領域的模型來處理。而那些需要高成本、高效能運算資源,且能創造高附加價值的複雜任務,則應選擇性地分配給更強大的模型。透過這種精細化的資源配置,企業才能在追求卓越性能的同時,有效控制成本,達到真正的效益最大化。

展望AI未來:企業應避免的陷阱與競爭力關鍵

從Gartner的示警中,我們可以看到AI的發展正從單純的技術突破,轉向更為複雜的策略佈局。未來的AI競爭力,將不再僅僅是誰能擁有最先進的模型,而是誰能更聰明、更有效率地運用這些模型。企業必須跳脫「代幣越便宜越好」的單純思維,轉而審視整體AI架構的韌性與策略性。

這場AI成本管理戰役,其實是一場關於智慧資源分配的競賽。那些能精準判斷任務需求、靈活調配多種AI模型的企業,將更能駕馭這股AI浪潮,確保其在數位轉型的道路上,既能享受AI帶來的創新紅利,又能避免不必要的成本泥沼。

Related Posts

In

臺灣2065年人口恐跌破1200萬!超高齡社會比預期提早來臨的三大衝擊

臺灣的少子化危機比我們想像的更嚴峻。根據國發...

Read out all
In

鴻海每股配7.2元創新高!52.9%配發率背後透露什麼產業訊號?

鴻海營運數字背後的產業密碼 根據鴻海最新財報...

Read out all