直接前往文章

Feishu Hong Kong / 資源

飛書AI成本優化實踐:智能體調用量暴增背後的工程架構法則

智能體請求暴增與成本失控的矛盾

過去半年,飛書生態中第三方 AI 助手的調用量飆升了 9.4 倍。按理說,月底的 Token 帳單該令人倒抽一口涼氣,但實際上它僅微升 3%。這並非因為我們拿到了什麼神仙折扣,而是將底層工程架構徹底翻過來重做了一遍。

現時大家已習慣以智能工作 Agent 處理飛書訊息、撰寫文件、執行審批流程。業務部門視為理所當然,讓 AI 辦公工具順手總結會議內容、分析多維表格數據;但 IT 團隊盯著監控大屏,看到的卻是互動頻次呈指數級飆升所引爆的算力黑洞。一邊是業務追求價值,一邊是財務卡緊預算,這條成本紅線就這麼牢牢懸在工程團隊頭頂。

一見帳單超標,許多團隊的本能反應就是兩招:要麼限流,要麼降級。削減調用配額,或把大型模型換成較便宜的小型模型。這其實是典型的因噎廢食。限流等同綁住業務創新的手腳;降級更糟,模型幻覺滿天飛,智能體直接退化成僵化的規則引擎。我們不想死磕「如何壓低單價」,我們要幹的是「消滅浪費」。

說白了,得把 AI 開支當成一個可度量、可拆解的工程問題,靠系統級別的優化,擠乾那些毫無價值的 Token 水分。想做到調用量狂飆而成本不漲,得先看透帳單背後的數學邏輯。接下來,我們便把 AI 辦公對話的成本公式拆開揉碎,逐一剖析。

拆解 AI 辦公對話的成本公式

想消滅浪費,得先算清浪費在哪裡。我們把飛書生態中原本一筆糊塗帳的「月度 AI 帳單」,拆解成一個包含五個乘數的數學模型:

總成本 = 活躍用戶數 × 人均對話次數 × 單輪 Token 消耗 × 平均互動輪次 × 模型單價

這個公式一出,財務眼中那個「黑盒」,就變成了工程師眼中的「白盒」。你看前兩個乘數:活躍用戶數與人均對話次數。這兩者本質上是業務價值指標。員工在飛書群組、文件、日曆中頻繁呼叫智能工作 Agent,正說明 AI 已真正融入日常工作。這兩項數據不僅不能限制,還得千方百計鼓勵其增長——這可是實打實的業務增量。

真正的成本黑洞,藏於後三個乘數之中:單輪 Token 消耗、平均互動輪次,以及模型單價。

模型單價由市場決定,我們議價空間不大。但單輪上下文體積與互動輪次,完全取決於工程架構設計。不少團隊在接入 AI 辦公工具時,習慣把全部業務數據一股腦塞進提示詞(prompt),或任由模型在「試錯—修正」的死循環中空轉。開銷失控的元兇,就在這裡。

帳算明白了,優化目標也就清晰了:放任前兩項業務指標狂飆,同時運用架構手段,將後三項系統開銷壓榨至極限。如此一來,令人頭痛的帳單焦慮,便轉化為幾行可落地執行的程式碼優化。

壓縮單次請求體積與上下文膨脹

公式拆解完畢,第一刀自然砍向最容易失控的變量:單輪 Token 消耗。

在對接飛書文件或多維表格時,最偷懶也最常見的工程反模式就是「全量注入」——不論三七二十一,硬將整份文件或整張表格數據塞進提示詞。這不僅令計費基數原地起飛,更會嚴重稀釋模型的注意力。做上下文工程,真不是比誰吞吐的數據多,而是比誰能精準控制資訊的信噪比。

因此,我們採用了動態裁剪與按需檢索機制。當智能工作 Agent 讀取飛書文件時,系統不再傻乎乎地發送全文本,而是借助外部向量檢索服務,結合飛書文件與多維表格的開放數據接口,實現按需提取高相關性文本片段;針對多維表格,僅同步表結構(Schema)及代表性樣本,而非全量數據。憑藉這種「按需投餵」策略,單次請求的平均 Token 體積硬生生壓縮了 68%。

多輪對話中的歷史膨脹,是另一個隱性黑洞。聊得越深入,早期冗餘指令就越佔用配額。為此,我們打造了滑動視窗加結構化摘要的雙重機制:近期幾輪對話保留原文,遠期歷史則交由輕量級模型壓縮為「事實狀態機」。只保留關鍵實體、當前意圖與已確認參數,所有車輪話與過程性廢話一律剔除。

此外,我們於調用飛書 API 的前置服務層實現意圖識別與結果快取,對高頻語義等價請求(例如「查本周日曆」)複用已計算結果,跳過重複調用與模型推理。

擠乾毫無價值的 Token 水分,說白了就是把資訊密度逼到極致。不過,當單次請求體積已被壓榨至物理極限,下一根要啃的硬骨頭,便是如何減少模型在複雜業務邏輯中的空轉輪次。

優化互動輪次與業務邏輯封裝

當智能工作 Agent 真正紮進業務深水區,光靠壓縮單次請求體積已無法遏止成本攀升。真正的帳單黑洞,其實潛伏於多輪互動中的「思考」與「試錯」環節。

以安排一場跨部門視像會議為例。若讓模型自行編排,Agent 得先透過飛書日曆查詢空檔,再從組織架構中核對人員,最後才發起會議建立。這種「規劃—調用—觀察—再規劃」的鏈式反應,隨便就能衍生出 3 至 5 輪互動。每輪都在燒 Token,且極易因參數解析錯誤觸發重試。這不叫智能,這叫算力原地打轉。

我們的原則是:絕不讓大型模型去幹流程編排的苦力活。因此,我們於自建服務層對接飛書開放 API,將跨模組操作(如查日曆+拉人員+發會議)聚合成單次調用,避免 Agent 多輪輪詢。

具體怎麼做?把前述跨部門會議場景,直接抽象為一個高階工具(Tool)。Agent 只需輸出一次意圖,網關便於底層並行完成日曆查詢、人員校驗與會議建立,最後將聚合好的結果回傳給模型。憑藉這種工程封裝,複雜場景的平均互動輪次由 4.2 輪斷崖式降至 1 輪,推理開銷亦跟著銳減 68%。

以工程封裝取代模型輪詢,以確定性的程式碼收斂概率性的思考。降低 AI 辦公工具運行成本的終極法則,從來不是逼模型變得更聰明,而是從架構層面直接剝奪它「犯錯」的機會。

引入業務事實錨點與全域架構管控

互動輪次經工程封裝壓至最低後,剩餘的 Token 浪費,多半源於模型在業務上下文中「盲人摸象」。為解決此問題,我們基於飛書開放 API 同步文件與多維表格數據,在自建系統中構建結構化業務上下文索引,為第三方 AI 助手提供精準的事實切片。

傳統的檢索增強生成(RAG)常因召回不準,迫使模型反覆重試。但我們透過飛書開放能力對接企業知識庫,把散落各處的審批記錄、項目進度與會議決議,揉合成結構化的上下文圖譜。Agent 執行任務時,直接從圖譜中提取精準的事實切片,無須再到海量數據中瞎搜。這項架構轉變,直接令單次請求的無效檢索輪次歸零,因幻覺引發的重試開銷亦下降 81%。

回頭看看這整條優化鏈路:從上下文體積的極限壓縮,到互動輪次的工程封裝,再到業務事實的全域錨定。這不是零敲碎打的補丁,而是一套可直接搬移的方法論。我們把 AI 辦公工具的運行帳單拆成五個相乘的成本因子,然後逐一動刀。

在飛書開放生態的底座之上,無論是自研應用或第三方 AI 助手,皆可透過標準化接口接入這套管控架構。調用量暴增 9.4 倍而總成本幾乎未漲,靠的不是運氣,也不是單純的算力降價,而是我們緊盯每一個 Token 的流向。

從互動式工作流邁向全託管智能體,成本失控的焦慮遲早會消散。這玩意兒從來不是什麼不可捉摸的演算法黑盒,而是一個可測量、可拆解、可解決的工程挑戰。擠乾毫無價值的 Token 浪費,讓算力真正轉化為生產力,這就是我們在 AI 時代交出的工程答卷。