在生成式 AI(GenAI)的浪潮下,檢索增強生成(RAG)已成為企業導入 AI 的標準配備。然而,多數開發者在實作時,往往會陷入一個慣性思維:認為只要將資料丟進向量資料庫,再透過餘弦相似度(Cosine Similarity)進行計算,就能獲得精確的檢索結果。近期科技評論指出,這種「餘弦至上」的開發直覺,反而是讓許多企業級 RAG 應用在效能上卡關的隱形殺手。

過去一年,RAG 的開發重點多集中在如何串接大型語言模型,而檢索(Retrieval)這一環節常被簡化為純粹的數學夾角計算。餘弦相似度之所以流行,是因為它在處理高維度向量時計算簡便且邏輯直觀。但在現實的企業環境中,文件結構極其複雜,包含大量表格、層級關係以及高度專業的術語。單純依賴向量空間中的幾何距離,往往無法捕捉到真正的語義關聯,甚至可能因為向量化過程中的資訊損失,導致模型檢索出看似相關、實則無用的內容。

這種技術取向對產業產生的直接影響,在於 RAG 系統的品質天花板過低。當檢索出的參考內容不夠精確,後端模型即便再強大,也難以產出正確答案,甚至會放大 AI 的幻覺問題。對於金融、法律或高科技製造等對精準度有極高要求的領域,傳統的單一向量檢索模式已顯露疲態。目前的產業趨勢正快速轉向「混合檢索」(Hybrid Search),即結合傳統的 BM25 關鍵字搜尋與向量檢索,並加入重排序(Re-ranking)機制,這意味著開發者的重心必須從單純的演算法套用,轉向對資料特徵的深度理解。

這個發展之所以值得台灣技術決策者關注,是因為 RAG 已經進入了從「實驗室展示」到「實際落地」的深水區。檢索品質直接決定了 AI 應用的商業價值,如果我們繼續將 RAG 視為一種黑盒子式的向量運算,而非一門精細的資訊檢索科學,就難以解決企業內部的實際痛點。重新審視檢索架構、不再迷信單一的數學指標,是讓 AI 真正轉化為核心生產力的關鍵一步。唯有透過多維度的檢索策略,才能在雜亂的企業資料中,精準過濾出具備商業價值的正確知識。