Problem
遊戲 UI 開發常需將設計師產出的靜態模型(Mockups)轉譯為引擎中的互動元件。然而,現有的「截圖轉程式碼」工具通常難以處理遊戲介面中常見的不規則幾何圖形,以及層次深厚的複雜視覺階層。
Method
研究團隊開發了名為 SPRITE 的工作流,結合視覺語言模型(VLMs)與結構化的 YAML 中間表示法。此架構能顯式擷取複雜的容器關係與非矩形佈局,精準地將靜態截圖轉化為可在引擎中直接編輯的資產。
Results
透過遊戲 UI 基準測試與專業開發者的專家評鑑,證實 SPRITE 能有效自動化繁瑣的編碼工作,解決複雜的嵌套(Nesting)問題,並顯著提升重建精確度與原型製作的開發效率。
Significance
此研究成功彌合了藝術設計與技術實作之間的鴻溝。透過 SPRITE 促成的引擎內快速迭代,開發者能更靈活地優化介面體驗,為遊戲開發流程中的 UI 自動化提供了極具價值的解決方案。