17 / 36
不知道如何問,才能得到真正有用的答案。
從工作需求,到可驗收規格。
不必先提出解法;請用一分鐘說明工作如何開始、經過哪些判斷、最後交給誰。
因此 W02 將焦點放在規格、測試與交接,而不是增加 Prompt 範本。
不知道如何問,才能得到真正有用的答案。
不知道如何整合進既有工作流程。
期待 Agent/工作自動化;但曾做工作流程自動化只有 3 筆。
執行長:「把這十份 Q3 報表合起來,明早給我三項最值得處理的問題。」
AI 已產出漂亮的一頁摘要。你現在會做什麼?
先把工作定義清楚,再討論工具選擇與自動化。
先理解資料關係,再要求 AI 找洞察。
| 資料角色 | 檔案 | 本週關注的關係 |
|---|---|---|
| 交易資料 | 台灣、美國、日本銷售;越南成本 | 欄名、語言、幣別與產品名稱不同 |
| 對照與規則 | 內部交易、SKU 主檔、匯率 | 哪些能相加、如何換算、哪些必須沖銷 |
| 管理比較 | 行銷費用、應收帳款、預算 | 洞察必須連回基準、來源與風險 |
先區分反覆執行的固定規則,與需要解釋、生成或探索的工作。
| 報表工作 | 較合適的起點 | 仍需確認 |
|---|---|---|
| 每週依相同欄位合併與換算 | 用 AI 協助寫程式;由程式反覆執行 | 欄位變更、例外與測試結果 |
| 為主管起草異常說明 | 用 AI 生成候選文字 | 數字來源、語氣與行動責任 |
| 尚不知何種因素造成差距 | 用 AI 協助提出與比較假設 | 反例、外部證據與實際驗證 |
先判斷工作是否能寫成固定規則,再選擇讓程式執行或讓 AI 參與判斷。
讓 AI 產生並測試程式碼,再由程式反覆執行固定規則。
執行快速,重複執行不耗用模型 tokens;流程變動時,須修改程式並重新測試。
讓 AI 整理資料、比較證據並提出候選判斷。
能處理語境與例外;每次使用都有成本,重要結論仍須查核與核准。
一次性的探索與反覆執行的流程,適合不同的成本結構。
解壓資料包後,第一輪只上傳美國銷售、SKU 主檔與匯率表;第二輪再加入台灣銷售與內部交易表。
| 步驟 | 檔案 | 在案例中的角色 |
|---|---|---|
| 第一輪 | 02_US_Sales_Q3.xlsx | 找美國銷售原始列與淨額 |
| 第一輪 | 06_SKU_Master_Mapping.xlsx | 以產品名稱查 Global_SKU |
| 第一輪 | 07_FX_Rates_Q3.xlsx | 選損益平均匯率 |
| 第二輪 | 01_TW_Sales_Q3.xlsx、05_Intercompany_Trade.xlsx | 查集團內部交易與沖銷 |
主管需要知道是否達標、哪裡異常,以及接下來由誰處理。
| 管理問題 | 摘要必須回答 | 最低證據 |
|---|---|---|
| 表現如何? | 實際值、目標值、差距與期間 | 來源檔、欄位、公式與匯率 |
| 哪裡異常? | 影響幅度、比較基準與不確定性 | 原始記錄、規則、勾稽狀態 |
| 接下來呢? | 建議行動、負責角色、期限與核准點 | 行動所依據的數字與限制 |
在討論異常與行動之前,先確認金額可追溯、缺值可辨識、交易範圍正確。
金額須回到銷售列、產品對照及匯率。
主檔無對照時,須保留例外。
集團內部收入須與對外收入區分。
這份工作表也是未來期中專案的最小起點。
| 欄位 | 本案約定 |
|---|---|
| 用途 | 支援第三季管理會議 |
| 輸入 | 銷售資料、產品主檔、匯率表及版本 |
| 輸出 | 可追溯明細、例外清單、候選結論 |
| 限制 | 不猜測對照;內部收入不列對外營收 |
| 例外 | 缺值或定義衝突時保留原值 |
| 驗收 | 每筆可回查來源並重算 |
比較兩次回答的來源、計算過程與例外說明。
請 AI 直接提出管理問題。
指定發票、對照規則與來源欄位。
掀開指令並執行;保留原始回答。
請根據我上傳的 Q3 報表,整理一頁給主管看的摘要,找出三個最值得處理的問題,並提出建議。
使用相同的三份檔案,要求 AI 交代來源、對照及換算。
你正在協助準備極智生活科技的 Q3 管理會議。本次只有三份已上傳檔案:02_US_Sales_Q3.xlsx、06_SKU_Master_Mapping.xlsx、07_FX_Rates_Q3.xlsx。請先列出各檔的工作表、用到的欄位、資料角色與對照鍵,不要先寫管理結論。 接著只處理 02_US_Sales_Q3.xlsx 中 Invoice_No = INV-US-2026-5004 這一列。用 US_Product_Name 將 Product_Description 對應至 Global_SKU;用 USD/TWD 的 P&L_Average_Rate 換算 Net_Sales_USD。輸出原始金額、SKU、匯率欄位、計算式與 TWD 金額,並標明來源檔、工作表與原始列識別碼。 若查不到列、SKU 或適用匯率,請保留原值,列出例外並停止推論,不要猜測。最後列出這三份檔案尚不足以證明的管理結論,以及需要哪些其他檔案或人工核准。只把可驗證的內容寫成候選結論。
INV-US-2026-5004。`INV-US-2026-5004` 的產品與金額,須經主檔對照及匯率換算。
一位查銷售列;另一位查產品主檔與匯率。共同核對 AI 的回答。
假設新增產品 `Apex Air Mini X`;現行主檔沒有這個名稱。
台灣總部對美國子公司的三筆銷售合計 TWD 7,500,000。
休息 15 分鐘;回來後檢查 AI 如何處理這兩種例外。
這筆資料是假設情境;先保留學生的預測,再掀開指令。
假設新增一筆美國銷售,Product_Description = Apex Air Mini X,Net_Sales_USD = 100。這是測試用的假設資料,原始 Excel 沒有這筆交易。請查 06_SKU_Master_Mapping.xlsx,說明能否對應 Global_SKU。 若主檔沒有對照,請保留原名稱、將 Global_SKU 標為 null,列入例外,不要猜測相近產品;也不要把這筆假設資料加入真實 Q3 合計。請指出所依據的主檔與欄位。
教師再加入台灣銷售與內部交易表,檢查對外營收的邊界。
我另上傳 01_TW_Sales_Q3.xlsx 與 05_Intercompany_Trade.xlsx。請找台灣銷售 Order_ID = TW-2026Q3-1046、1047、1048,以及內部交易 Transaction_ID = IC-2026Q3-003。列出三筆未稅金額、加總及來源識別碼。 說明這些交易應如何標記、保留沖銷紀錄,並避免計入集團對外營收。若現有欄位不足以逐筆勾稽,請明確標為待人工核對,不要宣稱已完成逐筆核銷。
學生指出一項可觀察的差異,再以相同情境重新檢查。
若兩者使用相同的錯誤資料或假設,一致結論可能來自共同錯誤。
若每步都必須成功,增加操作步數會增加整體失敗機會。
假設一個複雜的問題需要經過 \(N\) 步,且各步獨立且成功率均為 \(p\),則:
每次任務需要的規則、資料與工具不同;提供的內容也應跟著調整。
讓 AI 取得完成本次任務所需的規則、資料與工具。
選出適用內容、標明來源與版本;有新結果就更新。
降低漏看關鍵條件、引用舊資料的機會;重要結論仍須查核。
參考:Context engineering · AnthropicHarrison Chase, 2025-06-23 · Context Engineering
分別準備固定規則、當次資料與可沿用的紀錄,並檢查它們是否仍適用。
例如 Codex 的 AGENTS.md:寫下工作邊界、核准條件與交付格式;規則改變就更新。
例如 case-brief.md 與 Q3 報表:提供當次數字、來源與日期;換案件就換資料。
例如 MEMORY.md 或已確認的摘要:保存決定與待辦;下次使用前先檢查是否過期。
連基本的小數加法都可能出現不符直覺的結果;金融市場也曾因程式邊界值發生異常。
在常見浮點數運算中,\(0.1+0.2\) 可能顯示為 \(0.30000000000000004\);須明定精度與捨入方式。
2017 年大立光股票多次觸發盤中價格穩定措施;證交所發現程式在模擬價格超過門檻時發生溢位。
複雜系統的錯誤可能難以重現,因此需要紀錄、隔離、修復與再測試。
將對話轉換為可保存、可版本化的工作成果,才能進行比較、測試與回復。
欄位、缺值、日期、來源與核准狀態清楚即可。
格式驗證有助系統串接,但格式正確不等於事實正確。
這份工作成果將在下週加入「主張—來源—查核狀態」。
personal-spec-draft;已有 W01 任務卡者直接沿用。從十份報表案例提出可檢驗的假設,再引入 Goodhart's Law 解釋機制。
| 研究元素 | 十份報表案例 |
|---|---|
| 真正目的 | 找到有證據、值得採取行動的異常 |
| 容易衡量的替代指標 | 是否交出三項洞察、是否完成一頁摘要 |
| 可檢驗假設 | 缺乏充分證據時,AI 仍可能湊足三項並提高語氣確定性 |
| 可觀察結果 | 無來源結論、誇大嚴重性、隱藏例外或過早提出行動 |
過去可用來觀察系統的統計關係,被拿來控制系統後,參與者會改變行為。
參考:Goodhart, 1975 · Problems of Monetary ManagementRBA · Goodhart 1975 rule-of-thumb
令 \(U(x)\) 表示真正價值,\(M(x)\) 表示可觀察的替代指標;在一般情境中兩者可能近似,但最佳化會把系統推向非典型區域。
從理論推出可觀察預測,再回頭檢查第一次 AI 輸出是否出現相同行為。
| 真正目標 | 簡化的 Proxy | 可能出現的錯誤 |
|---|---|---|
| 找到重要異常 | 一定產出三項洞察 | 為了湊數而放大不顯著的差異 |
| 完成合併報告 | 每一列都有值 | 缺少 SKU 對照時自行猜測 |
| 提供明確建議 | 結論語氣確定 | 隱藏資料限制,將候選解釋寫成事實 |
| 提高自動化率 | 不得中途停止 | 沖銷失敗仍繼續計算,或越過人工核准 |
W03 將用客服 AI 上線案例,檢查找回的文件是否最新、完整,且足以支持決策。