重新找回內容
收藏散在社群平台與本機影片中,原始標題未必反映實際主題。
需要重找、重播與重新辨識。
期末專題提案 · Final Project Proposal
以多模態 AI 建立可追溯的
個人知識整理流程
我的工作經常需要從短影片與社群貼文,尋找教學案例、AI 工具與介面設計資源。
當我想把某段內容用於備課時,
能否找到它、理解它,並核對原始依據?
瀏覽時遇到值得保存的工具、觀念與操作示例。
希望在通勤等零碎時間,先讀重點再決定是否回看。
備課或設計時,需要找回原片、時間點與資源名稱。
使用情境來自個人工作需求;後續以同一位使用者的任務紀錄評估。
網址與檔案只是入口;知識能否再次使用,取決於內容整理與證據保存。
收藏散在社群平台與本機影片中,原始標題未必反映實際主題。
需要重找、重播與重新辨識。
工具名稱、步驟或網址可能只出現在畫面;語音與貼文文字也未必完整。
只讀逐字稿,可能漏掉關鍵資訊。
自動摘要若缺少來源、時間點與缺漏說明,使用時仍須重新查證。
難以判斷哪些內容可直接採用。
問題界定:降低重找與重整的成本,同時保留查核原文與原片的能力。
AI 負責初步整理;使用者透過來源與證據,決定內容是否適合採用。
以關鍵字、主題與標籤找回收藏。
從筆記回到原始貼文、原文與影片時間點。
透過未讀清單、Markdown 與郵件草稿延續工作。
以上為目標流程;實際節省時間與品質,依後續評估計畫驗證。
第一版以個人使用為範圍,統一影片與文字的輸入、整理與閱讀。
Facebook/Reels、YouTube、Instagram 的 HTTPS 網址。
MP4 等支援格式;可補登原始貼文網址。
公開貼文可嘗試擷取;無法讀取時由本人貼上全文。
平台可下載性須逐筆確認;文字筆記保留原文,影片專用欄位依內容類型呈現。
每一項功能,都必須對應明確的輸入與可觀察的結果。
| 需求 | 預定功能 | 驗收情境 |
|---|---|---|
| R1 匯入 | 網址、影片檔與原文;來源去重 | 同網址或同檔案重送,沿用既有收藏。 |
| R2 整理 | 摘要、重點、主題與標籤 | 完成筆記符合共同欄位與分類規則。 |
| R3 追溯 | 原始來源、時間索引、畫面索引 | 點時間碼可定位影片;缺少來源須明示。 |
| R4 取用 | 關鍵字搜尋、主題與標籤篩選 | 能在指定條件下找回已完成的筆記。 |
| R5 閱讀 | 未讀、今日新增與閱讀狀態 | 重整或重啟後,已讀狀態仍保留。 |
| R6 匯出 | Markdown、主題報告與郵件草稿 | 選定筆記可匯出;寄送前由本人確認。 |
去重採各入口的識別規則;同內容的不同網址與跨入口重複,仍可能需要人工辨識。
範圍依個人使用情境收斂,將擴充能力與必要交付分開規劃。
自動巡覽社群、團隊協作與自動主張查核,留待後續評估。
完成狀態、閱讀體驗與資料保存,都需要在例外情境下成立。
| 品質要求 | 規格 | 驗證方式 |
|---|---|---|
| 可靠性 | 工作佇列持久化;中斷後可恢復或重試。 | 模擬服務重啟與工作逾時,查核任務及已讀狀態。 |
| 內容完整性 | 驗證輸出格式;未完成回應保留失敗紀錄。 | 注入截斷 JSON、非法分類與超出片長的時間碼。 |
| 私有存取 | 登入保護 API 與媒體;採私有 HTTPS 存取。 | 登出後測試資料端點;憑證與密碼獨立保存。 |
| 行動與離線 | 手機可讀;離線可開啟最近快取的文字。 | 以 390 px 手機畫面操作,再斷線查核文字快取。 |
離線範圍為最近保存的文字;新增任務、播放原片與更新已讀狀態需要連線。
儲存端管理唯一正式資料;運算端領取工作、回傳證據,模型服務提供推論。
HTML / CSS / JavaScript · PWA
FastAPI · SQLite · 私有 HTTPS
Python · GTX 1080 Ti · 暫存工作目錄
Ollama · P40 · 可設定模型
資料流:提交 → 下載與排隊 → 領取與分析 → 驗證回存 → 發布閱讀。模型呼叫不直接修改資料庫。
語音、畫面與原始貼文各自提供證據,摘要保留缺漏與不確定性。
片長、格式、音軌
6–24 格、保留時間
Whisper 逐字稿
每批 3 格分析
JSON → 正式筆記
結合原貼文、語音與抽樣畫面;時間碼須在片長內。
自動整理只收證據中出現的完整網址,並標示待核對。
快速轉場、細小文字與超長原文,可能造成資訊遺漏。
影片流程依序處理;6–24 格為抽樣觀察,並非逐格完整辨識。文字貼文附圖不在第一版分析範圍。
來源、模型整理結果與閱讀狀態,分別保存各自的意義。
原始網址/補登網址/原文/影片檔
標題、摘要、重點、主題、標籤與分類依據
逐字稿、時間碼、畫面索引與模型回應
任務狀態、已讀狀態與完成日期
影片提到的工具網站,不能取代該影片的原始來源。
保留作者的成效主張與不確定性,由使用者判斷採用。
永久保留原片與畫面索引,必要時回看特定時間點。
原片、正式筆記與可用證據永久保存;成功後清除運算端的個別暫存畫格與影音副本。
將模型運算、結果回存與發布分成可查核的步驟,避免半成品被當成完成。
以原子操作與可續期租約管理任務,拒收過期結果。
檢查完成訊號與格式;不完整回應有限重試,仍失敗則保留紀錄。
以 SHA-256 核對傳輸與保存結果,取得發布回執後才清除暫存。
任務狀態與處理紀錄由 SQLite 保存;程序重啟或網路中斷後,仍可辨識需恢復的工作。
模型整理、平台存取與對外寄送,各自需要不同的控制方式。
| 失效模式 | 系統控制 | 人工責任 |
|---|---|---|
| 背景音樂被誤認為語音 | 比對畫面與原片,對不確定內容保留註記。 | 採用重要內容前,由本人覆核。 |
| 細小網址或快速畫面誤讀 | 回看時間點與畫面索引;網址標示待核對。 | 來源不明時,明示缺漏。 |
| 平台拒絕下載/讀取 | 保留錯誤,改用合法取得的檔案或貼上原文。 | 本人確認存取權限與使用範圍。 |
| 貼文含改變任務的指令 | 將貼文視為資料;限制工具與可接受輸出。 | 高影響用途需另行審查。 |
| 誤寄內容或寄送狀態不明 | 先預覽草稿;自寄限固定收件人並防重送。 | 寄送前確認;結果不明先查信箱。 |
本專題評估個人私有原型;擴展到多人與正式組織部署前,另訂權限、備援與資料政策。
以一則本人可使用的素材,走完提交、整理、查核與再利用。
貼上網址,或改用影片檔/文字原文。
從未讀清單進入筆記,查看摘要與標籤。
開啟來源,或以時間碼回到原片。
標記已讀,下載 Markdown 或編輯郵件草稿。
介紹可預覽、調整參數及複製程式碼的前端動畫元件庫。
Antigravity
Electric Border
程式碼與參數調整
介面為預期功能示意,並非正式畫面截圖。示例內容取自既有 V06 筆記,分類依本提案規格呈現。
評估由本人完成;保留原始計時、人工核對表、失敗案例與修正紀錄。
每篇先依原始素材建立核對表,再評閱摘要中的可核對敘述、網址與時間碼。
設計 10 對難度相近的找回任務,交錯分派人工與系統流程,記錄時間與是否答對。
另以重複匯入、超限檔案、模型截斷、工作中斷及離線情境測試功能。
20 則素材為預定樣本;類型互斥分組。失敗項目納入統計;單人、小樣本結果限於個人使用情境。
以下均為提案目標,實測完成後以原始紀錄與失敗分析判定是否達成。
20 則預定素材中,成功保存可讀筆記的比例。
分母包含擷取與分析失敗,另報各類型結果。有原始證據支持的可核對敘述/全部可核對敘述。
逐項人工標註;漏寫內容另外記錄,避免精簡造成誤判。虛構網址、越界時間碼、未保存即顯示完成。
以樣本與故障測試核對;發現任一件即修正並重測。比較成對任務下,人工與系統輔助流程的中位耗時。
先報兩組答對率;任一組未達 90% 時不宣告效率達標。耗時包含閱讀與查核;另記系統排隊、推論與回存耗時,避免用模型速度代替工作效益。
本表為提案的工作規劃;每個階段都留下可供檢視的成果。
問題、需求、範圍、架構與評估計畫。
提交來源 → 背景整理 → 閱讀與匯出。
重試、證據保存、私有存取與備援流程。
固定樣本、成對任務與失敗案例修正。
可操作原型、評估證據與部署建議。
既有原型 → 規格查核 → 固定樣本評估 → 部署判斷
已有的實作可作為原型基礎;剩餘重點為依本提案規格重新驗收,完成可重現的評估。
以可操作成果回答:這套流程是否讓個人收藏更容易取用,且仍能核對來源?
網址/檔案/原文匯入、背景整理、閱讀篩選、來源追溯與匯出。
20 則素材與 10 對找回任務的紀錄、品質標註、耗時與失敗分析。
需求與架構、啟動設定、資料保存、備份還原與操作說明。
依驗收結果決定維持個人試用、修正後再測,或提出擴展條件。
後續研究:以獨立研究 Agent 補查資源連結與重要主張,另訂證據規格、執行預算及評估。
期末判定以運作結果與評估證據為依據;研究 Agent 列為後續擴充,不影響第一版核心交付。