AI Expert Services 標誌 AI Expert Services

QIF Series 08

QIF 信心過濾與例外治理:品質判定不是只有通過與不通過

錯誤的自動化比人工慢更危險。成熟的品質 AI,不是把所有資料硬判成答案,而是知道何時自動採信、何時保留不確定、何時交給人工覆核。

許多企業談 AI 自動化時,容易把目標設定成「全部自動判定」。但在真實場景中,錯誤的自動判定往往比人工慢更危險。

報帳系統裡,手寫件要待覆核、低信心 OCR 要過濾、站名要進白名單、遮蓋標註要尊重使用者意圖。這些看似細碎的規則,其實正是 AI 品質與 QIF 資料治理最重要的精神:系統必須知道何時不該自動判斷。

QIF 不是 AI 信心分數標準,也不是例外治理工具本身。它真正有價值的地方,是把品質資料放進可追溯的結構裡:結果來自哪個資源、依據哪個規則、在什麼條件下產生、是否需要後續分析。

AI 行駛到分岔路口:綠色路徑代表可自動處理,紅色路徑亮起 Needs Manual Review 與警示交由人員接手,象徵系統必須知道何時不該自動判斷的示意圖
成熟的自動化要懂得在低信心或例外情況踩煞車,亮起「待人工覆核」——系統必須知道何時不該自動判斷。

全自動不是成熟,知道不能自動才成熟

成熟的自動化系統不會急著回答所有問題。它會先判斷資料來源、可信程度、適用條件與風險邊界。

以報帳 OCR 為例,電子發票 XML 可以直讀,QR code 可以解碼,PDF 文字層可以抽取,影像才需要 OCR,手寫件則應進入人工覆核。這不是因為系統能力不足,而是因為不同資料來源的風險不同。把所有資料都丟給同一個模型、同一條規則、同一個自動判定結果,才是真正危險的設計。

把 XML、QR、文字層 PDF、掃描件與手寫件全部倒進同一個漏斗、用同一套規則自動判定,最後產出錯誤結果的示意圖
把所有資料都丟給同一個模型、同一條規則、同一個自動判定,最危險——不同來源的風險不同,應該先分流,而不是一視同仁。

品質系統也是一樣。量測結果不是只有「合格」或「不合格」。它還包含量測設備、檢驗方法、抽樣條件、版本、環境、特徵定義、判定規則與資料完整性。如果系統只留下最後的 PASS / FAIL,而沒有保留判定依據,當結果出問題時,工程團隊很難知道錯的是產品、量具、規則、資料來源,還是自動判定流程。

報帳規則裡的例外治理

報帳場景很適合拿來理解例外治理,因為它同時存在結構化資料、半結構化文件、影像辨識與人工判斷。

例如站名白名單,不只是文字比對,而是把可接受的資料範圍先定義出來。OCR 可能把字看錯,使用者也可能上傳不清楚的票據;如果系統知道哪些站名屬於可接受名單,就能把明顯不合理的結果擋下來,避免錯誤資料直接進入後端流程。

再例如車牌與個資遮蓋。系統可以先抽取必要資訊,但後續呈現或留存時必須尊重遮蓋規則。這代表資料判讀不是單純把文字辨識出來,而是要知道哪些資訊可以被使用、哪些資訊要被隱藏、哪些操作要留下痕跡。

手寫件待覆核也是同樣道理。手寫辨識可能不是完全不能做,但若風險高、錯誤成本高,就不應把低信心結果包裝成確定答案。正確做法是把它標示為「需要人工確認」,讓人接手,而不是讓系統假裝有把握。

報帳規則 背後治理意義 對品質系統的啟發
信心門檻 低於門檻不直接自動採信 量測或 AI 判讀結果應有可採信條件
白名單 先定義可接受範圍 品質規則要有明確適用範圍
遮蓋規則 尊重資料使用邊界 品質資料也要保留權限與用途脈絡
人工覆核 例外不硬判 不確定結果要進入覆核流程
標註存檔 判斷過程可回看 品質判定要能追溯到依據

信心分數不是答案,而是分流訊號

談到信心過濾時,很容易誤會成「分數高就是對,分數低就是錯」。這個理解太粗糙。

信心分數比較適合被看成分流訊號,而不是真理標籤。高信心代表系統內部訊號比較一致,不代表結果一定正確;低信心代表系統偵測到不確定,不代表內容一定錯。真正重要的是企業如何設計後續動作:自動通過、提示檢查、要求補件、進入人工覆核,或禁止進入正式流程。

這一點對品質 AI 很關鍵。AI 可以協助判讀量測報告、比對圖面要求、檢查供應商資料、提示異常趨勢,但 AI 的輸出不應直接等同品質結論。

來源這個結果的資料來源是什麼?是否能回到原始圖面、量測資料或供應商文件?
規則使用了哪一版規則或檢驗計畫?是否符合這次產品與客戶要求?
接手信心不足時,是否有明確覆核流程?人工修正後,是否能回饋到後續規則與模型?

對應到品質資料:不是所有結果都該自動採信

製造品質資料比報帳文件更複雜,因為它牽涉設計意圖、量測方法、設備能力、製程條件與客戶規範。

同樣一個尺寸結果,可能因為量具不同、治具不同、抽樣位置不同、資料版本不同,而有完全不同的解讀。某個孔徑量測值看起來在公差內,但如果量測設備未校正、檢驗計畫版本錯誤,或特徵對應到錯誤的 CAD / PMI 定義,這個「合格」結果就不值得信任。

同一個尺寸量測結果,會因量具、治具、抽樣位置與資料版本不同而有完全不同解讀的示意圖
同樣一個尺寸結果,會因量具、治具、抽樣位置與資料版本不同而有完全不同的解讀——數字相同,意義未必相同。
判定狀態 系統應做的事 管理重點
可自動採信 寫入正式結果,保留來源與規則 確認規則、設備、版本都符合條件
需提示檢查 顯示警示,要求工程人員確認 不阻斷流程,但不可靜默通過
需人工覆核 進入待審佇列 保留原始資料、AI 建議與人工判斷
不可判定 禁止產生品質結論 要求補資料或重新量測
規則衝突 暫停自動判定 釐清版本、客戶規範或檢驗方法

QIF 的 Rules / Results / Resources 啟發

QIF 的價值,不在於替企業決定信心門檻,而在於提供品質資料可被組織與關聯的語意骨架。公開資料中,DMSC 對 QIF 的說明強調它能定義、組織並關聯量測計畫、結果、PMI、資源、統計分析等品質資訊。NIST 的 QIF overview 也把一份 QIF 文件拆成 Product、Plans、Results、Statistics、Resources、Rules 等模組。

換句話說,QIF 提醒我們:品質結果不應只是數字,而是「數字加上它被產生、被判定、被採信的條件」。

Rules判定依據是什麼,例如抽樣策略、允收條件、量測規則或特定客戶規範。
Results實際得到什麼結果,結果是否完整,是否能對應到原始特徵與量測條件。
Resources使用哪些設備、量具、軟體、治具或人員能力,這些資源是否允許用於該檢驗。

工廠實例:例外治理不是抽象名詞

實例 1:限度樣品制定

限度樣品等於先定義「可接受範圍」的邊界,這和報帳的白名單、信心門檻有相同治理精神。它不是讓每一次判斷都靠個人經驗臨場決定,而是先把邊界做成可被查核、可被溝通的標準。

內部佐證來源:限度制定表單與限度樣品製作標準,已去識別化,不公開本機路徑。

實例 2:不良率評核規定

不良率評核規定就是允收與拒收門檻,是工廠現場對「信心過濾」的另一種說法。資料不是進來就全部通過,而是要依照規則決定是否可採信、是否要提示、是否要退回或覆核。

內部佐證來源:打樣不良率評核規定與培訓報告格式,已去識別化,不公開本機路徑。

實例 3:FMEA / 8D / 不具合彙整

FMEA 以風險分級決定處置強度,8D 則要求問題能被追溯、矯正與預防。這些都不是單純的「判定結果」,而是把例外放進流程裡管理,讓高風險情境保留覆核與改善路徑。

內部佐證來源:FMEA、8D 與不具合分析彙整文件,已去識別化,不公開本機路徑。

AI 品質需要保留不確定性

很多 AI 導入失敗,不是因為模型完全不能用,而是因為系統沒有設計「不確定」的位置。

在品質場景裡,不確定性很正常。新產品、新材料、新製程、供應商文件格式變動、量測設備更換、圖面版本更新,都可能讓原本有效的規則失效。若 AI 系統仍然硬給答案,反而會降低品質管理的可信度。

層次 要回答的問題
來源 判斷來自哪些圖面、量測資料、歷史案例或供應商文件
適用範圍 這個建議適用於哪種材料、製程、規格或客戶要求
信心與限制 哪些欄位可信,哪些欄位需要覆核
後續動作 自動採信、人工確認、補資料、重新量測或退回

結論:可靠性來自可控邊界

品質系統的可靠性,不是來自系統永遠回答,而是來自系統知道自己的邊界。

報帳規則中的信心門檻、白名單、遮蓋、人工覆核,看起來只是文件自動化的小規則;但放到品質管理裡,它們其實指向同一件事:自動化必須有可控邊界。

QIF 能提供的,不是把 AI 變成永遠正確的判定者,而是讓品質資料有規則、有結果、有資源、有計畫、有統計脈絡。當這些脈絡被保存下來,企業才有能力管理例外,而不是掩蓋例外。

真正成熟的品質 AI,不是看起來很自動,而是能清楚說明:這次為什麼可以自動判定,為什麼不能自動判定,以及當它不能判定時,誰應該接手。

參考連結與註譯

DMSC / QIF Standards:QIF Overview

註譯:QIF 官方介紹指出,QIF 用來定義、組織並關聯品質資訊,包含量測計畫、結果、PMI、量測模板、資源與統計分析。本文引用此點說明 QIF 的重點是品質資料脈絡,而不是單一 AI 判定分數。

DMSC:QIF & DMIS Standards

註譯:DMSC 將 QIF 描述為 XML framework standard,支援複雜 cyber-physical manufacturing systems 中的品質資訊組織與供應鏈傳遞。本文用它支撐「品質資料必須能被結構化傳遞」的論點。

NIST:QIF Overview PDF

註譯:NIST 文件列出一份 QIF instance file 可能包含 Product、Plans、Results、Statistics、Resources、Rules。本文引用這個分類來解釋品質判定不應只剩結果數字,而要保留規則、資源與條件。

NIST:AI Risk Management Framework

註譯:NIST AI RMF 是用來管理 AI 風險的框架,核心精神是辨識、衡量、治理與管理 AI 風險。本文引用其治理觀點,說明 AI 品質系統需要風險邊界與人工接手機制。

NIST AI Resource Center:AI RMF Core

註譯:AI RMF Core 將 AI 風險管理分成 Govern、Map、Measure、Manage。本文把這個觀點轉譯到品質 AI:不是只看模型答案,而是要建立可治理、可衡量、可管理的流程。

Instabase Docs:Validating documents

註譯:Instabase 文件示範文件自動化可針對欄位信心、OCR 信心設定 validation rule。本文用它作為「信心門檻應用於分流與覆核」的實務參考。

TDWI:Using OCR: How Accurate is Your Data?

註譯:文章提到欄位層級 confidence score 的目的,是用 threshold 區分較可靠與較不可靠資料。本文延伸為品質資料中的信心過濾,不是把分數當真理,而是把分數當分流訊號。

Invoice Data Extraction:Invoice OCR Accuracy

註譯:文章提醒 confidence is not accuracy,高信心不等於一定正確,低信心也不等於一定錯。本文引用這個觀點,強化「信心分數是路由機制,不是品質結論」的說法。

想把品質資料從「人工判斷」整理成可治理流程?

AI Expert Services 可協助盤點圖面、檢驗、供應商文件與 AI 判讀流程,先找出哪些資料能自動採信,哪些例外必須交給人。

聯絡 AI Expert Services

卡片定位與保密、引用聲明

定位:本頁為知識庫「QIF 專題系列」文章,用來整理工廠 CAD、品質資料、製造治理與 AI 應用之間的關係,並連結外部權威準則。具體敏感明細留在各受控源文件,本頁只做指引。(本頁所述「工廠」均為去識別化代稱。)

若連結之權威單位,有認為需要修改/下架之必要,本單位將配合調優、修改、刪除或者下架。

保密(營業秘密):本頁為對外文件,不揭露客戶名稱、機種真實名稱(一律代號)、配方、供應商料號、報價等營業秘密。

引用(連結=引用,不得用於模型訓練):外部連結僅供「引用、查證、延伸閱讀」,不得整段/整圖轉載、不得用於訓練 AI。標準發行者(ISO/ASME/AIAG)之標準條文原文一律不轉錄;本頁相關內容均為自行整理並標出處。