智慧型機器人101(之五):機器人出錯時,誰負責?——從技術故障到公共責任鏈

當智慧型機器人誤判、碰撞、漏報危險、洩漏資料,或使某些人受到不公平待遇時,常見的回應是:「系統自動判定」、「AI出錯了」或「供應商的技術問題」。

但這些說法都不能成為責任的終點。

機器人不會自行決定要被部署在哪裡、蒐集哪些資料、採取多大的行動權限,也不會自行決定發生問題後是否通知民眾、是否停止使用、是否提供救濟。這些決定仍是由人與組織作出。因此,機器人出錯不是單純的技術事故,而是一項公共責任問題。

一、先分清楚:什麼叫作「出錯」?

機器人的問題不只是一台設備突然故障。至少可分成五種類型。

類型可能情況可能後果
技術故障電力、通訊、感測器、軟體或硬體失效停擺、碰撞、無法回報、錯失處置時機
辨識或判斷錯誤把人或物看錯、把正常情況判為異常,或漏掉真正風險不當警示、錯誤處置、延誤救援
資料與隱私問題蒐集過多資料、保存過久、未妥善保護或被不當調閱個人資料外洩、監控擴張、信任受損
流程與管理失靈無人覆核、警示未處理、教育訓練不足、停止機制失效小問題擴大為公共事件
制度與權利問題系統被用於不適當目的,或對特定群體造成不利影響差別待遇、權利侵害、申訴與救濟困難

這些問題常常不是彼此獨立的。一次事故可能從感測器誤判開始,因為現場人員過度相信系統、主管未設停損程序,最後轉化為對人民的不當處置。

所以,不能只問「哪一個零件壞了」,還必須問:整條責任鏈在哪裡斷掉?

二、「系統自動判定」不是責任的答案

如果一項公共服務的結果對人民造成影響,政府不能僅以「系統自動判定」說明。

例如,機器人辨識出某人疑似跌倒,卻沒有人工確認便觸發不必要的處置;巡檢系統將正常行為標示為異常,導致民眾被盤問;無人設備蒐集的影像被不當使用。這些結果都不是由機器人單獨造成,而是由整個制度安排共同形成。

從公共行政的觀點,責任至少包括四個層次:

  • 決策責任:誰決定要導入這項系統?目的是否正當、必要而且合比例?
  • 設計責任:誰決定資料來源、辨識標準、判斷門檻與自動化程度?
  • 營運責任:誰負責監看、覆核、處理異常、停止系統與教育人員?
  • 補救責任:造成傷害或不利影響後,誰說明、修正、賠償與檢討?

若這四個層次沒有在導入前就寫清楚,出事後便很容易出現相互推諉。

三、責任不能只落在第一線人員

智慧型機器人進入公共服務後,最不公平的情況是:高層決定採購、系統由供應商設計、操作規則由管理單位訂定,但一旦出現問題,第一線人員卻被要求為所有後果負責。

第一線人員當然有查核、通報與保護服務對象的專業責任;但這項責任必須和實際權限相稱。

如果人員看不到系統依據、無法更正資料、沒有停止權、也沒有足夠時間處理警示,卻要承擔全部後果,這不是監督,而是責任向下轉嫁。

合理的安排應使不同角色各自承擔與其權限相當的責任:

角色核心責任
主管機關與決策者確認公共目的、法律依據、風險界線與資源配置
業務主管設計工作流程、配置人力、處理例外與申訴
資訊與技術單位管理系統品質、資安、資料紀錄與異常修復
採購與契約管理單位將資料權、稽核權、更新義務與停止權納入契約
第一線人員查核現場、提出異議、回報異常、維護服務對象權益
供應商說明限制、修正缺失、提供紀錄並配合調查與稽核

責任分工不是為了讓每個人都簽更多文件,而是要讓有權決定的人無法在出事後退到系統背後。

四、供應商不能只負「保固責任」

政府採購智慧型機器人時,容易把供應商責任理解為設備保固、故障修理或定期維護。但對具有資料蒐集、辨識與決策功能的機器人而言,這還不夠。

供應商至少應有下列責任:

  • 說明系統適用範圍、已知限制與高風險情境;
  • 提供必要的操作、異常與版本更新紀錄;
  • 在發現重大缺失時,主動通報並協助停用或修正;
  • 配合主管機關進行資安、資料與公平性檢查;
  • 不得以商業機密為由,完全拒絕必要的公共監督;
  • 清楚界定資料的存取、保存、再利用與刪除方式。

不過,供應商負有技術與契約責任,不等於政府可以把公共責任完全外包。決定是否使用、如何使用、是否影響人民權利的,仍是政府與公共機構。

五、責任鏈必須事前設計,而非事後猜測

機器人出錯後才開始找人負責,通常已經太晚。導入前就應建立可追溯的責任鏈,至少包括:

  1. 目的紀錄:為何需要此系統?要解決什麼公共問題?
  2. 權限界線:它可以提醒、建議或執行到什麼程度?哪些決定一定要由人作出?
  3. 人工覆核:哪些警示、分類或行動必須先由人確認?
  4. 停止機制:誰有權暫停、關閉或改採人工程序?
  5. 異常紀錄:如何記錄誤判、事故、人工介入與民眾申訴?
  6. 通報程序:誰在何時通知主管、受影響者與相關單位?
  7. 補救管道:人民如何取得說明、提出異議、要求更正或申請救濟?

這些安排的價值,不在於保證永遠不出錯,而在於出錯時不會找不到人、找不到資料,也找不到停止與補救的方法。

六、讓錯誤成為制度改進的訊號

公共機構最需要避免的,不是承認機器人出錯,而是為了維護「智慧化成功」的形象而掩蓋錯誤。

如果所有異常都被解釋成偶發事件,或被視為第一線操作不當,組織就無法真正學習。相反地,應將錯誤視為重新檢查制度的訊號:

  • 原本的使用目的是否過度擴張?
  • 感測與辨識條件是否不適合真實環境?
  • 現場是否缺乏足夠人力與訓練?
  • 人工覆核是否流於形式?
  • 供應商是否提供足夠資訊與支援?
  • 受影響者是否真的有可用的申訴與救濟管道?

能夠公開、紀錄、檢討與修正錯誤,並不會削弱政府的可信度;真正削弱信任的,是出了問題卻沒有人願意說明與負責。

結語:責任是智慧型系統的一部分

一個能夠移動、辨識與執行任務的機器人,若缺乏清楚的責任安排,就不能稱為成熟的公共服務系統。

技術本身可能提供效率,但只有當目的、權限、理由、監督與補救被一併設計時,它才可能真正服務公共價值。

因此,面對智慧型機器人,最重要的問題始終不是「誰該背鍋」,而是:在系統開始運作之前,誰已經承諾在必要時站出來,說明、修正並承擔後果?


下一篇預告

〈機器人蒐集了誰的資料?——從感測、隱私到弱勢者權利保障〉

下一篇將討論智慧型機器人如何蒐集影像、聲音、位置與行為資料,以及政府與公共機構為何必須特別注意兒少、高齡者、身心障礙者與其他弱勢使用者的權利。

[上一篇]|返回智慧型機器人101總覽|[下一篇]