手繪漫畫頁,標題為「COMPETENCE——PROBLEM」,描繪左右我們生活的演算法如何從可理解走向難以理解:先是簡單的平均評分,接著是只有工程師勉強看懂的分數與對數公式,最後是糾結的機器學習圖示,旁邊一個小角色與一個灰色框,框中寫著「要成為如此浩瀚的心智,連祂自己都再也說不出自己真正的名字」。勝任力問題:在現代國家,網際網路就是生活發生之處:文化、新聞、政治、購買商品與服務、結交朋友。因此:運行網路的演算法,就是運行我們生活的演算法。起初,這些「演算法」很簡單:貼文,從最新排到最舊!後來,為了過濾雜訊,我們的演算法變得更複雜了。使用者看不懂,但寫程式的人懂……大致上。* 這是 reddit 在 2008 年的演算法!這是……淨讚數的對數,再依時間折扣……我想是吧。但如今,在機器學習的時代——程式是長出來的,不是設計出來的——再也沒有人理解運行我們生活的演算法。覺悟並非自我覺察,而是自我不察。要成為一個如此浩瀚的心智,連它自己都再也說不出自己真正的名字。

一座橋要能承受負荷才算堪用:卡車駛過、風吹來、檢查員檢查螺栓時,都依然撐得住。¶ 1(第 1 段的永久連結)

在《關懷民主》(Caring Democracy,2013,頁 35)中,Joan Tronto 堅持:「承擔責任和實際執行關懷工作是兩回事。」勝任力關乎執行:兌現承諾的可運作程式碼,經過稽核、可解釋且安全試錯。部署控制(軌跡、沙箱、金絲雀)讓失敗可被檢查。¶ 2(第 2 段的永久連結)

而且至關重要的是,Tronto 接著說(頁 35):「勝任地關懷,就其關懷責任而言,不僅僅是技術問題,更是道德問題。」Aimee van Wynsberghe 後來把 Tronto 的框架帶進了機器人設計。一個出於好意卻提供有缺失的關懷的系統,是道德上的失敗,也是技術上的失敗。承諾已經許下;橋卻沒能撐住。¶ 3(第 3 段的永久連結)

插圖的框架:我們檢核流程:用透明度和快速的營運回饋,檢查關懷到底有沒有送到,不靠「相信我們就對了」。在仁工智慧(Civic AI)裡,信任靠攤在眼前、可以檢驗的做法,一點一滴掙來。這正是 Onora O’Neill 所說的可信賴性,光有透明,產生不了它。¶ 4(第 4 段的永久連結)

從身邊開始

對任何在你的房間裡做事的 AI,問一句:「我們查得出它做了什麼嗎?能在更多傷害發生前讓它停下來嗎?」和那些真要按下暫停的人一起演練暫停;在讓系統接下更多工作之前,先讀一遍它的行動紀錄。¶ 5(第 5 段的永久連結)

定義

為何重要

勝任力之所以重要,是因為公開承諾若沒有可見、可測、可逆的執行,就會落空。Pack 2 把承諾定下來;Pack 3 問的是系統是否真的兌現了。在仁工智慧裡,人們應能在系統運作中檢查安全,不必靠相信供應商的意圖。¶ 11(第 11 段的永久連結)

慢慢訂下的限制,讓快速的執行可被問責。參與契約、紅線、嚴重性分級與暫停觸發條件(Pack 2)要慢慢訂,因為這些決定必須長久有效。在這些界限之內,地神可以在預先承諾的煞車、影子模式、金絲雀與可逆預設之下,以機器的速度行動。讓快速決定可被問責的護欄需要審議;個別決定大多不需要。¶ 12(第 12 段的永久連結)

學徒模式

這種分階段養成勝任力的模式,有名字,也有傳承:學徒。臺中的一位老師傅,光聽主軸的聲音就知道刀具是不是快要顫振;病房的護理師在凌晨三點,聽得出病人平常的鼾聲,與必須叫醒醫師的呼吸停頓之間的差別。這就是內隱知識——Michael Polanyi 在《內隱向度》(The Tacit Dimension)中用這個詞指稱我們知道、卻無法完全言傳的事。¶ 13(第 13 段的永久連結)

當這段關係出錯時,失敗很具體:供應商在示範時開啟了「自主進給最佳化」。副駕駛不再等待老師傅接受建議,而是因為實驗室裡的基準圖表好看,就自行調整主軸轉速和切削深度。前幾分鐘,紙面上的切削數據更漂亮。接著聲音變了。老師傅伸手要放慢進給,卻發現自己的覆寫不再是預設路徑:系統辯解、延遲,或把她的輸入當成例外。學徒不再為她的決定提供資訊,而是在指揮培育者。¶ 14(第 14 段的永久連結)

十多年前,van Wynsberghe 就為病房裡的搬移機器人畫出了這條線:「賦能型」機器人與照顧者共同承擔實踐,使責任「成為人類照顧者與機器人之間的混合事件」;「取代型」機器人接手整項實踐,依 Tronto 的標準「不符合好照顧者的要求」(2013,頁 423、427–428)。¶ 15(第 15 段的永久連結)

學徒正是刻意設計成賦能型系統,而供應商的「自主進給最佳化」,就是它被悄悄改列為取代型的那一刻。Lisanne Bainbridge 早在 1983 年就指出這個陷阱:自動化失靈時被要求接手的操作者,正是被自動化削弱技能的人——自動化的反諷。¶ 16(第 16 段的永久連結)

仁工智慧進入這些場域時,是一名數位學徒。它先在影子模式中觀察、記錄決策軌跡,學會這間工坊、這個病房、這個社群的內隱知識,然後才被信任去提出建議,更不用說採取行動。這個系譜比聊天機器人更古老:J. C. R. Licklider 的人機共生(1960)與 Douglas Engelbart 的增強人類智力(1962),都把人留在方向盤前。¶ 17(第 17 段的永久連結)

而在這裡,培育者手上始終握著三樣東西:方向盤(執行始終由人指揮)、煞車(一個醒目的控制,能立刻停下機器,線路直連、定期測試),以及維修手冊(可追溯哪些規則被觸發、哪些輸入引導了輸出,以及模型故障時由誰修復)。三者合起來,就是 Santoni de Sio 與 van den Hoven 所稱有意義的人類控制的追蹤與溯源條件。可攜性與退出權屬於 Pack 5 的團結力工作。此處的測試是,在任何契約條款生效以前,可檢查性與覆寫權是否真的在房間裡管用。¶ 18(第 18 段的永久連結)

實作上長什麼樣子

從理念到實踐

  1. 從契約推導規格。 將 Pack 2 參與契約轉化為驗收測試。¶ 27(第 27 段的永久連結)
  2. 建立可供查驗的監測機制。 發出附有來源和收據連結(來自 Pack 1)的決策軌跡。¶ 28(第 28 段的永久連結)
  3. 運行影子模式。 新政策接收輸入、提出行動建議,但不實際執行;再與人類或既有系統的決策比對。影子模式,就是學徒站在培育者肩後觀摩。¶ 29(第 29 段的永久連結)
  4. 安全進行金絲雀發布。 發布給一小批分層的真實案例切片,如果漂移超出限制則自動回滾。金絲雀是探測,不是公眾的替身。¶ 30(第 30 段的永久連結)
  5. 全面發布前稽核。 評測、日誌和防護措施的獨立稽核;公布經證明的報告,並附上經驗證的執行率:被抽查的決策中,通過護欄且具備可用軌跡的比例。¶ 31(第 31 段的永久連結)
  6. 全面發布並監控。 向所有使用者開放;持續監看漂移;預留隨時可暫停的機制。¶ 32(第 32 段的永久連結)
  7. 事件後學習。 不究責審查;修復變成測試。¶ 33(第 33 段的永久連結)

可建置的工具

一個案例:洪水機器人

這是一個虛構的複合案例,用來說明,不是實際運作的證據。一週影子期、10% 試行與 15% 回滾觸發值,都是這個虛構示例的教學數字,不是經驗證的門檻或建議預設值。¶ 41(第 41 段的永久連結)

可能出錯的地方

介接

收尾意象:掛著檢查標籤的橋

想像一座維護良好的橋樑,上面掛著檢查標籤——日期、載重測試、下次檢查——任何過橋的人都看得到。勝任力是有人檢查過、而且會再檢查的證明。部署的各個階段,就是檢查時程;決策軌跡,就是檢查紀錄;無責備的事後審查,就是發現問題時提交的報告。¶ 56(第 56 段的永久連結)

相關文獻

手繪漫畫頁,標題為「NOT:just trust us lol/BUT:everyone can check the process——SOLUTION」:影響每個人的演算法應讓每個人都能檢視,並以 X 上的 Community Notes(前身為 Birdwatch)為例,三隻動物角色分別檢核輸入、自由且公開的程式碼(標示「MY CODE」的清單)以及輸出,結語為「要『信任流程』,我們得能夠檢查流程」。不要「相信我們就好啦」而要人人都能檢查流程解方:這些影響每個人的演算法,應該人人都能檢視!想想 X 上的 Community Notes(前身是 Twitter 的 Birdwatch)。它的運作方式,是凸顯出通常意見相左的人都認同之處。目前為止,它是唯一在美國政治光譜上各方都獲得淨正面評價的主要「事實查核」平台!一部分的原因,是任何人都能檢查演算法的任一環節。使用者能看見所有輸入:使用者提交的註記。使用者能檢查註記是否被正確分析:程式碼開放公開。最後,使用者能檢查:被凸顯出的註記,的確都是意見相左的人都認同之處。Community Notes 只是眾多範例之一!重點在於:若要「信任流程」,我們就必須能夠檢查流程。

←二:負責力四:回應力→

紀錄

修訂
守護者
唐鳳 · Caroline Green
共同照料:jdd-kami · Tenzin Yangtso
修訂
· 自 2025年10月1日 起,69 次紀錄
完整修訂紀錄 →
來源
tw-3.md · 在 GitHub 編輯https://github.com/audreyt/civic.ai/blob/main/tw-3.md
CC0 公眾領域https://civic.ai/tw/3/
評測
連結 ✓ 通過雙語 ✓ 通過術語 ✓ 通過對比 ✓ 通過大小 ✓ 通過建置:2026-10-13T21:41:55.323Z · 完整評測紀錄(JSON)
雙語
Pack 3: Competence — Care-Giving
同一份紀錄,同樣可查核。