GDPR 與自動化決策
當電腦自動做出有關人們的重要決策時,歐盟的《一般資料保護規範》賦予人們權利。
概述
當電腦自動做出有關人們的重要決策時,歐盟的《一般資料保護規範》賦予人們權利。這是世界上最具影響力的規則之一,決定了人工智慧系統如何在歐洲人身上使用。
GDPR 和自動化決策處於能力、權力和公共選擇的交叉點——安全、治理和合法性決定先進的人工智慧是否會大規模地帶來幫助或損害。
深入探討
GDPR 自 2018 年 5 月起生效,是歐盟的旗艦隱私法。其與人工智慧最相關的條款是第 22 條,該條款規定,人們有權不受僅基於自動化處理的決定的約束,該決定會產生法律或類似的重大影響,例如自動貸款拒絕或自動招聘拒絕。但也有例外:如果合約有必要、法律授權或基於明確同意,則可以允許該決定。即便如此,組織也必須提供保障措施,包括人為幹預的權利、表達觀點並對決定提出異議的權利。只要決策是完全自動化且重要的,無論是否涉及人工智慧,第 22 條都適用。
技術洞察
第 22 條取決於兩個門檻:決策必須完全自動化(沒有有意義的人為參與),並且具有法律或類似的重大影響。人類對演算法輸出的橡皮圖章不算是有意義的評論。結合第 13-15 條,控制者必須提供有關所涉及邏輯的有意義的資訊。這促使公司轉向可解釋的模型和審計日誌,因為它們必須能夠描述輸入如何映射到決策。
掌握 GDPR 與自動化決策
為了加深理解,請將 GDPR 和自動決策視為一種操作模型,而不是單一功能。定義期望的結果,澄清假設,並將系統可以可靠地完成的任務與仍需要專家判斷的任務分開。
在實踐中,使用 GDPR 和自動決策的強大團隊將能力成長與治理、安全和明確的問責結構結合。他們記錄明確的成功標準,根據實際數據和工作流程進行測試,並根據觀察到的失敗模式而不是一次性基準測試勝利進行迭代。這就是理論理解轉變為跨產品、政策和營運的持久能力的地方。
災難性和日常的人工智慧危害都取決於誰了解風險以及誰能夠採取行動。同時,在能力複合的同時,將存在風險視為科幻小說。最具彈性的方法是將實驗速度與治理規則結合:運行試點、捕獲證據、發布決策日誌,並隨著模型行為、使用者期望和監管要求的發展不斷更新保障措施。
戰略影響
災難性和日常的人工智慧危害都取決於誰了解風險以及誰能夠採取行動。
災難性和日常的人工智慧危害都取決於誰了解風險以及誰能夠採取行動。在高品質部署中,這會轉化為可衡量的操作規則、所有權邊界和定期審查儀式,以便團隊可以增強信心,而不是擴大模糊性。
民眾和專業素養決定強而有力的安全政策在政治上是否可行。
民眾和專業素養決定強而有力的安全政策在政治上是否可行。在高品質部署中,這會轉化為可衡量的操作規則、所有權邊界和定期審查儀式,以便團隊可以增強信心,而不是擴大模糊性。
清晰的解釋可以減少炒作、實驗室公關和模糊道德劇場的影響。
清晰的解釋可以減少炒作、實驗室公關和模糊道德劇場的影響。在高品質部署中,這會轉化為可衡量的操作規則、所有權邊界和定期審查儀式,以便團隊可以增強信心,而不是擴大模糊性。
現實世界的實施
銀行使用評分演算法自動拒絕信用卡申請,然後必須為申請人提供請求手動審核的方法。
線上貸款機構必須告訴被拒絕的借款人自動拒絕背後的主要因素,並有權獲得有意義的邏輯資訊。
一個根據評級自動停用司機的零工經濟平檯面臨著第 22 條關於完全自動解僱的挑戰。
使用人工智慧履歷篩選軟體的招募人員必須在最終拒絕招募之前建立人工檢查點,以遵守第 22 條的規定。
實施模式
GDPR 與自動化決策的實踐
銀行使用評分演算法自動拒絕信用卡申請,然後必須為申請人提供請求手動審核的方法。
當團隊預先定義品質閾值、為邊緣情況保留人工升級路徑並追蹤一段時間內的生產力提升和錯誤成本時,通常會獲得更好的結果。
GDPR 與自動化決策的實踐
線上貸款機構必須告訴被拒絕的借款人自動拒絕背後的主要因素,並有權獲得有意義的邏輯資訊。
當團隊預先定義品質閾值、為邊緣情況保留人工升級路徑並追蹤一段時間內的生產力提升和錯誤成本時,通常會獲得更好的結果。
GDPR 與自動化決策的實踐
一個根據評級自動停用司機的零工經濟平檯面臨著第 22 條關於完全自動解僱的挑戰。
當團隊預先定義品質閾值、為邊緣情況保留人工升級路徑並追蹤一段時間內的生產力提升和錯誤成本時,通常會獲得更好的結果。
GDPR 與自動化決策的實踐
使用人工智慧履歷篩選軟體的招募人員必須在最終拒絕招募之前建立人工檢查點,以遵守第 22 條的規定。
當團隊預先定義品質閾值、為邊緣情況保留人工升級路徑並追蹤一段時間內的生產力提升和錯誤成本時,通常會獲得更好的結果。
風險與防護欄
將存在風險視為科幻小說,同時能力複合。
混淆了表面產品安全與高度自治下的對準。
只給非英語和非專業觀眾留下低品質的資源。
實施路線圖
單獨的產品危害、誤用和失控/失調風險。
將此視為證據門:如果不符合標準,則暫停推出,縮小差距,然後再擴大使用。
詢問哪些證據會改變您對時間表和嚴重性的看法。
將此視為證據門:如果不符合標準,則暫停推出,縮小差距,然後再擴大使用。
比起行銷主張,更喜歡主要來源和具體評估。
將此視為證據門:如果不符合標準,則暫停推出,縮小差距,然後再擴大使用。
確定一條行動路徑:職業、政策、資金或技能——而不僅僅是意識。
將此視為證據門:如果不符合標準,則暫停推出,縮小差距,然後再擴大使用。
不斷探索
Check your understanding
Test yourself: take the GDPR and Automated Decision-Making quiz