隨著計算機做出更多決策业扒,人們對算法的偏見也越來越多

來源:MSN

作者:Shara Tibken

翻譯:W3Cschool

去年年底美國開始分發(fā) COVID-19 疫苗時检吆,出現(xiàn)了一個重要問題:誰應(yīng)該優(yōu)先注射疫苗?許多醫(yī)療機構(gòu)和衛(wèi)生官員決定優(yōu)先給與感染者密切接觸的工作人員接種疫苗程储,包括醫(yī)護(hù)蹭沛、安保人員。斯坦福大學(xué)做為該國最頂尖大學(xué)之一章鲤,建立了一種確定順序的算法致板。

讓計算機決定誰先接種疫苗的唯一問題是它的“非常復(fù)雜的算法”(事實證明根本不是很復(fù)雜)是建立在錯誤的假設(shè)和數(shù)據(jù)之上的。也就是說咏窿,該算法優(yōu)先考慮特定年齡的醫(yī)務(wù)人員斟或,而不考慮許多年長的醫(yī)生沒有定期看病人的情況。斯坦福大學(xué)(Stanford Medicine)首批 COVID-19 疫苗的 5,000 劑疫苗中集嵌,只有七劑被分配一線駐地醫(yī)生萝挤。絕大多數(shù)被分配到了在家工作或與感染 COVID-19 的患者接觸很少的高級教師和醫(yī)生御毅。斯坦福大學(xué)迅速取消了該算法,并為一線員工接種了疫苗怜珍。

斯坦福大學(xué)門診護(hù)理團隊主任蒂姆·莫里森(Tim Morrison)12月中旬在發(fā)布的 Twitter 視頻中說:“我們的算法端蛆,倫理學(xué)家和傳染病專家工作了幾個星期,使用年齡酥泛、高風(fēng)險的工作環(huán)境以及該環(huán)境中的陽性率... ... 等條件中今豆,顯然沒有正確的工作”

斯坦福大學(xué)的疫苗崩潰只是算法有偏見的許多方式中的一個例子,隨著計算機程序取代人類決策者柔袁,這個問題變得越來越明顯呆躲。算法有望在沒有情感影響的情況下根據(jù)數(shù)據(jù)做出決策:可以更快、更公平捶索、更準(zhǔn)確地做出決策插掂。然而,算法并不總是基于理想的數(shù)據(jù)腥例,這一缺點在進(jìn)行生死攸關(guān)的決定(例如重要疫苗的分配)時會被放大辅甥。

根據(jù)加利福尼亞州奧克蘭市一家致力于種族和經(jīng)濟正義的非營利性機構(gòu) Greenlining Institute 周二發(fā)布的一份報告顯示:其影響甚至更為廣泛,因為計算機可以確定某人是否獲得房屋貸款燎竖,誰被雇用以及囚犯被關(guān)押的時間璃弄。Greenlining 首席執(zhí)行官黛布拉·戈爾·曼(Debra Gore-Mann)表示,算法通常會保留與人類決策者相同的種族构回,性別和收入水平偏差夏块。

戈爾·曼在接受采訪時說:“您正在看到這些工具被用于刑事司法評估、住房評估捐凭、金融信貸拨扶、教育凳鬓、求職茁肠。它變得如此普遍,以至于我們大多數(shù)人甚至都不知道正在進(jìn)行某種自動化和數(shù)據(jù)評估缩举】寻穑”

Greenlining 報告研究了設(shè)計不當(dāng)?shù)乃惴ㄈ绾瓮{到加劇系統(tǒng)性種族主義、性別歧視和對低收入人群的偏見仅孩。由于這項技術(shù)是由人們創(chuàng)造和培訓(xùn)的托猩,因此這些算法(無論是否有意)都可以重現(xiàn)歧視和偏見的模式,而人們通常不會意識到這種情況的發(fā)生辽慕。面部識別是被證明存在種族偏見的技術(shù)領(lǐng)域之一京腥。健身帶一直在努力準(zhǔn)確地測量有色人種的心率。

Greenlining 技術(shù)股權(quán)法律顧問 Vinhcent Le 說:“用于超目標(biāo)全球廣告的相同技術(shù)也正用于向人們收取不同價格的產(chǎn)品溅蛉,這些產(chǎn)品對于經(jīng)濟健康至關(guān)重要公浪,例如抵押產(chǎn)品保險他宛,以及不太重要的產(chǎn)品(例如鞋),” 欠气。

在另一個示例中厅各,Greenlining 標(biāo)記了由 Optum Health 創(chuàng)建的算法,該算法可用于確定患者的醫(yī)療照顧優(yōu)先級预柒。其中一個因素是病人在醫(yī)療費用上的花費队塘,假設(shè)病情最嚴(yán)重的人在醫(yī)療保健上花費最多。僅僅使用這個參數(shù)不會考慮到那些沒有那么多錢的人有時不得不在支付房租和支付醫(yī)療賬單之間做出選擇宜鸯,這會不成比例地傷害到黑人患者憔古。

Optum Health 表示,健康服務(wù)提供者以這種方式測試了算法的使用顾翼,但最終沒有使用它來確定醫(yī)療服務(wù)投放。

Optum 在一份聲明中說:“這個算法沒有種族偏見。這個工具的設(shè)計目的是根據(jù)個別病人過去的醫(yī)療經(jīng)驗來預(yù)測未來可能產(chǎn)生的費用适贸,并且在用于此目的時不會導(dǎo)致種族偏見——研究作者同意這一事實灸芳。”

沒有簡單的解決方法

Greenlining 為政府和公司提供了三種方法來確保技術(shù)更好拜姿。Greenlining 建議組織實行算法透明度和問責(zé)制烙样;在有意義的情況下開發(fā)種族意識算法,并特別尋求將弱勢群體納入算法假設(shè)蕊肥。

確保這種情況發(fā)生的責(zé)任谒获,將落在立法者身上。

勒(Le)說:“(這份報告)的重要意義是樹立起開始監(jiān)管人工智能的政治意愿壁却∨”

在加利福尼亞州,州議會正在考慮第 13 號議會法案展东,也被稱為 2021 年自動決策系統(tǒng)問責(zé)法案赔硫。它于 12 月 7 日推出,由 Greenlining 贊助盐肃,它將要求使用“自動決策系統(tǒng)“的企業(yè)測試其偏見及其對邊緣群體的影響爪膊。如果有影響,組織必須解釋砸王,為什么歧視待遇不違法推盛。勒說:“你可以區(qū)別對待別人,但如果是基于受保護(hù)的特征谦铃,比如種族耘成、性別和年齡,那就是違法的”窬”

2019 年 4 月件豌,民主黨人新澤西州參議員科里 · 布克(Cory Booker)和俄勒岡州參議員羅恩 · 懷登(Ron Wyden),以及紐約州眾議員伊維特·D·克拉克(Yvette D. Clarke)控嗜。提出了算法問責(zé)法案茧彤,該法案要求公司研究和修正有缺陷的計算機算法,這些算法導(dǎo)致了不準(zhǔn)確疆栏、不公平曾掂、偏見或歧視性的決定。一個月后壁顶,新澤西州引入了類似的算法責(zé)任法案珠洗。兩個法案都沒通過委員會。

勒說若专,如果加利福尼亞州的 AB13 通過许蓖,那將是美國第一個這樣的法律,但是它可能會失敗调衰,因為它的范圍太廣了膊爪,因為它目前是書面的。相反嚎莉,Greenlining 希望將法案的職責(zé)范圍縮小到首先關(guān)注政府創(chuàng)建的算法米酬。希望該法案將為國家努力樹立榜樣。

勒說:“算法的大多數(shù)問題并不是因為人們對目標(biāo)有偏見趋箩。他們只是在開發(fā)這些程序時走捷徑赃额。就斯坦福疫苗計劃而言,算法開發(fā)人員沒有考慮到后果叫确。 ”

Le補充說:“沒有人真的非常確定需要改變的所有事情跳芳。但是(我們)確實知道,當(dāng)前的系統(tǒng)不能很好地處理AI竹勉》膳瑁”

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市饶米,隨后出現(xiàn)的幾起案子桨啃,更是在濱河造成了極大的恐慌车胡,老刑警劉巖檬输,帶你破解...
    沈念sama閱讀 206,013評論 6 481
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異匈棘,居然都是意外死亡丧慈,警方通過查閱死者的電腦和手機,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 88,205評論 2 382
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來逃默,“玉大人鹃愤,你說我怎么就攤上這事⊥暧颍” “怎么了软吐?”我有些...
    開封第一講書人閱讀 152,370評論 0 342
  • 文/不壞的土叔 我叫張陵,是天一觀的道長吟税。 經(jīng)常有香客問我凹耙,道長,這世上最難降的妖魔是什么肠仪? 我笑而不...
    開封第一講書人閱讀 55,168評論 1 278
  • 正文 為了忘掉前任肖抱,我火速辦了婚禮,結(jié)果婚禮上异旧,老公的妹妹穿的比我還像新娘意述。我一直安慰自己,他們只是感情好吮蛹,可當(dāng)我...
    茶點故事閱讀 64,153評論 5 371
  • 文/花漫 我一把揭開白布荤崇。 她就那樣靜靜地躺著,像睡著了一般潮针。 火紅的嫁衣襯著肌膚如雪天试。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 48,954評論 1 283
  • 那天然低,我揣著相機與錄音喜每,去河邊找鬼。 笑死雳攘,一個胖子當(dāng)著我的面吹牛带兜,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播吨灭,決...
    沈念sama閱讀 38,271評論 3 399
  • 文/蒼蘭香墨 我猛地睜開眼刚照,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了喧兄?” 一聲冷哼從身側(cè)響起无畔,我...
    開封第一講書人閱讀 36,916評論 0 259
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎吠冤,沒想到半個月后浑彰,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 43,382評論 1 300
  • 正文 獨居荒郊野嶺守林人離奇死亡拯辙,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 35,877評論 2 323
  • 正文 我和宋清朗相戀三年郭变,在試婚紗的時候發(fā)現(xiàn)自己被綠了颜价。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 37,989評論 1 333
  • 序言:一個原本活蹦亂跳的男人離奇死亡诉濒,死狀恐怖周伦,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情未荒,我是刑警寧澤专挪,帶...
    沈念sama閱讀 33,624評論 4 322
  • 正文 年R本政府宣布,位于F島的核電站片排,受9級特大地震影響狈蚤,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜划纽,卻給世界環(huán)境...
    茶點故事閱讀 39,209評論 3 307
  • 文/蒙蒙 一脆侮、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧勇劣,春花似錦靖避、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,199評論 0 19
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至命咐,卻和暖如春篡九,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背醋奠。 一陣腳步聲響...
    開封第一講書人閱讀 31,418評論 1 260
  • 我被黑心中介騙來泰國打工榛臼, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人窜司。 一個月前我還...
    沈念sama閱讀 45,401評論 2 352
  • 正文 我出身青樓沛善,卻偏偏與公主長得像,于是被迫代替她去往敵國和親塞祈。 傳聞我的和親對象是個殘疾皇子金刁,可洞房花燭夜當(dāng)晚...
    茶點故事閱讀 42,700評論 2 345

推薦閱讀更多精彩內(nèi)容

  • 我們要給大家分享的書是《盲點》尤蛮。 這本書是由普利策新聞獎得主約瑟夫·哈利南所寫。作者以豐富的案例和數(shù)據(jù)為支撐斯议,收錄...
    劉姥姥a66閱讀 463評論 0 0
  • 今天感恩節(jié)哎产捞,感謝一直在我身邊的親朋好友。感恩相遇捅位!感恩不離不棄轧葛。 中午開了第一次的黨會,身份的轉(zhuǎn)變要...
    迷月閃星情閱讀 10,551評論 0 11
  • 彩排完艇搀,天已黑
    劉凱書法閱讀 4,187評論 1 3
  • 沒事就多看看書尿扯,因為腹有詩書氣自華,讀書萬卷始通神焰雕。沒事就多出去旅游衷笋,別因為沒錢而找借口,因為只要你省吃儉用矩屁,來...
    向陽之心閱讀 4,774評論 3 11
  • 表情是什么辟宗,我認(rèn)為表情就是表現(xiàn)出來的情緒。表情可以傳達(dá)很多信息吝秕。高興了當(dāng)然就笑了泊脐,難過就哭了。兩者是相互影響密不可...
    Persistenc_6aea閱讀 124,154評論 2 7