NIST:人工智能偏見(jiàn)遠(yuǎn)遠(yuǎn)超出數(shù)據(jù)本身

到目前為止,應(yīng)該沒(méi)有人會(huì)質(zhì)疑大多數(shù)人工智能都是建立在某種程度上有問(wèn)題的偏見(jiàn)之上的,而且目前也在使用這種偏見(jiàn)。這是一個(gè)被觀察和證實(shí)了數(shù)百次的挑戰(zhàn)。組織機(jī)構(gòu)面臨的挑戰(zhàn)是根除人工智能偏見(jiàn),而不是僅僅滿足于推動(dòng)更好的、無(wú)偏見(jiàn)的數(shù)據(jù)。

在對(duì)其出版物《邁向人工智能中識(shí)別和管理偏見(jiàn)的標(biāo)準(zhǔn)》(NIST 1270特別出版物)的一次重大修訂中,在去年的公眾評(píng)論期之后,美國(guó)國(guó)家標(biāo)準(zhǔn)與技術(shù)研究所(NIST)提出了一個(gè)強(qiáng)有力的論點(diǎn),即超越數(shù)據(jù)甚至ML過(guò)程來(lái)發(fā)現(xiàn)和摧毀AI偏見(jiàn)。作者們沒(méi)有指責(zé)收集不當(dāng)或標(biāo)記不當(dāng)?shù)臄?shù)據(jù),而是表示,人工智能偏見(jiàn)的下一個(gè)前沿是“人類和系統(tǒng)的制度和社會(huì)因素”,并推動(dòng)從社會(huì)技術(shù)角度尋找更好的答案。“環(huán)境決定一切,”NIST人工智能偏見(jiàn)的首席研究員、該報(bào)告的作者之一瑞瓦·施瓦茨(Reva Schwartz)說(shuō)?!叭斯ぶ悄芟到y(tǒng)不是孤立運(yùn)行的。他們幫助人們做出直接影響他人生活的決定。如果我們要開發(fā)值得信賴的人工智能系統(tǒng),我們需要考慮所有可能削弱公眾對(duì)人工智能的信任的因素。這些因素中有許多已經(jīng)超越了技術(shù)本身,還影響了技術(shù),我們從各種各樣的人和組織收到的評(píng)論都強(qiáng)調(diào)了這一點(diǎn)?!痹斐扇斯ぶ悄芷?jiàn)的人為和系統(tǒng)偏見(jiàn)是什么?

根據(jù)NIST的報(bào)告,人類基礎(chǔ)分為兩大類:個(gè)體和群體,每個(gè)類別下都有許多特定的偏見(jiàn)。個(gè)體的人類偏見(jiàn)包括自動(dòng)化自滿,即人們過(guò)度依賴自動(dòng)化技能;內(nèi)隱偏見(jiàn),一種影響某人做決定的無(wú)意識(shí)的信念、態(tài)度、聯(lián)想或刻板印象;還有確認(rèn)偏見(jiàn),也就是人們更喜歡與他們現(xiàn)有信念一致或一致的信息。群體人類基礎(chǔ)包括群體思維(groupthink),即人們出于順應(yīng)群體或避免分歧的愿望而做出非最優(yōu)決策的現(xiàn)象;資金偏見(jiàn),當(dāng)報(bào)告有偏見(jiàn)的結(jié)果以滿足一個(gè)資助機(jī)構(gòu)或財(cái)政支持者,這反過(guò)來(lái)可能會(huì)受到額外的個(gè)人/群體偏見(jiàn)的影響。對(duì)于系統(tǒng)性偏見(jiàn),NIST報(bào)告將其定義為歷史的、社會(huì)的和制度的。從本質(zhì)上講,長(zhǎng)期存在的偏見(jiàn)隨著時(shí)間的推移已經(jīng)被編入社會(huì)和機(jī)構(gòu),并在很大程度上被視為“事實(shí)”或“事情就是這樣的”。這些偏見(jiàn)之所以重要,是因?yàn)槿斯ぶ悄懿渴饘?duì)當(dāng)今組織的工作方式有多么大的影響。由于種族偏見(jiàn)的數(shù)據(jù),人們被剝奪了抵押貸款,剝奪了他們首次擁有住房的機(jī)會(huì)。求職者被拒絕面試,因?yàn)槿斯ぶ悄鼙挥?xùn)練成歷史上的雇傭決定,這更傾向于男性而不是女性。有前途的年輕學(xué)生會(huì)因?yàn)樗麄兊男帐吓c過(guò)去成功人士的名字不匹配而被大學(xué)拒絕面試或錄取。換句話說(shuō):有偏見(jiàn)的人工智能創(chuàng)造了與效率開口一樣多的鎖門 。 如果組織不積極努力消除部署中的偏見(jiàn),他們很快就會(huì)發(fā)現(xiàn)自己在思考和操作方面嚴(yán)重缺乏信任。

NIST 推薦的社會(huì)技術(shù)觀點(diǎn)是什么?

其核心是認(rèn)識(shí)到任何人工智能應(yīng)用的結(jié)果都不只是數(shù)學(xué)和計(jì)算輸入。它們是由開發(fā)人員或數(shù)據(jù)科學(xué)家制作的,他們的職位和機(jī)構(gòu)各不相同,他們都有一定程度的負(fù)擔(dān)。NIST的報(bào)告中寫道:“人工智能的社會(huì)技術(shù)方法考慮了從數(shù)據(jù)集建模的價(jià)值和行為,與它們交互的人類,以及復(fù)雜的組織因素,這些因素涉及到它們的委托、設(shè)計(jì)、開發(fā)和最終部署?!盢IST認(rèn)為,通過(guò)社會(huì)技術(shù)視角,組織可以通過(guò)“準(zhǔn)確性、可解釋性和可理解性、隱私性、可靠性、魯棒性、安全性和安全彈性”來(lái)培養(yǎng)信任。他們的建議之一是讓組織實(shí)施或改進(jìn)他們的測(cè)試、評(píng)估、確認(rèn)和驗(yàn)證(TEVV)過(guò)程。在給定的數(shù)據(jù)集或訓(xùn)練過(guò)的模型中,應(yīng)該有方法從數(shù)學(xué)上驗(yàn)證偏差。他們還建議在AI開發(fā)工作中創(chuàng)造更多來(lái)自不同領(lǐng)域和職位的參與,并擁有來(lái)自不同部門或組織外部的多個(gè)利益相關(guān)者?!癶uman-in-the-loop”模型中,個(gè)人或集體不斷糾正基本的 ML 輸出,也是消除偏見(jiàn)的有效工具。

除了這些和修訂后的報(bào)告之外,還有NIST的人工智能風(fēng)險(xiǎn)管理框架(AI RMF),這是一套由共識(shí)驅(qū)動(dòng)的建議集,用于管理AI系統(tǒng)涉及的風(fēng)險(xiǎn)。一旦完成,它將涵蓋人工智能技術(shù)和產(chǎn)品的透明度、設(shè)計(jì)和開發(fā)、治理和測(cè)試。人工智能RMF的初始評(píng)論期已經(jīng)過(guò)去,但我們?nèi)匀挥泻芏鄼C(jī)會(huì)了解人工智能的風(fēng)險(xiǎn)和緩解措施。

極客網(wǎng)企業(yè)會(huì)員

免責(zé)聲明:本網(wǎng)站內(nèi)容主要來(lái)自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性,但不保證有關(guān)資料的準(zhǔn)確性及可靠性,讀者在使用前請(qǐng)進(jìn)一步核實(shí),并對(duì)任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對(duì)有關(guān)資料所引致的錯(cuò)誤、不確或遺漏,概不負(fù)任何法律責(zé)任。任何單位或個(gè)人認(rèn)為本網(wǎng)站中的網(wǎng)頁(yè)或鏈接內(nèi)容可能涉嫌侵犯其知識(shí)產(chǎn)權(quán)或存在不實(shí)內(nèi)容時(shí),應(yīng)及時(shí)向本網(wǎng)站提出書面權(quán)利通知或不實(shí)情況說(shuō)明,并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后,將會(huì)依法盡快聯(lián)系相關(guān)文章源頭核實(shí),溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。

2022-06-16
NIST:人工智能偏見(jiàn)遠(yuǎn)遠(yuǎn)超出數(shù)據(jù)本身
NIST強(qiáng)烈主張要超越數(shù)據(jù)甚至ML過(guò)程來(lái)發(fā)現(xiàn)和解決AI偏見(jiàn)……

長(zhǎng)按掃碼 閱讀全文