十多年來,記者和研究人員一直在撰寫有關依靠算法做出重大決策的危險的文章:誰被關押,誰得到工作,誰得到貸款,甚至誰優先使用COVID-19疫苗。
而不是消除偏差,一個接一個的算法已經將其編成代碼并永久存在,因為公司同時繼續或多或少地保護其算法不受公眾審查。
此后的一個大問題:我們如何解決這個問題?立法者和研究人員提倡進行算法審計,該算法將對算法進行剖析和壓力測試,以查看算法如何工作以及它們是否在執行既定目標或產生有偏見的結果。越來越多的私人審計公司聲稱這樣做。公司越來越多地求助于這些公司來審查其算法,尤其是當他們面對因偏向結果而受到批評的時候,但是目前尚不清楚此類審計是否實際上使算法的偏向性降低了,或者它們是否僅僅是良好的公關手段。
最近,當沃爾瑪和高盛等公司使用的受歡迎的招聘軟件公司HireVue面臨批評時,算法審計引起了廣泛關注,該公司通過視頻采訪評估候選人的算法存在偏見。
HireVue要求審計公司提供幫助,并在一月份在新聞稿中大肆宣傳了審計結果。
審計發現,該軟件的預測“在公平性和偏見問題方面做得很出色”,HireVue在一份新聞稿中說,引用了該公司聘請的審計公司O'Neil風險咨詢和算法審計。
Binance:正在將資金從存款地址整合到熱錢包,為下一階段的POR審計做準備:金色財經報道,加密貨幣交易所Binance在社交媒體上稱,我們正在將資金從存款地址整合到我們的熱錢包,為下一階段的POR審計做準備。因此,在此期間,你可能會注意到ETH Gas費的暫時增加,以及在熱錢包中出現大量交易。[2022/12/10 21:35:12]
但是,盡管對其流程進行了更改,但HireVue被廣泛指責為使用PR特技進行審計。
文章在快速公司,VentureBeat的,和麻省理工學院技術評論叫響公司mischaracterizing審計。
HireVue表示,通過公開發布該報告可以使審計透明,并補充說新聞稿規定該審計僅針對特定情況。
“盡管HireVue可以接受任何類型的審計,包括涉及對我們整個流程的審計,但ORCAA要求只關注一個用例,以便就該系統進行具體討論,”HireVue首席數據科學家LindseyZuloaga在接受采訪時說。一封電郵。“我們與ORCAA合作,選擇了一個具有代表性的用例,該用例與大多數HireVue候選人所進行的評估有很大的重疊。”
Poly Network:漏洞已修復,并得到安全公司審計:8月15日消息,Poly Network發推表示,修復了導致keeper地址被修改為白帽黑客指定地址的跨鏈合約漏洞。修復涉及將可以通過外部調用調用的合同和方法列入白名單。修補的漏洞得到了安全公司派盾的審計。[2021/8/15 22:15:43]
但是算法審計師也對HireVue關于審計的公開聲明不滿意。
人工智能解釋和偏差監控初創企業Arthur的聯合創始人利茲·奧沙利文表示:“在對營銷抵押品進行非常周到的分析時,它們破壞了整個領域的合法性。”
這就是算法審計作為消除偏差的工具的問題:公司可能會使用它們進行真正的改進,但可能不會。而且沒有任何行業標準或法規要求審計師或使用它們進行會計的公司。
什么是算法審計-它如何工作?
好問題-這是一個非常不確定的字段。通常,審計以幾種不同的方式進行:通過查看算法的代碼和來自其結果的數據,或通過與員工的訪談和研討會來查看算法的潛在影響。
可以訪問算法代碼的審核程序使審閱者可以評估算法的訓練數據是否有偏見,并創建假設性場景來測試對不同人群的影響。
Chainalysis完成對Celsius Network的審計:金色財經報道,區塊鏈分析公司Chainalysis已完成對加密貨幣獎勵和貸款平臺Celsius Network的審計,確認其資產達33.18億美元。[2020/12/10 14:44:56]
Twitter的機器學習道德總監兼算法審計公司Parity的創始人RummanChowdhury說,只有大約10到20家提供算法評論的知名公司。公司還可能擁有自己的內部審核團隊,負責在將算法發布給公眾之前研究其算法。
2016年,奧巴馬政府一份關于算法系統和公民權利的報告鼓勵了算法審計行業的發展。不過,聘請審計師仍然不是一種普遍的做法,因為公司沒有義務這樣做,而且根據多名審計師的說法,公司不希望受到審查或可能引起審查的潛在法律問題,特別是針對他們所銷售的產品。
“律師告訴我,'如果我們雇用您,發現有一個我們無法解決的問題,那么我們就失去了合理的可否認性,我們不想成為下一個卷煙公司,'”ORCAA的創始人CathyO'尼爾說。“這是我找不到工作的最常見原因。”
BlockFi與加密貨幣審計公司Sovos達成合作:金色財經報道,加密貨幣借貸產品供應商BlockFi已與專注于加密貨幣會計和審計的初創公司Sovos合作,以實現其稅務信息報告的現代化。BlockFi將使用Sovos的技術來自動化其1099表格和文件,這有助于減少潛在的人為錯誤并確保自動根據法規更新。這項合作將能滿足即將到來的報稅季節中BlockFi加密貨幣客戶的報告需求。[2020/6/10]
對于那些聘請審計師的人,“審計”應包含什么沒有標準。即使是擬議的紐約市法律也要求對聘用算法進行年度審核,也無法說明應如何進行審核。一位審核員的批準印章比另一位審核員的審核意味深遠。
而且由于審計報告也幾乎總是受保密協議約束,因此兩家公司無法相互比較自己的工作。
喬杜里說:“最大的問題是,隨著這一領域的利潤越來越豐厚,我們將發現,我們確實需要什么是審計標準。”“外面有很多人愿意對某事進行審計,建立一個外觀漂亮的網站并每天稱其為日,然后無條件獲取現金。”
一些審計師說,即使聘用了審計師,科技公司也并不總是能如愿以償。
聲音 | 以太坊社區核心開發者:實施ProgPow算法提案正在進行第三方審計:據AMBcrypto報道,在最近的以太坊核心開發會議期間,以太坊社區核心開發者Hudson Jameson和其他開發人員共同討論了ProgPow相關開發進程。據悉,開發團隊尚未決定在以太坊網絡上的實施ProgPoW算法的時間表,該提案目前正在進行第三方審計。Hudson解釋說,審計將有“兩個組成部分”。第一部分是團隊試圖在ProgPow上籌集的資金;第二部分是檢查ASIC芯片制造商構建ProgPow ASIC需要多長時間。另外,EtherChain數據顯示,截止發稿的過去24小時,已經有57.8%的礦工投票決定是否實施ProgPow算法,這部分人都表示贊成。[2019/3/5]
Arthur的O'Sullivan說:“在這種情況下,商業秘密已足夠使這些算法能夠在晦暗黑暗的環境中運行,而我們不能擁有這種秘密。”
算法正義聯盟的審計師和研究合作者伊尼奧盧瓦·德博拉·拉吉表示,審計師處于無法訪問該軟件代碼并因此存在違反計算機訪問法律的風險。喬杜里說,當公司要求她允許他們在公開發布之前對其進行審查時,她拒絕了審計。
Zuloaga說,對于HireVue的審計,ORCAA采訪了利益相關者,包括HireVue員工,客戶,應聘者和算法公平專家,并確定了公司需要解決的問題。
ORCAA的評估并未考慮HireVue算法的技術細節,例如算法所訓練的數據或其代碼,盡管Zuloaga表示,該公司不以任何方式限制審計師的訪問權限。
Zuloaga說:“ORCAA要求提供有關這些分析的詳細信息,但他們的方法著眼于解決利益相關者如何受算法影響的問題。”
奧尼爾說,她無法對HireVue審核發表評論。
許多審核是在產品發布之前進行的,但這并不是說它們不會出現問題,因為算法不是憑空存在的。例如,當微軟建立一個聊天機器人時,一旦暴露給Twitter用戶,該聊天機器人便迅速變成種族主義者。
奧沙利文說:“一旦將其投入現實世界,即使有最好的意圖,也有可能出錯一百萬人。”“我們希望采用的框架還不夠完善。總有辦法使事情更加公平。”
因此,盡管并不常見,但一些預發行審核也將提供連續監視。奧沙利文說,這種做法在銀行和醫療保健公司中越來越流行。
奧沙利文的監視公司安裝了一個儀表板,該儀表板可實時查找算法中的異常情況。例如,如果公司的算法拒絕更多的女性貸款申請,它將在啟動后幾個月提醒公司。
最后,越來越多的對抗性審核機構,主要是由研究人員和一些記者進行的,他們未經公司的同意就對算法進行審查。例如,算法正義聯盟的創始人Raji和JoyBuolamwini,他們在亞馬遜Rekognition工具上的工作突顯了該軟件如何在沒有公司參與的情況下具有種族和性別偏見。
公司在審核后會修復其算法嗎?
無法保證公司將解決審計中提出的問題。
Raji說:“您可以進行質量審核,但仍然無法從公司那里獲得問責制。”“這需要大量精力來彌合獲取審計結果與將其轉化為責任之間的差距。”
公眾的壓力有時會迫使公司解決技術上的算法偏差-或未按技術公司的要求進行的審計,并由保密協議進行了審計。
拉吉說,性別陰影研究的研究發現了商業面部識別工具中的性別和種族偏見,并任命了IBM和Microsoft等公司來引發圍繞它的公開對話。
她說,但是圍繞算法的責任感很難引起關注。
盡管面部識別的偏見是可以解決的,但人們可以看到照片和錯誤率,并且可以理解種族歧視和性別偏見在技術中的后果,但與諸如利率算法偏見之類的東西聯系起來可能會更加困難。
拉吉說:“我們如此依賴公眾的呼聲,實在令人難過。”“如果公眾不理解,那就沒有罰款,也沒有法律上的影響。這讓它非常沮喪。”
那么如何改善算法審核呢?
在2019年,一群民主立法者提出了聯邦算法責任法案,該法案將要求公司對其算法進行審計,并解決審計在使用之前發現的任何偏見問題。
AIForthePeople的創始人MutaleNkonde是技術專家團隊的成員,該團隊幫助起草了該法案,并表示將為公司創建政府授權以進行審計并遵循這些審計。
她說:“就像藥物測試一樣,必須有某種類型的機構,例如食品和藥物管理局來研究算法。”“如果我們看到了不同的影響,那么該算法將不會投放市場。”
該法案從未付諸表決。
來自俄勒岡州的民主黨參議員羅恩·懷登表示,他計劃與參議員科里·布克和眾議員伊維特·克拉克重新引入該法案,并更新2019年版本。目前尚不清楚該法案是否將為審計制定標準,但這將要求公司根據其結果采取行動。
Wyden在一份聲明中說:“我同意研究人員,行業和政府需要努力建立公認的審計AI基準,以確保審計盡可能具有影響力。”“但是,在國會開始采取行動防止偏見污染自動化系統之前,要等到學術界達成完全共識的風險太大了。我認為我們需要在兩個方面都努力。”
大家早上好,我是玩幣隊長。任何人都有犯錯的時候,任何錯誤的行為都會讓人付出一定的代價,關鍵要看對待錯誤的態度.
1900/1/1 0:00:00近幾年來,很多投資者都有過這樣的疑問:“為什么華為、阿里、亞馬遜不使用IPFS&Filecoin,IPFS&Filecoin發展前景如何,到底能不能取代傳統的數據中心?”事實上.
1900/1/1 0:00:00v\:*{behavior:url(#default#VML);}o\:*{behavior:url(#default#VML);}x\:*{behavior:url(#default#VML).
1900/1/1 0:00:00繼Gate.io網格交易總交易資金量突破2億美元新紀錄后,Gate.io網格交易現貨單項投資額在短時間內突破2億美元!為與您共慶這一重要時刻,Gate.io隆重上線現貨網格交易破2億.
1900/1/1 0:00:00Gate.io招募HipoSwap體驗官,100個Wallet.ioS1免費領活動已圓滿結束,根據活動規則,我們已為符合規則的用戶發放了Wallet.ioS1獎勵,請中獎用戶留意近期物流信息.
1900/1/1 0:00:00產品 1、APP端V4.0最新版本于2月25日發布,此次LOEx交易中心最新4.0版本APP升級后,在整體美觀、交易速度、用戶體驗、安全等多個方面得到提升.
1900/1/1 0:00:00