商湯AI倫理治理體系

修煉內(nèi)功 實(shí)現(xiàn)產(chǎn)品全生命周期倫理閉環(huán)管理

基于委員會(huì)規(guī)范化、機(jī)制化,、系統(tǒng)性的倫理治理實(shí)踐,商湯創(chuàng)新提出了平衡發(fā)展的AI倫理觀,明確了“可持續(xù)發(fā)展,、技術(shù)可控、以人為本”三項(xiàng)原則,以及發(fā)展“負(fù)責(zé)任且可評(píng)估”的人工智能治理的愿景目標(biāo),。圍繞這一目標(biāo),商湯建立了覆蓋產(chǎn)品全生命周期的風(fēng)險(xiǎn)控制機(jī)制,、開發(fā)了一系列流程工具和技術(shù)平臺(tái)、全面開展商業(yè)化模型安全體檢,、開展公司內(nèi)部科技倫理宣貫,、構(gòu)建國際化倫理治理生態(tài)體系,全面推進(jìn)人工智能倫理治理實(shí)踐。

針對(duì)人工智能領(lǐng)域面臨的數(shù)據(jù),、算法及應(yīng)用管理風(fēng)險(xiǎn),商湯覆蓋產(chǎn)品全生命周期的風(fēng)險(xiǎn)控制機(jī)制已初步形成了治理閉環(huán),。其中,在應(yīng)對(duì)算法風(fēng)險(xiǎn)方面,商湯通過建立“算法定級(jí)備案管理與安全評(píng)估機(jī)制”,成立“算法安全管理工作組”,從技術(shù)局限、算法設(shè)計(jì),、軟件缺陷,、數(shù)據(jù)安全、框架安全等多個(gè)維度對(duì)算法風(fēng)險(xiǎn)進(jìn)行安全評(píng)估,。在應(yīng)對(duì)應(yīng)用管理風(fēng)險(xiǎn)方面,商湯建立了“倫理風(fēng)險(xiǎn)分級(jí)分類管理機(jī)制”,設(shè)立“倫理風(fēng)險(xiǎn)審核小組”,對(duì)產(chǎn)品設(shè)計(jì),、開發(fā)、部署,、運(yùn)營的全生命周期實(shí)施分階段,、分目標(biāo)的分級(jí)分類管理。

商湯還開發(fā)一系列覆蓋數(shù)據(jù)治理,、算法測(cè)評(píng),、模型體檢、倫理審查的流程工具和技術(shù)平臺(tái),建立基于真實(shí)場(chǎng)景數(shù)據(jù)的算法測(cè)評(píng)體系,。其中,在應(yīng)對(duì)數(shù)據(jù)風(fēng)險(xiǎn)方面,商湯開發(fā)了統(tǒng)一的數(shù)據(jù)治理平臺(tái)以及規(guī)范的數(shù)據(jù)采集流程,通過自動(dòng)化標(biāo)注工具,減少人工接觸的數(shù)據(jù)量,在模型訓(xùn)練的源頭降低人類偏見的風(fēng)險(xiǎn),并且數(shù)據(jù)標(biāo)注平臺(tái)具備訪問控制和身份驗(yàn)證功能,僅能由認(rèn)證的數(shù)據(jù)標(biāo)注人員進(jìn)行訪問,。商湯還基于真實(shí)場(chǎng)景下數(shù)據(jù)集的算法驗(yàn)證與評(píng)測(cè),開發(fā)了“算法測(cè)評(píng)工具”,實(shí)現(xiàn)商業(yè)化算法的可信與可控,同時(shí)設(shè)計(jì)多元化的測(cè)評(píng)項(xiàng)目和指標(biāo)體系對(duì)算法進(jìn)行充分及全面的評(píng)測(cè),并積極參與建立行業(yè)標(biāo)準(zhǔn)。

面向系統(tǒng)安全需求,商湯自研的模型體檢工具能夠面向活體識(shí)別,、圖像分類,、目標(biāo)檢測(cè)等商業(yè)化應(yīng)用,開展對(duì)抗安全檢測(cè)、魯棒安全檢測(cè),、后門安全檢測(cè),不僅能夠支持多種任務(wù)類型,還能夠開箱即用,提供一鍵式測(cè)評(píng)反饋,目前已應(yīng)用于商湯的大量商業(yè)化模型的檢測(cè),。商湯還深刻認(rèn)識(shí)到發(fā)展負(fù)責(zé)任且可評(píng)估人工智能的關(guān)鍵在于在集團(tuán)層面形成倫理治理的組織文化,由此建立了倫理宣貫的定期宣傳和培訓(xùn)機(jī)制,每周面向全體員工發(fā)送人工智能治理相關(guān)重要?jiǎng)討B(tài),定期組織研討會(huì),、邀請(qǐng)內(nèi)外部專家開展倫理治理培訓(xùn)。

共創(chuàng)共治 構(gòu)建安全,、開放,、可評(píng)估的AI治理生態(tài)

為促進(jìn)治理標(biāo)準(zhǔn)的不斷健全和完善,商湯積極推動(dòng)國際化倫理研究治理生態(tài)體系的構(gòu)建。通過持續(xù)出版相關(guān)研究成果分享治理實(shí)踐,商湯希望吸收業(yè)界反饋以不斷完善治理標(biāo)準(zhǔn),。商湯還與高校,、科研院所、政府機(jī)構(gòu)開展常態(tài)化交流,今年攜手國際金融論壇,、新加坡人工智能國際研究院等國內(nèi)外機(jī)構(gòu)聯(lián)合發(fā)起“亞洲科技促進(jìn)可持續(xù)發(fā)展目標(biāo)聯(lián)盟”(Tech4SDG),旨在將科技治理倫理研究和治理作為重要事項(xiàng),與國內(nèi)外專家學(xué)者集思廣益,推動(dòng)AI加快數(shù)字經(jīng)濟(jì)迭代和可持續(xù)發(fā)展,。

本屆論壇期間,張望還受邀出席圓桌討論,進(jìn)一步解讀了“平衡發(fā)展”的AI倫理觀的內(nèi)涵。他表示,人工智能的治理與創(chuàng)新的關(guān)系類似汽車的“方向盤”和“剎車片”與“油門”的關(guān)系,。AI治理不僅如同“方向盤”可以引導(dǎo)技術(shù)研發(fā)和產(chǎn)品開發(fā)走向正確的方向,同時(shí)也具備“剎車片”功能,能夠及時(shí)制止AI創(chuàng)新往錯(cuò)誤的方向發(fā)展,。而“方向盤”和“剎車片”的力度大小又需要配合“油門”的輕重緩急,動(dòng)態(tài)調(diào)整,因此,AI治理需要適應(yīng)技術(shù)創(chuàng)新的節(jié)奏變化,做到張弛有度。

隨著技術(shù)與相關(guān)應(yīng)用的持續(xù)發(fā)展,全球AI倫理治理也將持續(xù)保持動(dòng)態(tài)發(fā)展,。針對(duì)新階段、新趨勢(shì),、新變化,商湯科技也在積極推進(jìn)倫理治理從對(duì)AI自身的治理探索,延伸到對(duì)智能駕駛,、元宇宙等商業(yè)場(chǎng)景的探索,并希望持續(xù)與高校智庫、科研院所,、行業(yè)同仁,共同探討,群策群力,加快建設(shè)安全開放可評(píng)估的AI治理生態(tài),。