DoNews6月11日消息，據(jù)網(wǎng)信上海公眾號消息，為貫徹落實中央網(wǎng)信辦“清朗·整治AI技術濫用”工作部署，4月下旬以來，上海市委網(wǎng)信辦聚焦6類突出問題深入開展第一階段專項行動。現(xiàn)向社會公布階段性工作成果，進一步凝聚共識，共同營造清朗網(wǎng)絡生態(tài)。
全面清理整治違規(guī)AI產(chǎn)品和信息
上海市委網(wǎng)信辦指導小紅書、嗶哩嗶哩、拼多多等15家重點網(wǎng)站平臺，集中清理“一鍵脫衣”、未經(jīng)授權(quán)的人臉或人聲克隆編輯、未備案等違規(guī)AI產(chǎn)品、商品及相關營銷、炒作、推廣、教程信息。小紅書、嗶哩嗶哩主動發(fā)布專項行動治理公告，開通了有害AI內(nèi)容的舉報受理處置渠道；星野開展智能體全面排查清理。
各重點網(wǎng)站和AI平臺共攔截清理相關違法違規(guī)信息82萬余條，處置違規(guī)賬號1400余個，下線違規(guī)智能體2700余個。經(jīng)整治，網(wǎng)絡違規(guī)AI信息顯著減少。
上海市委網(wǎng)信辦深化大模型合規(guī)指導服務中心作用，指導各類提供生成式人工智能服務的主體落實合規(guī)義務，強化安全評估，迄今已完成82款大模型備案，87款應用登記。對3款未履行備案或登記程序提供服務且存在風險的應用，依法約談并給予行政處罰。
提升AI平臺安全風控能力
上海市委網(wǎng)信辦指導重點AI平臺加強技術源頭治理，深化自查自糾，加強訓練語料管理機制，加強新版本新應用上線、API接入應用的安全管理，用好大模型能力持續(xù)提升安全水平，建立健全與業(yè)務規(guī)模相適應的風控機制。
組織專業(yè)機構(gòu)對8家企業(yè)14款AI類應用開展了巡查測試，對部分重點平臺開展現(xiàn)場檢查和上門指導，發(fā)現(xiàn)并督導整改優(yōu)化內(nèi)容審核、意圖識別等安全措施的薄弱環(huán)節(jié)。通過系統(tǒng)性排查和閉環(huán)整改，上海重點AI平臺和重點平臺AI應用的合規(guī)性、安全可控性持續(xù)增強。
強化重點領域AI安全管理
針對關乎人民群眾“生命線”“錢袋子”和“未成年人保護”等社會高度關注的AI應用，上海市委網(wǎng)信辦會同市衛(wèi)健委、金融監(jiān)管等主管部門，對申請備案、登記的垂域模型和應用加強審核和業(yè)務指導，對33款已完成備案、登記提供醫(yī)療健康、金融、教育、情感陪伴服務的AI應用開展督導檢查，要求完善行業(yè)領域安全審核和控制機制，加強專業(yè)知識庫和檢索增強能力建設，提升輸出準確性，防范虛假、誤導、誘導沉迷對患者、投資者、未成年人帶來的不良影響。
聯(lián)合市衛(wèi)健委，指導上海人工智能實驗室舉辦了醫(yī)療大模型開源評測社區(qū)上線發(fā)布會和上海網(wǎng)絡安全博覽會“醫(yī)學人工智能安全”論壇，面向全市各醫(yī)療機構(gòu)、醫(yī)療服務企業(yè)開展AI安全宣貫和合規(guī)指導，依托上海市醫(yī)療大模型應用檢測驗證中心對16家機構(gòu)20個AI醫(yī)療場景開展評估，結(jié)合模型安全性評價和業(yè)務驗證，強化行業(yè)規(guī)范和倫理審查，指導安全加固，引導規(guī)范應用。
強化AIGC標識示范和全鏈條治理
上海市委網(wǎng)信辦將高標準落實《人工智能生成合成內(nèi)容標識辦法》及配套強制性國家標準作為專項治理的關鍵抓手，切實保障公眾知情權(quán)。先后組織開展了4場面向大模型企業(yè)、重點網(wǎng)站平臺、應用企業(yè)的法規(guī)宣貫和專題交流，覆蓋企業(yè)400余家，深入解讀標識要求和技術路徑，推動企業(yè)從“要我落實”轉(zhuǎn)向“我要落實”。
指導成立AIGC標識生態(tài)聯(lián)盟，上海人工智能安全治理實驗室聯(lián)合重點大模型企業(yè)、網(wǎng)站平臺，合力推進標識互認、能力共享與標準協(xié)同。
圍繞“制作-傳播”環(huán)節(jié)，指導重點網(wǎng)站平臺加快配備顯式與隱式標識功能，不斷提升AIGC內(nèi)容、AI高風險行為的檢測識別和治理能力。通過政策指導、生態(tài)協(xié)同與技術落地，稀宇科技、階躍星辰、通義、小紅書、嗶哩嗶哩、Soul等已基本完成顯式標識規(guī)范上線，加快開發(fā)上線隱式標識和傳播鏈互認驗證，小紅書牽頭編制圖片模態(tài)元數(shù)據(jù)標識實踐指南，上海標識工作取得階段性成效。
上海市委網(wǎng)信辦將持續(xù)深化專項行動，統(tǒng)籌技術治理、制度建設和生態(tài)優(yōu)化，強化對重點問題、平臺、環(huán)節(jié)的常態(tài)化監(jiān)管，推動智能向善。第二階段將聚焦AI造謠、低俗內(nèi)容等7類突出問題加大整治力度，維護良好網(wǎng)絡生態(tài)。上海將切實落實習近平總書記考察上海的重要指示，力爭在人工智能發(fā)展和治理各方面走在前列，產(chǎn)生示范效應。
