深圳2022年11月15日 /美通社/ -- 11月6-9日,第31屆國(guó)際人工智能聯(lián)合會(huì)議-中國(guó)會(huì)議(IJCAI 2022 China)在深圳坪山燕子湖國(guó)際會(huì)展中心召開(kāi)。其中,大會(huì)主題論壇《隱私計(jì)算與聯(lián)邦學(xué)習(xí)》由微眾銀行、聯(lián)邦學(xué)習(xí)FATE開(kāi)源社區(qū)、香港科技大學(xué)、清華大學(xué)智能產(chǎn)業(yè)研究院、廈門(mén)大學(xué)、深圳大學(xué)、中國(guó)科學(xué)院計(jì)算研究所、南洋理工大學(xué)、騰訊云等國(guó)內(nèi)外知名企業(yè)、高校和機(jī)構(gòu)聯(lián)合主辦,并于11月8日在線上線下同步順利進(jìn)行。
數(shù)據(jù)要素的戰(zhàn)略性意義已成為全球共識(shí),隱私計(jì)算正快步邁進(jìn)規(guī)模化商業(yè)應(yīng)用階段。隱私計(jì)算和聯(lián)邦學(xué)習(xí)為數(shù)據(jù)要素高效流通提供了可行的方案,被業(yè)界廣泛關(guān)注和使用,同時(shí)也成為人工智能?chē)?guó)際頂會(huì)上的熱門(mén)方向之一。在此背景下,本次論壇邀請(qǐng)了數(shù)位隱私計(jì)算和聯(lián)邦學(xué)習(xí)研究和應(yīng)用領(lǐng)域的帶頭人進(jìn)行特邀演講,并且邀請(qǐng)被接收論文的作者分享最新的研究成果。
專(zhuān)家學(xué)者云集,助力隱私計(jì)算與聯(lián)邦學(xué)習(xí)大發(fā)展
論壇榮譽(yù)主席、香港科技大學(xué)計(jì)算機(jī)與工程系講席教授和前系主任、微眾銀行首席人工智能官楊強(qiáng)教授發(fā)表題為《可信聯(lián)邦學(xué)習(xí)》的主題演講。楊強(qiáng)教授表示,聯(lián)邦學(xué)習(xí)是人工智能和隱私計(jì)算的重要交集,如何使聯(lián)邦學(xué)習(xí)更加安全可信和高效是今后產(chǎn)業(yè)和學(xué)界關(guān)注的重點(diǎn),可信聯(lián)邦學(xué)習(xí)的提出順應(yīng)了產(chǎn)業(yè)發(fā)展的新趨勢(shì)。開(kāi)源是可信聯(lián)邦學(xué)習(xí)實(shí)現(xiàn)普惠的重要路徑,在開(kāi)源平臺(tái)的支撐下,聯(lián)邦學(xué)習(xí)在多個(gè)場(chǎng)景涌現(xiàn)出了優(yōu)秀的應(yīng)用案例,并且分享了FATE開(kāi)源社區(qū)最新工作進(jìn)展和未來(lái)發(fā)展規(guī)劃。此外,楊強(qiáng)教授還展望了跨平臺(tái)互聯(lián)互通、完善聯(lián)邦學(xué)習(xí)安全機(jī)制等行業(yè)未來(lái)發(fā)展重點(diǎn),給聯(lián)邦學(xué)習(xí)的進(jìn)一步發(fā)展指明了方向。
針對(duì)聯(lián)邦學(xué)習(xí)系統(tǒng)中的效率、安全、性能平衡與優(yōu)化問(wèn)題,論壇主席、清華大學(xué)智能產(chǎn)業(yè)研究院副研究員劉洋博士發(fā)表了《聯(lián)邦學(xué)習(xí)系統(tǒng)中效率-安全-性能平衡探索》主題演講,介紹了最新研究進(jìn)展。劉洋博士指出,數(shù)據(jù)安全與隱私,傳輸效率,異構(gòu)數(shù)據(jù)、異構(gòu)設(shè)備的適配,訓(xùn)練效果等是聯(lián)邦學(xué)習(xí)當(dāng)前面臨的核心問(wèn)題,聯(lián)邦學(xué)習(xí)安全分級(jí)評(píng)估,聯(lián)邦學(xué)習(xí)防御評(píng)估,防御標(biāo)簽和后門(mén)攻擊,F(xiàn)edBCG,F(xiàn)edSSO,F(xiàn)edGEMS,TailorFL等多項(xiàng)最新研究進(jìn)展為構(gòu)建安全高效的聯(lián)邦學(xué)習(xí)框架提出新的解決思路和挑戰(zhàn)問(wèn)題。
中國(guó)科學(xué)院計(jì)算技術(shù)研究所所務(wù)委員/研究員、智能研究部主任陳益強(qiáng)研究員詳細(xì)介紹了名為《MetaFed:一種基于環(huán)形知識(shí)蒸餾的元聯(lián)邦學(xué)習(xí)框架》的最新論文。該論文提出了"元聯(lián)邦"既"聯(lián)邦之聯(lián)邦"概念,及MetaFed層次化動(dòng)態(tài)環(huán)聯(lián)邦學(xué)習(xí)框架。通過(guò)自適應(yīng)的環(huán)形知識(shí)蒸餾,累積通用知識(shí),舍棄冗余知識(shí),以較小通信代價(jià),達(dá)到在無(wú)中心服務(wù)端參與情形下獲取精度提升及個(gè)性化學(xué)習(xí)。在分享的最后,陳益強(qiáng)研究員提出了"模型即服務(wù)",像互聯(lián)網(wǎng)一樣方便快捷的"中國(guó)模型網(wǎng)"等未來(lái)愿景。
針對(duì)如何解決聯(lián)邦學(xué)習(xí)面臨的公平與激勵(lì)問(wèn)題,論壇主席、新加坡南洋理工大學(xué)計(jì)算機(jī)科學(xué)與工程學(xué)院南洋助理教授于涵進(jìn)行了《Contribution and Fairness-Aware Federated Learning》主題演講,創(chuàng)新性地提出了相關(guān)解決方案。于涵教授表示,聯(lián)邦學(xué)習(xí)要實(shí)現(xiàn)快速發(fā)展,需要一個(gè)良好生態(tài)的支持。而只有滿足公平,同時(shí)對(duì)貢獻(xiàn)者進(jìn)行適當(dāng)激勵(lì)才能激勵(lì)大家積極參與共同建設(shè),從而形成良好的行業(yè)生態(tài)環(huán)境。
產(chǎn)學(xué)精英匯聚,推動(dòng)隱私計(jì)算與聯(lián)邦學(xué)習(xí)前沿實(shí)踐
聯(lián)邦學(xué)習(xí)已在金融、醫(yī)療、營(yíng)銷(xiāo)廣告與推薦、智慧城市等多行業(yè)多領(lǐng)域廣泛落地探索,除了最新理論研究進(jìn)展分享,多位嘉賓介紹了工業(yè)實(shí)踐成果,為聯(lián)邦學(xué)習(xí)的行業(yè)應(yīng)用提供了標(biāo)桿案例。
基于聯(lián)邦學(xué)習(xí)在推薦領(lǐng)域的實(shí)踐,深圳大學(xué)軟件工程研究中心副主任潘微科副教授分享了跨用戶聯(lián)邦推薦(Cross-User Federated Recommendation)方面的研究進(jìn)展,并重點(diǎn)介紹了一個(gè)通用的跨用戶聯(lián)邦推薦框架FMSS。在該框架中,通過(guò)虛假標(biāo)記和秘密共享兩個(gè)技術(shù),可以實(shí)現(xiàn)在評(píng)分預(yù)測(cè)、物品排序和序列推薦等聯(lián)邦推薦場(chǎng)景中保護(hù)用戶的評(píng)分?jǐn)?shù)值和評(píng)分行為,從而達(dá)到隱私保護(hù)的目的。此外,通過(guò)分析和實(shí)驗(yàn)展示了該框架的安全性和無(wú)損性。
營(yíng)銷(xiāo)與廣告領(lǐng)域是聯(lián)邦學(xué)習(xí)的重要應(yīng)用場(chǎng)景,騰訊 Angel PowerFL 隱私計(jì)算平臺(tái)負(fù)責(zé)人程勇博士帶來(lái)題為《聯(lián)邦深度學(xué)習(xí):最新進(jìn)展和應(yīng)用》的主題演講,聚焦在縱向聯(lián)邦深度學(xué)習(xí)(VFDL)領(lǐng)域,從程序化廣告場(chǎng)景中的數(shù)據(jù)協(xié)同應(yīng)用難題,以及跨域推薦場(chǎng)景里的數(shù)據(jù)協(xié)同應(yīng)用難題等現(xiàn)實(shí)應(yīng)用挑戰(zhàn)切入,分享了VFDL如何在實(shí)踐中不斷優(yōu)化迭代,從而更好滿足業(yè)務(wù)需求,助力業(yè)務(wù)持續(xù)增長(zhǎng)目標(biāo)。程勇博士認(rèn)為,VFDL具有很高的研究?jī)r(jià)值和應(yīng)用潛力,探索空間很大,下一步將帶領(lǐng)團(tuán)隊(duì)重點(diǎn)探索SplitNN之外的下一代VFDL訓(xùn)練和推理架構(gòu)(Go beyond SplitNN)。
數(shù)字福建城市交通大數(shù)據(jù)研究所(廈門(mén)大學(xué))常務(wù)副所長(zhǎng)范曉亮分享了《數(shù)字教育領(lǐng)域的隱私計(jì)算應(yīng)用初探》。他指出,數(shù)據(jù)作為一種新型的生產(chǎn)要素,已經(jīng)成為數(shù)字經(jīng)濟(jì)的發(fā)展基石,隱私計(jì)算的需求也愈發(fā)旺盛。除了在金融、醫(yī)療、政務(wù)、運(yùn)營(yíng)商場(chǎng)景外,在高等學(xué)校數(shù)字化轉(zhuǎn)型領(lǐng)域也有迫切的隱私計(jì)算需求。今年剛好是高等教育數(shù)字化轉(zhuǎn)型元年,廈門(mén)大學(xué)和中國(guó)信通院牽頭了國(guó)內(nèi)首個(gè)隱私計(jì)算應(yīng)用面向高等教育數(shù)字化場(chǎng)景的應(yīng)用規(guī)范的團(tuán)體標(biāo)準(zhǔn),旨在引領(lǐng)高等高校內(nèi)部機(jī)構(gòu)之間、高校之間以及高校與外部之間在課程、實(shí)踐、學(xué)生評(píng)價(jià)、產(chǎn)學(xué)研合作等全流程的數(shù)據(jù)安全流通和隱私計(jì)算應(yīng)用。
除了嘉賓的分享,8篇被IJCAI 2022接收的隱私計(jì)算與聯(lián)邦學(xué)習(xí)相關(guān)的論文的作者也進(jìn)行了現(xiàn)場(chǎng)論文講解,分享了最新的研究成果。同時(shí),論壇還設(shè)置了問(wèn)答互動(dòng)環(huán)節(jié),聽(tīng)眾和論文作者進(jìn)行實(shí)時(shí)探討交流。
最后,論壇主席、微眾銀行人工智能首席科學(xué)家范力欣博士對(duì)整個(gè)論壇進(jìn)行了精彩的總結(jié)發(fā)言。范力欣博士指出,本場(chǎng)隱私計(jì)算和聯(lián)邦學(xué)習(xí)論壇從技術(shù)原理、現(xiàn)實(shí)挑戰(zhàn)、實(shí)踐應(yīng)用、前沿探索等多個(gè)方面進(jìn)行了全面的分享和討論,精彩紛呈。對(duì)于來(lái)參會(huì)的IJCAI 2022優(yōu)秀論文作者表示感謝并提出期望,鼓勵(lì)大家能夠勇于突破和敢于提出好的研究問(wèn)題。提出一個(gè)好的問(wèn)題往往比解決一個(gè)問(wèn)題更難也更重要,希望未來(lái)有好的問(wèn)題、新的方向不斷涌出,一起助力整個(gè)行業(yè)蓬勃發(fā)展。
隱私計(jì)算和聯(lián)邦學(xué)習(xí)論壇作為第31屆國(guó)際人工智能聯(lián)合會(huì)議-中國(guó)會(huì)議的重要組成部分,云集了多位行業(yè)專(zhuān)家學(xué)者和優(yōu)秀論文作者。通過(guò)精彩分享和觀點(diǎn)碰撞,使得隱私計(jì)算和聯(lián)邦學(xué)習(xí)對(duì)于數(shù)據(jù)要素高效流通的重要意義達(dá)到更廣泛的共識(shí),提升了技術(shù)落地應(yīng)用廣度和深度,推動(dòng)了技術(shù)生態(tài)快速、高質(zhì)量發(fā)展。相信隱私計(jì)算和聯(lián)邦學(xué)習(xí)的發(fā)展將會(huì)為未來(lái)AI的應(yīng)用、數(shù)據(jù)要素的流通、數(shù)字經(jīng)濟(jì)的深入發(fā)展指引新的方向。