谷歌研究團隊推出VaultGemma,這是其首個采用差分隱私技術(shù)的大語言模型。該模型基于Gemma 2構(gòu)建,擁有10億參數(shù),通過在訓練階段引入校準噪聲來防止模型"記憶"敏感用戶數(shù)據(jù)。研究團隊建立了差分隱私縮放定律,平衡計算預算、隱私預算和數(shù)據(jù)預算。盡管添加差分隱私會影響準確性,但VaultGemma在性能上與同規(guī)模非私有模型相當。該模型現(xiàn)已在Hugging Face和Kaggle平臺開放下載。
谷歌推出全球最強差分私有大語言模型VaultGemma,這是一個10億參數(shù)的模型,基于Gemma架構(gòu)構(gòu)建。該模型采用先進數(shù)學算法防止敏感數(shù)據(jù)泄露,通過在數(shù)據(jù)集中添加受控噪聲實現(xiàn)隱私保護。VaultGemma在多項基準測試中表現(xiàn)卓越,性能可媲美同等參數(shù)的非私有模型,但完全不會暴露訓練數(shù)據(jù),為金融和醫(yī)療等監(jiān)管行業(yè)的AI應用提供重要保障。
來自華中科技大學數(shù)據(jù)庫隱私保護隊提交的《基于openGauss安全的差分隱私醫(yī)療診斷輔助查詢系統(tǒng)》,在全國總決賽中獲得高校賽openGuass開源應用創(chuàng)新賽道金獎。