面向隱私保護(hù)的多方協(xié)作集成學(xué)習(xí)算法研究.pdf

1、集成學(xué)習(xí)是大數(shù)據(jù)分析中重要的組成部分，它通過(guò)學(xué)習(xí)一系列的規(guī)則并將它們組合起來(lái)共同解決一個(gè)問(wèn)題，如分類、回歸。當(dāng)多方協(xié)作地建立集成學(xué)習(xí)模型時(shí)，如何確保該模型的有效性和隱私性是集成學(xué)習(xí)研究方向的一個(gè)挑戰(zhàn)。不同機(jī)構(gòu)獨(dú)立地建立本地的集成學(xué)習(xí)模型，由于受限于數(shù)據(jù)資源大小和計(jì)算資源規(guī)模，故模型的性能難以滿足大數(shù)據(jù)挖掘的需要。傳統(tǒng)的多方用戶共享數(shù)據(jù)或者集成學(xué)習(xí)模型的方法，存在個(gè)人隱私泄露的風(fēng)險(xiǎn)。
　　本文提出面向差分隱私的多方協(xié)作的集成學(xué)習(xí)框架

2、和具體算法。方案的主要思想是多方在本地建立集成學(xué)習(xí)分類器，分類器是受到差分隱私約束的，能夠保護(hù)個(gè)體的敏感屬性；在半誠(chéng)實(shí)的中心機(jī)構(gòu)融合多個(gè)機(jī)構(gòu)的集成學(xué)習(xí)分類器，然后再分發(fā)給各個(gè)機(jī)構(gòu)。融合函數(shù)考慮了每個(gè)本地集成學(xué)習(xí)分類器的準(zhǔn)確度和各方的數(shù)據(jù)量大小，并使得不同的本地模型在最終的融合模型中有不同的權(quán)重貢獻(xiàn)?；诖丝蚣?，實(shí)現(xiàn)了差分隱私約束下的隨機(jī)森林算法（CRFsDP）和自適應(yīng)提升算法（CAdaBoostDP）；理論分析和實(shí)驗(yàn)結(jié)果證明了本文的方案

3、在隱私和模型有效性之間尋找到平衡點(diǎn)，并且個(gè)性化的隱私預(yù)算配置能夠提升融合分類器的性能。
　　本文在提出的差分隱私方案基礎(chǔ)上，討論了廣告點(diǎn)擊率預(yù)估的隱私問(wèn)題。有效地預(yù)測(cè)廣告點(diǎn)擊率是解決包括廣告推薦、產(chǎn)品定位和用戶畫像等問(wèn)題的基礎(chǔ)，在計(jì)算廣告學(xué)方向具有舉足輕重的地位。首先設(shè)計(jì)了混淆方法，即直接向廣告點(diǎn)擊數(shù)據(jù)集加入噪聲記錄。其次通過(guò)在KDD CUP2012真實(shí)數(shù)據(jù)集的實(shí)驗(yàn)比較了混淆和差分隱私兩種方法，實(shí)驗(yàn)結(jié)果也說(shuō)明差分隱私的策略使得融合