眾包系統(tǒng)偏置標注問題研究.pdf_第1頁
已閱讀1頁,還剩128頁未讀, 繼續(xù)免費閱讀

下載本文檔

版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請進行舉報或認領(lǐng)

文檔簡介

1、近年來隨著諸如Amazon Mechanical Turk等眾包系統(tǒng)的出現(xiàn),很多無法通過機器智能完成的任務(wù)可以通過這種微型外包的方式交由在線用戶手工完成。機器學(xué)習(xí)和數(shù)據(jù)挖掘領(lǐng)域也從中受益,大量的樣本標注任務(wù)由傳統(tǒng)的耗時費力的專家標注方式轉(zhuǎn)變?yōu)楸姲鼧俗?,加快了?shù)據(jù)更新和模型迭代的速度。然而,由于眾包標注者的標注質(zhì)量無法保證,使得利用眾包標注數(shù)據(jù)進行機器學(xué)習(xí)面臨巨大挑戰(zhàn)。因此,如何利用多噪聲標簽進行機器學(xué)習(xí)具有重要的研究與應(yīng)用價值。本文從廣

2、泛存在的偏置標注問題著手,主要研究內(nèi)容如下:
  (1)從眾包系統(tǒng)數(shù)據(jù)質(zhì)量和模型質(zhì)量的概念以及偏置標注問題的定義出發(fā),理論上分析了偏置標注對大多數(shù)眾包系統(tǒng)中使用的多數(shù)投票策略所產(chǎn)生的影響。然后,對大量來自于眾包系統(tǒng)的實際數(shù)據(jù)進行分析,揭示出偏置標注問題的普遍性,并分析產(chǎn)生偏置標注的原因。最后,在幾個典型的偏置標注數(shù)據(jù)集上進行實驗,分析了基于期望最大化的算法的真值推理性能,從而得出偏置標注問題使得基于期望最大化算法性能退化的結(jié)論。<

3、br>  (2)針對二分類偏置標注問題,提出一種基于自動閾值估計的正標簽頻率閾值算法PLAT。該算法只依賴于每個樣本的多噪聲標簽集中正負標簽的分布,無需標注者質(zhì)量、底層數(shù)據(jù)分布、以及偏置水平等先驗知識。它能夠自動估計正負類劃分的閾值并進行真值推理。在人工合成數(shù)據(jù)集上的模擬和真實眾包數(shù)據(jù)集上的實驗顯示PLAT算法不但能在偏置標注環(huán)境下進行真值推理并構(gòu)建質(zhì)量較高的學(xué)習(xí)模型,在非偏置標注環(huán)境下該算法也能夠具備和當前算法相當?shù)男阅堋?br>  

4、(3)利用眾包系統(tǒng)進行樣本標注是一個動態(tài)過程,學(xué)習(xí)模型的構(gòu)建符合主動學(xué)習(xí)的視角。針對偏置標注中主動學(xué)習(xí)問題,提出一種新型的主動學(xué)習(xí)框架。該框架包含兩個核心過程:標簽真值推理和樣本選擇。在標簽真值推理過程中,使用PLAT算法推理訓(xùn)練數(shù)據(jù)集中每個帶有多噪聲標注集的樣本的集成標簽。在樣本選擇過程中,提出三種基于不確定度量的樣本選擇策略來提升模型學(xué)習(xí)的性能。這三種不確定度度量標準分別基于多噪聲標簽集和偏置程度(MLSI),基于學(xué)習(xí)模型和偏置程度

5、(CMPI),以及前兩者的混合策略(CFI)。在具有不同底層數(shù)據(jù)分布的多個數(shù)據(jù)集上的模擬和真實數(shù)據(jù)集上的實驗顯示CFI具有最好的性能。
  (4)針對多分類標注環(huán)境下偏置標注問題提出一種模糊化處理偏置標注的新算法GTIC。該算法通過聚類來提升從多個不確定標注者獲得集成標簽的性能。對于一個K分類標注問題,GTIC利用每個樣本的多噪聲標簽集生成其概念層聚類特征。然后,使用經(jīng)典的K-Means聚類算法將所有樣本聚成K個不同的簇。每個簇對

溫馨提示

  • 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
  • 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
  • 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
  • 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
  • 5. 眾賞文庫僅提供信息存儲空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負責(zé)。
  • 6. 下載文件中如有侵權(quán)或不適當內(nèi)容,請與我們聯(lián)系,我們立即糾正。
  • 7. 本站不保證下載資源的準確性、安全性和完整性, 同時也不承擔用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。

評論

0/150

提交評論