1、隨著互聯(lián)網(wǎng)技術(shù)的高速發(fā)展，我們正從信息時(shí)代步入數(shù)據(jù)時(shí)代，數(shù)據(jù)量的增長(zhǎng)速度呈現(xiàn)幾何式趨勢(shì)。現(xiàn)在比較流行的網(wǎng)絡(luò)服務(wù)，如：淘寶、微信、微博、證券等，每天都會(huì)產(chǎn)生數(shù)以萬(wàn)計(jì)的數(shù)據(jù)。對(duì)于互聯(lián)網(wǎng)產(chǎn)生的這些數(shù)據(jù)，都包含了大量與用戶相關(guān)的行為數(shù)據(jù)，挖掘隱藏在數(shù)據(jù)背后的價(jià)值信息，可以幫助企業(yè)更好的了解市場(chǎng)和決策提供有效的支持。本文主要是通過(guò)網(wǎng)絡(luò)爬蟲(chóng)挖掘出用戶的行為數(shù)據(jù)，然后通過(guò)這些數(shù)據(jù)進(jìn)行分析和構(gòu)建用戶征信預(yù)測(cè)模型。
　　傳統(tǒng)的用戶征信預(yù)測(cè)都是依靠專

2、家經(jīng)驗(yàn)?zāi)Ｐ突蛘呓?jīng)驗(yàn)豐富的專業(yè)人士主觀判斷得出相對(duì)應(yīng)的結(jié)論，其專家經(jīng)驗(yàn)?zāi)Ｐ偷奶幚矸绞揭彩窃趩螜C(jī)上進(jìn)行。然而，面對(duì)越來(lái)越多的數(shù)據(jù)，申請(qǐng)人數(shù)逐漸增加的情況下，業(yè)務(wù)辦理效率的劣勢(shì)逐漸體現(xiàn)出來(lái)，這些問(wèn)題需要研發(fā)人員提供有科學(xué)依據(jù)的模型和計(jì)算方式彌補(bǔ)這些劣勢(shì)。分布式平臺(tái)的出現(xiàn)剛好解決了這些問(wèn)題。使得在海量數(shù)據(jù)的情況下仍然可以快速的處理和運(yùn)用這些數(shù)據(jù)，而不是在單機(jī)中消耗更多的時(shí)間進(jìn)行處理。
　　本文研究的主要工作是在某公司提供API接口的情況下

3、，運(yùn)用網(wǎng)絡(luò)爬蟲(chóng)技術(shù)對(duì)該公司2016年的訂單信息表和用戶詳細(xì)信息表進(jìn)行爬取，把爬取出來(lái)的數(shù)據(jù)經(jīng)過(guò)數(shù)據(jù)清洗等操作后，得到比較清晰的數(shù)據(jù)樣式，然后對(duì)這些數(shù)據(jù)進(jìn)行統(tǒng)計(jì)分析，發(fā)現(xiàn)用戶下單規(guī)律，從而可以優(yōu)化企業(yè)的系統(tǒng)服務(wù)架構(gòu)和升級(jí)銷售策略。并且，在此基礎(chǔ)上，構(gòu)建了用戶征信預(yù)測(cè)模型，該模型選用了隨機(jī)森林分類算法，有20個(gè)輸入變量，訓(xùn)練集有20萬(wàn)條數(shù)據(jù)，這些數(shù)據(jù)都是與用戶相關(guān)聯(lián)的信息。把訓(xùn)練出來(lái)的模型運(yùn)用分布式系統(tǒng)中，通過(guò)準(zhǔn)確率和處理數(shù)據(jù)時(shí)間效率進(jìn)行實(shí)