1、社會(huì)保險(xiǎn)業(yè)務(wù)作為全國一項(xiàng)基本惠民國策，正在有序而實(shí)效的展開。隨著業(yè)務(wù)系統(tǒng)的不斷增加，系統(tǒng)需要管理的設(shè)備也不斷增加，硬件系統(tǒng)故障也越來越多。查看網(wǎng)絡(luò)日志作為一個(gè)基本手段，是查看、解決系統(tǒng)故障的重要措施，也是監(jiān)控系統(tǒng)運(yùn)行狀態(tài)的重要方法。但目前日志信息數(shù)據(jù)量大，難以理解，對系統(tǒng)管理員來說手工查看記錄日志來說，不僅數(shù)據(jù)量太大的問題難以解決，更會(huì)直接導(dǎo)致對系統(tǒng)日志中的有用信息難以發(fā)現(xiàn)。
　　本文使用Hadoop分布式計(jì)算框架來解決這個(gè)問題，

2、利用使用系統(tǒng)自帶的syslog日志進(jìn)行收集、整理工作。細(xì)致對Hadoop分布式框架進(jìn)行分析，對原有系統(tǒng)syslog文件傳輸進(jìn)行分析，在此基礎(chǔ)上對原有分布在在各地需要的主機(jī)快速有效的收集日志，設(shè)計(jì)并實(shí)現(xiàn)一套基于Hadoop的社保網(wǎng)絡(luò)日志分析系統(tǒng)，實(shí)現(xiàn)原有syslog日志文件整理、分析。
　　本文綜合考慮到目前社保網(wǎng)絡(luò)中的日志特點(diǎn)，使用Hadoop的HDFS分布式文件系統(tǒng)進(jìn)行搭建環(huán)境，為原系統(tǒng)提供有效、實(shí)用、快速的分析結(jié)果，使用戶對整