查看網(wǎng)絡(luò)日志是調(diào)查系統(tǒng)故障 監(jiān)控系統(tǒng)運(yùn)行狀況的重要手段 管理員可以查看在某段時(shí)間內(nèi)所發(fā)生的事件 也可以通過(guò)對(duì) 各個(gè)日志文件進(jìn)行分析獲取知識(shí) 由于日志具有數(shù)據(jù)量大 不易讀懂的特點(diǎn) 如果僅憑借管理員查看日志記錄的手段 其中所蘊(yùn)含 的有用信息也難以發(fā)現(xiàn) 分布式計(jì)算技術(shù)正好可以用來(lái)解決這一難題 闡述了 syslog 日志收集流程 詳細(xì)介紹了 Hadoop 分布式計(jì) 算框架 設(shè)計(jì)并實(shí)現(xiàn)了一套基于 Hadoop 的網(wǎng)絡(luò)日志分析系統(tǒng) 實(shí)驗(yàn)證明該系統(tǒng)是有效而實(shí)用的