前 言
· III ·
在數(shù)據(jù)飛速增長的今天，數(shù)據(jù)產(chǎn)生的路徑也多種多樣，如網(wǎng)頁數(shù)據(jù)、客戶端APP數(shù)據(jù)、
操作系統(tǒng)數(shù)據(jù)、服務(wù)容器數(shù)據(jù)等，如何快速、準確地采集這些數(shù)據(jù)成為開發(fā)人員必須面對
的問題。不管是大數(shù)據(jù)、云計算還是人工智能技術(shù)的實現(xiàn)都離不開數(shù)據(jù)，都需要以數(shù)據(jù)為支
撐，因此數(shù)據(jù)采集技術(shù)應(yīng)運而生。數(shù)據(jù)采集人員可以根據(jù)數(shù)據(jù)來源的不同，選擇合適的技術(shù)
來實現(xiàn)海量數(shù)據(jù)的高效采集。
本書為數(shù)據(jù)采集的實現(xiàn)提供技術(shù)指導，可幫助開發(fā)人員快速實現(xiàn)不同類型數(shù)據(jù)的采集。
本書的特點
本書以不同類型數(shù)據(jù)采集的實現(xiàn)為主線，通過理論與實踐相結(jié)合的方式，詳細地對數(shù)據(jù)采
集技術(shù)的使用進行講解，涉及多個數(shù)據(jù)采集技術(shù)，主要包含Scrapy網(wǎng)絡(luò)爬蟲技術(shù)、Windows操
作系統(tǒng)數(shù)據(jù)采集技術(shù)、Apache容器和Tomcat容器數(shù)據(jù)采集技術(shù)、JavaScript埋點式數(shù)據(jù)采集技術(shù)
等，在提高實際開發(fā)水平和項目能力的同時，加深對理論知識的掌握。全書知識點講解詳細，
在便于教師教學、學生理解的同時，還保持了整本書的知識深度。
本書結(jié)構(gòu)條理清晰、內(nèi)容詳細，每個項目都通過項目情景、學習目標、任務(wù)描述、任務(wù)
步驟、知識儲備、拓展任務(wù)、任務(wù)總體評價和練習題8個模塊進行相應(yīng)知識的講解。其中，項
目情景通過實際情景對本項目學習的主要內(nèi)容進行講解，學習目標對本項目內(nèi)容的學習提出要
求、任務(wù)描述對當前任務(wù)的實現(xiàn)進行概述，任務(wù)步驟對當前任務(wù)進行具體的實現(xiàn)，知識儲備對
當前項目所需知識進行講解，拓展任務(wù)對當前知識進行補充，使學生全面掌控所講內(nèi)容。
本書的主要內(nèi)容
本書共6個項目。
項目1從網(wǎng)頁數(shù)據(jù)采集開始，分別講述了Scrapy的安裝、項目結(jié)構(gòu)、采集流程以及操作命
令使用、Spider和Selectors編寫、數(shù)據(jù)保存等。
項目2詳細介紹了Windows操作系統(tǒng)數(shù)據(jù)采集的過程，包含操作系統(tǒng)結(jié)構(gòu)、進程及進程管
理、資源分配與調(diào)度、設(shè)備管理、文件管理系統(tǒng)、Windows的種類與應(yīng)用、Windows的Shell腳
本以及Windows用戶的日志數(shù)據(jù)拆分。
項目3詳細介紹了Linux基本操作，包括Linux發(fā)展史、Linux在各領(lǐng)域的發(fā)展、Linux常見發(fā)
行版、用戶操作、目錄操作、文件操作以及Linux的Shell腳本等。
項目4詳細介紹了Apache容器數(shù)據(jù)采集，包括中間件容器的概述、Apache的歷史與發(fā)展、
Apache的管理與使用以及Apache日志文件等。
項目5詳細介紹了Tomcat容器數(shù)據(jù)采集，包括Tomcat的應(yīng)用和Linux下查看Tomcat狀態(tài)和日志。
PREFACE
· IV ·
項目6詳細介紹了JavaScript埋點式數(shù)據(jù)采集，包括JavaScript埋點式數(shù)據(jù)采集的意義、埋點
技術(shù)分析以及埋點實現(xiàn)方案等。
教學建議
項　　目操作學時理論學時
項目1　Scrapy框架網(wǎng)頁數(shù)據(jù)采集4 4
項目2　Windows操作系統(tǒng)數(shù)據(jù)采集4 4
項目3　Linux基本操作4 4
項目4　Apache容器數(shù)據(jù)采集4 4
項目5　Tomcat容器數(shù)據(jù)采集4 4
項目6　JavaScript埋點式數(shù)據(jù)采集4 4
本書由浪潮優(yōu)派科技教育有限公司組編，由穆建平、陳天真任主編，宋磊、許國彬、劉濤
任副主編，參與編寫的還有李海斌、王緒良、商程。
由于編者水平有限，書中難免出現(xiàn)疏漏或不足之處，懇請讀者批評指正。
編　者