近年來，隨著各行各業(yè)數(shù)據(jù)資源的極大豐富及大數(shù)據(jù)技術的不斷發(fā)展，大數(shù)據(jù)相關產(chǎn)業(yè)迎來了空前的發(fā)展機遇。大數(shù)據(jù)相關技術在各領域得到了廣泛的應用，例如，金融大數(shù)據(jù)、商業(yè)大數(shù)據(jù)、網(wǎng)絡輿情大數(shù)據(jù)及醫(yī)療與健康大數(shù)據(jù)等。對大數(shù)據(jù)人才的市場需求呈現(xiàn)井噴式增長。
各類大數(shù)據(jù)相關學科競賽的舉辦，有效促進了高等院校大數(shù)據(jù)相關專業(yè)教學模式的探索性改良，推進相關專業(yè)課程體系、教學內(nèi)容和教學方法等教學資源的質量提升和豐富完善，對于高校大數(shù)據(jù)相關專業(yè)建設的發(fā)展起到很好的促進作用。通過大數(shù)據(jù)學科競賽，能夠激發(fā)學生的自主學習熱情，培養(yǎng)學生的團隊意識和創(chuàng)新意識，提高了學生在平臺搭建、數(shù)據(jù)采集、數(shù)據(jù)分析與挖掘等方面的實踐能力，提高學生的專業(yè)技能，并踐行了理實一體化做學教一體化的教學模式。
本書是作者在長期從事大數(shù)據(jù)分析技術、數(shù)據(jù)挖掘教學和科學研究成果的基礎上，以大學生大數(shù)據(jù)技能競賽、智警杯公安系統(tǒng)大數(shù)據(jù)技能競賽為背景，以大數(shù)據(jù)分析與應用職業(yè)技能等級標準為參考編寫而成。全書共5章，系統(tǒng)介紹了Linux操作系統(tǒng)、數(shù)據(jù)庫技術、大數(shù)據(jù)平臺技術、數(shù)據(jù)采集與分析、數(shù)據(jù)挖掘與數(shù)據(jù)可視化等內(nèi)容。
第1章為Linux操作系統(tǒng)，主要介紹主機名、Hosts映射、防火墻配置等Linux常用命令，同時對時間同步、定時任務、遠程訪問等服務進行介紹。
第2章為數(shù)據(jù)庫技術，主要介紹了數(shù)據(jù)庫的安裝和配置、數(shù)據(jù)庫操作管理、數(shù)據(jù)表操作管理、視圖、權限管理、備份與還原、非關系型數(shù)據(jù)庫NoSQL等。
第3章為大數(shù)據(jù)平臺技術，主要介紹了Hadoop分布式大數(shù)據(jù)框架、Hive數(shù)據(jù)倉庫、HBase數(shù)據(jù)庫、Spark技術框架、ZooKeeper協(xié)調(diào)框架、Flume數(shù)據(jù)收集、Sqoop數(shù)據(jù)傳輸、Azkaban任務調(diào)度工具等大數(shù)據(jù)組件架構的應用，還介紹了故障排查、性能調(diào)優(yōu)等平臺運維管理方案。
第4章為數(shù)據(jù)采集與分析，主要介紹了HTTP原理、網(wǎng)頁組成、網(wǎng)絡請求、XPath解析、數(shù)據(jù)存儲等網(wǎng)絡信息獲取技術，同時對數(shù)據(jù)進行了統(tǒng)計分析方法介紹，包括描述性分析、探索性分析、缺失值分析等方法。
第5章為數(shù)據(jù)挖掘與數(shù)據(jù)可視化，介紹通過算法提取挖掘數(shù)據(jù)中的有用信息，主要內(nèi)容包括線性回歸、邏輯回歸、決策樹等算法，介紹如何對數(shù)據(jù)進行可視化呈現(xiàn)和數(shù)據(jù)分析報告的撰寫。
本書詳細介紹了大數(shù)據(jù)及數(shù)據(jù)分析的技術構成，理論和實踐緊密結合，可以幫助讀者梳理思路，對比不同技術的優(yōu)勢并做出選擇，從而更加符合產(chǎn)業(yè)發(fā)展的需求。
本書結合歷年競賽真題知識的解析，可作為參加大數(shù)據(jù)類競賽的輔導用書，同時配有全套教學課件、數(shù)據(jù)集、視頻、環(huán)境等實訓資源，亦可作為高等院校大數(shù)據(jù)相關專業(yè)、相關課程的實訓教材，或是培訓機構的培訓教材。
本書主編為李輝、張瑩、盧興民，副主編為胡健、張福華、蔣紅蘭，參編人員為王新猛、李鳳蓮、王彥平、李超、楊海迎。在本書編寫過程中，特別是真題梳理驗證過程中，北京紅亞華宇科技有限公司提供了資料協(xié)助和平臺支持，在此表示衷心感謝。
大數(shù)據(jù)技能競賽知識點解析與實踐由于編者水平有限，加之大數(shù)據(jù)技術的發(fā)展日新月異，書中難免會有疏漏和不妥之處，敬請廣大讀者批評指正。

編者