-
>
全國計算機等級考試最新真考題庫模擬考場及詳解·二級MSOffice高級應用
-
>
決戰行測5000題(言語理解與表達)
-
>
軟件性能測試.分析與調優實踐之路
-
>
第一行代碼Android
-
>
JAVA持續交付
-
>
EXCEL最強教科書(完全版)(全彩印刷)
-
>
深度學習
大數據平臺搭建與維護 版權信息
- ISBN:9787302678366
- 條形碼:9787302678366 ; 978-7-302-67836-6
- 裝幀:平裝-膠訂
- 冊數:暫無
- 重量:暫無
- 所屬分類:>
大數據平臺搭建與維護 本書特色
《大數據平臺搭建與維護》篇幅適中,層次分明,條理清楚,圖文并茂,深入淺出、詳略得當、 項目任務,易讀易懂。《大數據平臺搭建與維護》把完成任務的具體的各個步驟、操作要領、注 意事項、解決方法羅列 出來,*終按照工作手冊,完成工作任務,體現了完成每一個任務的完 整操作步驟、要領、技巧。《大數據平臺搭建與維護》可作為高等職業學院計算機類大數據技術、大數據工程技術的專業教材,也可供科學研究和工程技術人員以及廣大大數據技術愛好者自學或參考。
大數據平臺搭建與維護 內容簡介
"《大數據平臺搭建與維護》以大數據平臺項目場景和工作任務驅動的方式搭建邏輯架構,以大數據平臺搭建與維護具體任務活動及工作步驟為核心構建內容體系,全書以工作手冊的形式進行編寫。《大數據平臺搭建與維護》共包括6個項目,介紹了Linux系統的安裝與配置、Hadoop HDFS 高可用集群搭建、Hadoop YARN高可用集群搭建與維護、HBase高可用集群搭建與操作、Hive數據倉庫工具搭建與操作、某電商推薦系統大數據平臺搭建案例等內容。《大數據平臺搭建與維護》注重工匠精神的培養及工作任務實施過程中的考核評價,每個項目包含項目工作總結、技能拓展訓練、項目綜合評價等模塊,可以更好地幫助讀者按任務活動的工作步驟順利實施項目,同時能拓展知識面,提高綜合能力。 《大數據平臺搭建與維護》結構新穎,內容豐富,將新技術、新規范、新標準融入工作手冊,是一本全面了解大數據平臺搭建與維護,實施工作步驟的工作手冊。 《大數據平臺搭建與維護》既可作為高等院校電子與信息大類各專業大數據平臺搭建與維護技術相關課程的教材,也可作為大數據技術工程領域相關技術人員的參考書。 "
大數據平臺搭建與維護大數據平臺搭建與維護 前言
當今社會,隨著信息技術的發展及應用,全球數據呈現出爆發式增長、海量聚集的發展態勢。大數據被認為是繼信息化和互聯網后信息革命的又一次重大飛躍,“跨界、融合、基礎、突破”是大數據落地的關鍵,其在“產業化、行業化、智能化”方面不斷賦能實體經濟,成為產業關注的重點。“數據驅動”更加深入人心,數據成為新型的生產要素;數據要素市場的培育是重中之重。“數據要素”“數據治理”“數據安全”成為大數據發展的關鍵詞。
大數據產業是以數據采集、交易、存儲、加工、分析、服務為主的各類經濟活動,包括數據資源建設、大數據軟/硬件產品的開發、銷售和租賃活動,以及相關信息技術服務。從整體來看,數據資源、基礎設施、數據服務、融合應用、安全保障是大數據產業的五大組成部分,形成了完整的大數據產業生態。其中,大數據基礎設施建設非常重要,是實施大數據工程項目的根基。本書作者根據20多年的項目開發、實施及高等教育教學經驗,以及大數據工程技術項目工作場景、工作任務實施步驟,采用工作手冊的形式編寫了此書。
本書共分為6個項目,各項目內容如下。
大數據平臺搭建與維護 目錄
項目1 Linux系統的安裝與配置 1
工作任務1.1 Linux安裝環境準備 2
任務活動1.1.1 磁盤格式化 3
任務活動1.1.2 檢測CPU虛擬化技術 4
任務活動1.1.3 開啟CPU虛擬化技術 6
工作任務1.2 VMware的安裝與配置 9
任務活動1.2.1 安裝VMware Workstation 16 9
任務活動1.2.2 虛擬網絡的配置 12
任務活動1.2.3 系統服務及虛擬適配器的啟停 14
工作任務1.3 CentOS 7的安裝與克隆 17
任務活動1.3.1 CentOS 7的安裝 17
任務活動1.3.2 CentOS 7的克隆 29
項目工作總結 34
技能拓展訓練 34
項目綜合評價 35
項目2 Hadoop HDFS高可用集群搭建 38
工作任務2.1 Linux服務器Hadoop集群基礎環境配置 40
任務活動2.1.1 網卡、主機名與IP地址映射配置 41
任務活動2.1.2 Linux常用命令的安裝 44
任務活動2.1.3 Linux客戶端軟件工具的配置 44
任務活動2.1.4 阿里云yum源配置 51
任務活動2.1.5 升級OpenSSL協議 52
任務活動2.1.6 SSH免密碼登錄配置 56
任務活動2.1.7 集群時間同步配置 57
任務活動2.1.8 JDK的安裝與配置 59
工作任務2.2 Hadoop集群NameNode單節點的安裝與配置 61
任務活動2.2.1 在主節點上安裝與配置Hadoop 67
任務活動2.2.2 在從節點上安裝與配置Hadoop 69
任務活動2.2.3 格式化Hadoop的HDFS 69
工作任務2.3 Hadoop集群HDFS HA的安裝與配置 75
任務活動2.3.1 ZooKeeper的安裝與配置 77
任務活動2.3.2 HDFS HA的安裝與配置 79
任務活動2.3.3 NameNode與ZKFC格式化 83
項目工作總結 91
技能拓展訓練 92
項目綜合評價 92
項目3 Hadoop YARN高可用集群搭建與維護 96
工作任務3.1 Hadoop集群YARN HA的安裝與配置 97
任務活動3.1.1 停止Hadoop 集群所有組件服務進程 99
任務活動3.1.2 Hadoop YARN HA的安裝與配置 100
工作任務3.2 操作HDFS的常用命令與編程方式 110
任務活動3.2.1 操作HDFS的常用命令 110
任務活動3.2.2 Eclipse集成Maven的開發環境搭建與配置 112
任務活動3.2.3 Java API編程方式實現HDFS文件讀取 115
任務活動3.2.4 Java API編程方式實現HDFS文件寫入 121
任務活動3.2.5 Java API編寫MapReduce大數據計算程序 124
工作任務3.3 Hadoop集群異常處理與維護 133
任務活動3.3.1 Hadoop集群搭建異常處理 133
任務活動3.3.2 Hadoop集群日常維護與管理 135
項目工作總結 138
技能拓展訓練 139
項目綜合評價 139
項目4 HBase高可用集群搭建與操作 143
工作任務4.1 HBase的HA搭建 144
任務活動4.1.1 HBase基礎配置 145
任務活動4.1.2 搭建HBase高可用集群 147
工作任務4.2 HBase的常用操作 152
任務活動 HBase shell操作 153
工作任務4.3 HBase常見異常處理與維護 159
任務活動4.3.1 HBase集群異常處理 159
任務活動4.3.2 HBase集群日常維護 160
項目工作總結 163
技能拓展訓練 163
項目綜合評價 164
項目5 Hive數據倉庫工具搭建與操作 167
工作任務5.1 MySQL數據庫安裝 168
任務活動 MySQL數據庫在線安裝 169
工作任務5.2 Hive的安裝與配置 174
任務活動5.2.1 Hive配置搭建 174
任務活動5.2.2 客戶端beeline配置 176
工作任務5.3 Hive的常用數據操作 181
任務活動5.3.1 Hive基礎操作 182
任務活動5.3.2 Hive的數據導入操作 183
任務活動5.3.3 導入HBase數據到Hive 184
工作任務5.4 Hive常見異常處理與維護 187
任務活動5.4.1 Hive搭建異常處理 187
任務活動5.4.2 Hive集群日常維護 188
項目工作總結 190
技能拓展訓練 190
項目綜合評價 191
項目6 某電商推薦系統大數據平臺搭建案例 194
工作任務6.1 Spark的YARN模式集群部署 195
任務活動6.1.1 Spark集群部署安裝 196
任務活動6.1.2 Spark的YARN高可用配置 197
工作任務6.2 MongoDB的安裝與客戶端連接 200
任務活動6.2.1 MongoDB服務端配置 200
任務活動6.2.2 MongoDB客戶端配置 202
工作任務6.3 Kafka集群的安裝與配置 205
任務活動 Kafka的安裝與配置 206
工作任務6.4 Redis的安裝與客戶端連接 210
任務活動6.4.1 Redis服務端的安裝 210
任務活動6.4.2 Redis客戶端連接 212
工作任務6.5 Tomcat服務器的安裝與配置 214
任務活動 Tomcat的搭建與配置 215
項目工作總結 218
技能拓展訓練 218
項目綜合評價 219
參考文獻 222
大數據平臺搭建與維護 作者簡介
汪憶,中共黨員,重慶城市管理職業學院大數據與軟件技術專業群教研室主任,副教授,高級工程師(雙高級職稱),中青年骨干教師,重慶市雙高工業機器人技術專業群帶頭人。主要研究方向:數據科學與大數據、人工智能技術、裝備制造業企業信息化、教育創新與改革;職業(執業)資格: 信息系統項目管理師(高級)、系統集成項目管理工程師(中級)。
成果及獎勵:中央企業ERP系統實施科技進步一等獎1項;中央企業開發實施應收票據系統科技進步三等獎1項;指導學生獲國家級一等獎2項、市級一等獎1項、二等獎1項,三等獎5項;主持省部級課題4項,主研省部級課題10余項;公開發表論文15余篇,其中SCI論文2篇;注冊軟件著作權9項;授權實用新型專利5項,申請發明專利3項;主編編著1部、教材2部。
- >
月亮虎
- >
龍榆生:詞曲概論/大家小書
- >
羅庸西南聯大授課錄
- >
上帝之肋:男人的真實旅程
- >
姑媽的寶刀
- >
朝聞道
- >
人文閱讀與收藏·良友文學叢書:一天的工作
- >
我與地壇