Big Data on AWS_v2.0培訓課程

課程介紹?

Big Data on AWS 課程將向您介紹基于云的大數(shù)據(jù)解決方案，例如 Amazon Elastic MapReduce (EMR)、Amazon Redshift、Amazon Kinesis 和其余 AWS 大數(shù)據(jù)平臺。在 本課程中，我們將向您介紹如何使用 Amazon EMR 來利用諸如 Hive 和 Hue 等廣泛 Hadoop 工具體系處理數(shù)據(jù)。講授內(nèi)容還包括如何創(chuàng)建大數(shù)據(jù)環(huán)境、使用 Amazon DynamoDB、Amazon Redshift 和Amazon Kinesis，利用最佳實踐來設計大數(shù)據(jù)環(huán)境， 從而實現(xiàn)安全性和經(jīng)濟性。

?學員基礎?

我們建議參加學習本課程的人員符合以下先決條件：

? ? 基本熟悉大數(shù)據(jù)技術(shù)，包括 Apache Hadoop、MapReduce、HDFS 和 SQL/NoSQL 查詢

? ? 學員應完成 Big Data Technology Fundamentals 網(wǎng)絡培訓或具備同等經(jīng)驗

? ? 具有核心 AWS 服務和公有云實施工作經(jīng)驗

? ? 學員應完成 AWS Technical Essentials 課程或具備同等經(jīng)驗

? ? 了解數(shù)據(jù)倉庫、關(guān)系數(shù)據(jù)庫系統(tǒng)和數(shù)據(jù)庫設計基礎

?

?課程目標?

本課程中您將學習：

? ?適用大數(shù)據(jù)體系內(nèi)的 AWS 解決方案

? ?在 Amazon EMR 環(huán)境中使用 Apache Hadoop

? ?確定 Amazon EMR 集群的組件

? ?啟動并配置 Amazon EMR 集群

? ?利用 Amazon EMR 的常用編程框架，包括 Hive、Pig 和 Streaming

? ?利用 Hue 提高 Amazon EMR 的易用性

? ?在 Amazon EMR 上搭配使用內(nèi)存分析及 Spark 和 Spark SQL

? ?選擇適當?shù)?AWS 數(shù)據(jù)存儲選項

? ?確定使用 Amazon Kinesis 以近乎實時的速度處理大數(shù)據(jù)的優(yōu)勢

? ?定義數(shù)據(jù)倉庫和列式數(shù)據(jù)庫的概念

? ?利用 Amazon Redshift 有效地存儲和分析數(shù)據(jù)

? ?了解和管理 Amazon EMR 及 Amazon Redshift 部署的成本和安全性

? ?確定用于獲取、傳輸和壓縮數(shù)據(jù)的選項

? ?使用可視化軟件描述數(shù)據(jù)和查詢

? ?利用 AWS Data Pipeline 編排大數(shù)據(jù)工作流 目標人群

?

?課程大綱?

注意：課程大綱可能不盡相同，具體取決于授課的地區(qū)位置和 / 或語言。

本課程將在各天中講解下列概念：

? ?大數(shù)據(jù)概述

? ?獲取、傳輸和壓縮

? ?存儲解決方案

? ?在 DynamoDB 中存儲和查詢數(shù)據(jù)

? ?大數(shù)據(jù)處理和 Amazon Kinesis

? ?Apache Hadoop 及 Amazon EMR 簡介

? ?使用 Amazon Elastic MapReduce

? ?Hadoop 編程框架

? ?在 Amazon EMR 上利用 Hive 處理服務器日志

? ?在 Amazon EMR 上利用 Hadoop 流處理化學數(shù)據(jù)

? ?利用 Hue 簡化您的 Amazon EMR 體驗

? ?在 Amazon EMR 上的 Hue 中運行 Pig 腳本

? ?Amazon EMR 上的 Spark

? ?利用 Amazon EMR 上的 Spark 和 Spark SQL 以互動方式創(chuàng)建和查詢表

? ?管理 Amazon EMR 成本

? ?保護您的 Amazon EMR 部署

? ?數(shù)據(jù)倉庫和列式數(shù)據(jù)存儲

? ?Amazon Redshift 和大數(shù)據(jù)

? ?優(yōu)化您的 Amazon Redshift 環(huán)境

? ?大數(shù)據(jù)設計模式 ? ? 大數(shù)據(jù)的可視化及編制

? ?使用 Tibco Spotfire 可視化大數(shù)據(jù)

?