AWS EMR and Spark 2 using Scala

3.9 (172)
Онлайн-курс
AWS EMR and Spark 2 using Scala
Payment
Обучение платное
Language
Not set
Duration
21.5 час курса
Курс от Udemy
AWS EMR and Spark 2 using Scala
Чему вы научились?
Ability to use AWS from Enterprise perspective
Create EMR clusters and run Spark jobs
Setup development environment to develop Spark 2 applications using Scala
Understand basics of programming using Scala
Ability to use Spark 2 Transformations and Actions to process the data
Deep dive into Spark SQL, Data Frames and Data Sets from Spark 2
Applying the Spark 2 skills on real world problems to process data at scale
Using IntelliJ as IDE to develop Spark 2 applications using Scala as programming language
О курсе

Learn AWS EMR and Spark 2 using Scala as programming language

Spark is in memory distributed computing framework in Big Data eco system and Scala is programming language. It is one of the hottest technologies in Big Data as of today. 

Spark 2 have changed drastically from Spark 1. Spark SQL and DataFrames have become core module on which other modules like Structured Streaming and Machine Learning Pipe lines.

As part of this course, there will be lot of emphasis on lower level APIs called transformations and actions of Spark along with core module Spark SQL and DataFrames

EMR brings cloud capabilities to Big Data. EMR provides different options which include Spark 2 as well as one of the service on the cluster.

As part of this course, you will learn

  • Basics of Amazon Web Services
  • Security using IAM
  • Setting up EMR clusters
  • Basics of programming using Scala
  • Spark 2 - Core Transformations and Actions
  • Spark 2 - Spark SQL and Data Frames
  • Spark 2 - Streaming and Structured Streaming
  • Different File Formats and Compression algorithms
  • Submitting Spark 2 jobs on EMR using step execution
  • and many more

We will start with understanding basics of AWS, setting up EMR cluster with Spark and then jump into Spark 2 using Scala as programming language.

Требования
  • Computer with 4 GB RAM and 64 bit operating system is required
  • If it is Windows, Windows 10 is highly recommended and supported. Other Windows versions are not supported
  • For EMR clusters, you might have to pay charges to Amazon
Лекторы
Durga Viswanatha Raju Gadiraju
Durga Viswanatha Raju Gadiraju
Technology Adviser and Evangelist
Itversity Support
Itversity Support
Support Account for ITVersity Courses.
Платформа
/storage/img/providers/udemy.svg
Курсы Udemy подойдут для профессионального развития. Платформа устроена таким образом, что эксперты сами запускают курсы. Все материалы передаются в пожизненный доступ. На этой платформе можно найти курс, без преувеличений, на любую тему – начиная от тьюториала по какой-то камере и заканчивая теоретическим курсом по управлению финансовыми рисками. Язык и формат обучения устанавливается преподавателем, поэтому стоит внимательно изучить информацию о курсе перед покупкой.
Рейтинг
3.9
(71)
(58)
(27)
(9)
(7)
Комментарии (172)
Как и любой другой веб-сайт, konevy использует файлы cookie. Эти файлы используются для хранения информации, включая предпочтения посетителей и страницы веб-сайта, которые он/она посещал. Информация используется для того, чтобы подстроить содержимое нашей страницы под тип браузера пользователя и другие параметры и таким образом улучшить его пользовательский опыт. Для получения более подробной информации о файлах cookie, пожалуйста, прочтите статью «Что такое файлы cookie»