bigdata-small

Введение в BigData и Hadoop

Дата старта:

22.07.2017

Длительность:

20 часов

Выходной день

Сб

Вс

Пн

10:00-14:00

Вт

10:00-14:00

Ср

10:00-14:00

Чт

10:00-14:00

Пт

10:00-14:00

Сб

10:00-14:00

Вс

10:00-14:00

Цена

6 000 грн

Возможна оплата частями

Описание курса:

BD

 

Big data курсы в Киеве

Курс «Введение в BigData и Hadoop» от школы QALight – это один из самых быстрых и эффективных способов получить знания в столь перспективной сейчас области BigData.

BigData – это тренд в современном мире IT, который включает в себя не только само понятие Больших Данных (т.е. объемов данных, значительно превышающих возможности исчисления обычных СУБД), а и современных инструментов, позволяющих работать с огромными объемами информации разнопланового, постоянно обновляющегося характера. Все больше компаний обращаются к данной технологии, ведь возможность быстро и качественно оперировать нужной информацией в целом океане данных, прямым образом влияет на эффективность работы, а значит и занятие лучших конкурентных позиций на рынке.

Big data курс

Входе изучения курса big data , Вам станут подвластны такие понятия и технологии, как BigData, NoSQL, Hadoop, HDFS, MapReduce и YARN. Вы не просто изучите данные термины, но и в ходе практических занятий сможете прощупать все эти технологии собственноручно.

Данная область относительно молодая. А с учетом роста в прогрессии количества различной хранимой информации с каждым годом и месяцем, необходимость в специалистах, которым покорилась стихия Больших Данных будет только возрастать. Не упустите свою возможность.

Необходимые начальные знания для успешного прохождения курса:

  • Опыт работы с реляционными базами данных и SQL
  • Опыт работы с *nix-подобными системами и знание команд Linux
  • Понимание аппаратного уровня компьютерных систем

Также Вы получаете:

diploma

Сертификат об окончании

plane

Работа с большими объемами информации

briefcase

Помощь в трудоустройстве

Программа курса:

Введение в Big Data и Hadoop — 20 часов

2 часа – Лекция. Введение

  • Повторение понятия реляционной базы данных
  • Объяснение понятий OLTP, OLAP, ETL
  • Рассмотрение типичной IT-инфраструктуры предприятия с точки зрения хранения и обработки данных
  • Объяснение понятия Больших Данных, характеристики Больших Данных
  • Проблемы в обработке Больших Данных
  • Экскурс в технологии обработки Больших Данных

2 часа —  Лекция. Начало работы с Hadoop

  • Место Hadoop в IT-инфраструктуре предприятия
  • Сравнение Hadoop с реляционными и NoSQL базами данных
  • Обзор системы Hadoop и типичные примеры использования
  • Архитектура системы Hadoop
  • Обзор экосистемных проектов и вендоров Hadoop

2 часа – Лекция. Введение в HDFS

  • Архитектура и сервисы HDFS
  • Как хранятся данные в HDFS?
  • Процесс чтения и запись файлов в HDFS
  • Отказоустойчивость в HDFS
  • Проблемы при хранении маленьких файлов на HDFS

2 часа – Лекция. MapReduce, YARN, Spark

  • Рассмотрение парадигмы MapReduce на примере
  • Архитектура кластера Hadoop с YARN
  • Архитектура и принципы работы Spark on YARN

2 часа — Лекция. Планирование установки Hadoop кластера

  • Типы нагрузок на кластер
  • Необходимое аппаратное обеспечение
  • Необходимое программное обеспечение
  • Bare Metal или Private Cloud?
  • Общие рекомендации и best practices

2 часа — Практика. Начало работы с Standalone кластером

2 часа — Практика. Работа с HDFS

2 часа — Практика. Работа с Spark on YARN

1 час — Лекция. Форматы файлов в Hadoop

  • Обзор текстовый файлов
  • Обзор Sequence файлов
  • Обзор ORC and Parquet файлов

2 часа – Лекция+Практика. Работа с Hive и Impala

  • Обзор и архитектура Hive
  • Таблицы и партиционирование в Hive
  • Загрузка данных в таблицы Hive
  • Использование различный файловых форматов в Hive и Impala

1 час – Лекция. NoSQL базы данных

  • Место NoSQL базы данных в IT-инфраструктуре предприятия
  • CAP и BASE теоремы
  • Отличие реляционных баз данных от NoSQL баз данных
  • Объяснение NewSQL баз данных
  • Типы NoSQL баз данных и примеры их использования
Читать дальше

Записаться на курс

Введение в BigData и Hadoop

Остались вопросы? Звони!