Команда форума
Модератор
Премиум
- 27 Апр 2023
- 9,589
- 256,375
Голосов: 0
0.0
5
0
0
https://m5.megasliv.pro/threads/bigdata-team-prakticheskij-kurs-po-big-data-chast-2-spark-from-zero-to-hero-2023.260372/
#1
Автор: bigdata team
Название: Практический курс по Big Data. Часть 2. Spark - from zero to hero (2023)
Описание:
На протяжении этой части курса вы будете работать со Spark: от основных терминов и RDD до Spark DataFrames и оптимизации Spark вычислений.
В этом модуле вы изучите:
▶ cхема выполнения задачи в Spark;
▶ основные термины Spark (job, task, stage);
▶ представление вычислений в виде графа. Spark Python API. Spark RDD API;
▶ Broadcast-сообщения и счетчики.
▶ взаимодействие Hive и Spark SQL;
▶ отличия DF от RDD.
▶ Spark on YARN;
▶ типы stage в Spark;
▶ оптимизация операции shuffle;
▶ настройка Garbage Collection, тюнинг потребления памяти.
Подробнее:
Скачать:
Название: Практический курс по Big Data. Часть 2. Spark - from zero to hero (2023)
Описание:
На протяжении этой части курса вы будете работать со Spark: от основных терминов и RDD до Spark DataFrames и оптимизации Spark вычислений.
В этом модуле вы изучите:
▶ cхема выполнения задачи в Spark;
▶ основные термины Spark (job, task, stage);
▶ представление вычислений в виде графа. Spark Python API. Spark RDD API;
▶ Broadcast-сообщения и счетчики.
▶ взаимодействие Hive и Spark SQL;
▶ отличия DF от RDD.
▶ Spark on YARN;
▶ типы stage в Spark;
▶ оптимизация операции shuffle;
▶ настройка Garbage Collection, тюнинг потребления памяти.
Подробнее:
Для просмотра содержимого вам необходимо авторизоваться.
Скачать: