10 вопросов на знание основ архитектуры распределенных spark-приложений: открытый интерактивный тест для начинающих

анализ с использование spark, bigdata курсы,аналитика больших данных курсы, курсы spark, основы spark, основы hadoop, обучение администраторов spark

Чтобы самостоятельное обучение по Spark стало еще интереснее, сегодня мы предлагаем вам простой тест по основам архитектуры распределенных Spark-приложений, включая элементы, из которых она состоит и их структуру.

 

Тест по основам архитектуры Spark-приложений для новичков

Для начинающих самостоятельное обучение по Apache Spark мы предлагаем простой интерактивный тест по этому Big Data фреймворку. Проверьте себя и ответьте на 10 вопросов об основных элементах, входящих в архитектуру spark-приложений, их структуре и принципах работы в распределенной среде. Ответы на эти вопросы мы разбирали в статье про устройство распределенных Spark-приложений здесь. Подробно изучить темы, упоминаемые в тесте, вы сможете на практических курсах по Apache Spark в нашем лицензированном учебном центре обучения и повышения квалификации ИТ-специалистов в Москве.

Выбирайте из предложенных вариантов ответов тот, который считаете верным. Правильные ответы вы узнаете после того, как нажмете кнопку ОТПРАВИТЬ. Успехов!

1.
За что отвечает следующий код:

from pyspark import SparkContext, SparkConf
conf = pyspark.SparkConf().setAppName(‘Application1’).setMaster(‘local’)
sc = pyspark.SparkContext(conf=conf)
 

 
 
 
 

2.
Сколько раз может быть запущен исполнитель?

 
 
 
 

3.
Что отвечает за оптимизацию преобразований в spark-приложениях?

 
 
 
 

4. Что отвечает за распределение задач, идущих от драйвера к исполнителям?

 
 
 
 

5.
Какой компонент отвечает за разбиение приложения на задачи?

 
 
 
 

6.
Что делает исполнитель в момент запуска приложения?

 
 
 
 

7.
Что считается наименьшей единицей выполнения Spark-приложения?

 
 
 
 

8.
За что отвечают исполнители в Spark?

 
 
 
 

9. Что из предложенного могут делать диспетчеры кластеров?

 
 
 
 

10.
Как исполнители обеспечивают хранение данных?

 
 
 
 

 
 
 
Ваши баллы: Среднее кол-во баллов: 0

Стоит отметить, что данный тест не претендует на звание специализированного профессионального экзамена. Однако такое небольшое упражнение способно помочь новичкам, которые самостоятельно изучают распределенный фреймворк Spark для работы с Big Data, пытаясь разобраться с большим объемом информации, систематизировать ее и применить к решению практических задач.

Освоить Apache Spark на профессиональном уровне для практического использования в своих проектах анализа больших данных, разработки Big Data приложений и прочих прикладных областях Data Science вы сможете на практических курсах по Apache Spark в нашем лицензированном учебном центре обучения и повышения квалификации ИТ-специалистов в Москве:

Записаться на курс

Смотреть раcписание

Добавить комментарий

Поиск по сайту