10 вопросов на знание основ архитектуры распределенных spark-приложений: открытый интерактивный тест для начинающих

анализ с использование spark, bigdata курсы,аналитика больших данных курсы, курсы spark, основы spark, основы hadoop, обучение администраторов spark

Чтобы самостоятельное обучение по Spark стало еще интереснее, сегодня мы предлагаем вам простой тест по основам архитектуры распределенных Spark-приложений, включая элементы, из которых она состоит и их структуру.

 

Тест по основам архитектуры Spark-приложений для новичков

Для начинающих самостоятельное обучение по Apache Spark мы предлагаем простой интерактивный тест по этому Big Data фреймворку. Проверьте себя и ответьте на 10 вопросов об основных элементах, входящих в архитектуру spark-приложений, их структуре и принципах работы в распределенной среде. Ответы на эти вопросы мы разбирали в статье про устройство распределенных Spark-приложений здесь. Подробно изучить темы, упоминаемые в тесте, вы сможете на практических курсах по Apache Spark в нашем лицензированном учебном центре обучения и повышения квалификации ИТ-специалистов в Москве.

Выбирайте из предложенных вариантов ответов тот, который считаете верным. Правильные ответы вы узнаете после того, как нажмете кнопку ОТПРАВИТЬ. Успехов!

1.
Как исполнители обеспечивают хранение данных?

 
 
 
 

2.
Сколько раз может быть запущен исполнитель?

 
 
 
 

3.
За что отвечают исполнители в Spark?

 
 
 
 

4.
Что считается наименьшей единицей выполнения Spark-приложения?

 
 
 
 

5.
Что отвечает за оптимизацию преобразований в spark-приложениях?

 
 
 
 

6. Что из предложенного могут делать диспетчеры кластеров?

 
 
 
 

7.
Что делает исполнитель в момент запуска приложения?

 
 
 
 

8.
За что отвечает следующий код:

from pyspark import SparkContext, SparkConf
conf = pyspark.SparkConf().setAppName(‘Application1’).setMaster(‘local’)
sc = pyspark.SparkContext(conf=conf)
 

 
 
 
 

9.
Какой компонент отвечает за разбиение приложения на задачи?

 
 
 
 

10. Что отвечает за распределение задач, идущих от драйвера к исполнителям?

 
 
 
 

 
 
 
Ваши баллы: Среднее кол-во баллов: 0

Стоит отметить, что данный тест не претендует на звание специализированного профессионального экзамена. Однако такое небольшое упражнение способно помочь новичкам, которые самостоятельно изучают распределенный фреймворк Spark для работы с Big Data, пытаясь разобраться с большим объемом информации, систематизировать ее и применить к решению практических задач.

Освоить Apache Spark на профессиональном уровне для практического использования в своих проектах анализа больших данных, разработки Big Data приложений и прочих прикладных областях Data Science вы сможете на практических курсах по Apache Spark в нашем лицензированном учебном центре обучения и повышения квалификации ИТ-специалистов в Москве:

Записаться на курс

Смотреть раcписание

Добавить комментарий

Поиск по сайту