WorksheetsSpark
Total questions: 10
Worksheet time: 6mins
Что такое Spark?
технология кластерных вычислений
подпроект Hadoop
язык программирования
модифицированный Hadoop
Основные преимущества Spark
Скорость
Рассширенная аналитика
Многоязычность
Автономность
Может ли Spark работать с Hdfs
Может создать свой
Не может работать
Только с Hadoop hdfs
Может работать и Hadoop hdfs
Оличительная особенность технологии Spark от MapReduse
Использует ПЗУ
Использует ОЗУ
Использует кэш
Распределенную работу Спарк-кластера обеспечивает
Apache Zookeeper
Kubernetes
YARN
GraphX
Spark Streaming реализует следующий подход к обработке данных
потоковый
распределенный
процедурный
микро-пакетный
Повысить производительность Спарк-кластера можно с помощью увеличения
числа операций перетасовки данных (shuffle)
уровня параллелизма вычислений
объема RAM
количества исполнителей и процессорных ядер
Спарк-приложения выполняют вычисления MapReduce
в кэше
в оперативной памяти
на жестком диске
с использованием внешнего хранилища
Какая структура данных Спарк подойдет для низкоуровневых преобразований неструктурированных данных на языке R или Python
Dataset
DataFrame
RDD
Spark использует Hadoop двумя способами
хранилище
обработка
тестирование
целевое управление
