BigData анализ с помощью Spark и Scala

В этой статье я хотел бы охватить основные аспекты работы с фреймворком Spark

• RDD
• RDD Key-Value
• DataFrame и Spark SQL
• DataSet
• Управление распределением данных
• Shuffle
• Дополнительные возможности
• Spark Streaming
• Настройка и отладка
• Оптимизация