Spark: различия между версиями

Материал из Поле цифровой дидактики
Новая страница: «{{DigitalTool |Description=Apache Spark (от англ. spark — искра, вспышка) — фреймворк с открытым исходным кодом для реализации распределённой обработки данных, входящий в экосистему проектов Hadoop. В отличие от классического обработчика из ядра Hadoop, реализующего двухуровне...»
 
Нет описания правки
 
Строка 6: Строка 6:
|launch year=2014
|launch year=2014
|distant_collab=Нет
|distant_collab=Нет
|Language_Ru_Eng=English
|AI=Да
|AI=Да
}}
}}

Текущая версия от 15:08, 12 июня 2025

Краткое описание инструмента Apache Spark (от англ. spark — искра, вспышка) — фреймворк с открытым исходным кодом для реализации распределённой обработки данных, входящий в экосистему проектов Hadoop. В отличие от классического обработчика из ядра Hadoop, реализующего двухуровневую концепцию MapReduce с хранением промежуточных данных на накопителях, Spark работает в парадигме резидентных вычислений — обрабатывает данные в оперативной памяти, благодаря чему позволяет получать значительный выигрыш в скорости работы для некоторых классов задач, в частности, возможность многократного доступа к загруженным в память пользовательским данным делает библиотеку привлекательной для алгоритмов машинного обучения.
Возможности
Трудности использования
Область знаний NetSci, Информатика, Лингвистика, Искусственный интеллект, Большие данные
Область применения
Поясняющее видео
Веб-сайт
Пользователи Исследователи
Используется для создания (проведения) аналитика
Разработчик
Сообщество вокруг средства
Лицензия
Год первого релиза 2014
Совместное сетевое использование Нет
Какой язык основной English
Есть ли поддержка Искусственным Интеллектом Да