Spark: различия между версиями
Материал из Поле цифровой дидактики
Patarakin (обсуждение | вклад) Новая страница: «{{DigitalTool |Description=Apache Spark (от англ. spark — искра, вспышка) — фреймворк с открытым исходным кодом для реализации распределённой обработки данных, входящий в экосистему проектов Hadoop. В отличие от классического обработчика из ядра Hadoop, реализующего двухуровне...» |
Patarakin (обсуждение | вклад) Нет описания правки |
||
| Строка 6: | Строка 6: | ||
|launch year=2014 | |launch year=2014 | ||
|distant_collab=Нет | |distant_collab=Нет | ||
|Language_Ru_Eng=English | |||
|AI=Да | |AI=Да | ||
}} | }} | ||
Текущая версия от 15:08, 12 июня 2025
| Краткое описание инструмента | Apache Spark (от англ. spark — искра, вспышка) — фреймворк с открытым исходным кодом для реализации распределённой обработки данных, входящий в экосистему проектов Hadoop. В отличие от классического обработчика из ядра Hadoop, реализующего двухуровневую концепцию MapReduce с хранением промежуточных данных на накопителях, Spark работает в парадигме резидентных вычислений — обрабатывает данные в оперативной памяти, благодаря чему позволяет получать значительный выигрыш в скорости работы для некоторых классов задач, в частности, возможность многократного доступа к загруженным в память пользовательским данным делает библиотеку привлекательной для алгоритмов машинного обучения. |
|---|---|
| Возможности | |
| Трудности использования | |
| Область знаний | NetSci, Информатика, Лингвистика, Искусственный интеллект, Большие данные |
| Область применения | |
| Поясняющее видео | |
| Веб-сайт | |
| Пользователи | Исследователи |
| Используется для создания (проведения) | аналитика |
| Разработчик | |
| Сообщество вокруг средства | |
| Лицензия | |
| Год первого релиза | 2014 |
| Совместное сетевое использование | Нет |
| Какой язык основной | English |
| Есть ли поддержка Искусственным Интеллектом | Да |
