Фреймворк для анализа данных Spark переведен в разряд ведущих проектов ASF
Иллюстрация с сайта Spark.Apache.Org
Некоммерческая организация Apache Software Foundation (ASF), обеспечивающая поддержку многочисленным Open Source-проектам, объявила о переводе фреймворка для анализа большого количества данных Apache Spark в разряд ведущих проектов (Top-Level Project, TLP).
Spark позиционируется как очень быстрое и хорошо масштабируемое средство обработки и анализа больших объемов данных. Веб-ресурс The Register назвал Spark «швейцарским ножом Hadoop», а сами разработчики утверждают, что их продукт позволяет запускать приложения в десятки раз быстрее, чем в случае применения Hadoop MapReduce. Spark может работать с любыми существующими данными Hadoop и поддерживает менеджер кластеров YARN из Hadoop 2, позволяет запускать приложения на языках Java, Scala и Python.
Spark был изначально создан в 2009 году в исследовательском центре AMPLab (Калифорнийский университет в Беркли), а сегодня его используют такие компании, как Alibaba, Cloudera, Databricks, IBM, Intel и Yahoo. Последний релиз Apache Spark — версия 0.9.0 — был представлен в начале февраля. Исходный код распространяется на условиях свободной лицензии Apache License v2.0. Сайт проекта — spark.apache.org.
Постоянная ссылка к новости: http://www.nixp.ru/news/12364.html. Дмитрий Шурупов по материалам Blogs.Apache.org.
ASF рассказала о росте популярности фреймворка для распределённых программ Apache Hadoop 2.8
Движок для BSP-вычислений Apache Hama, используемый в Samsung, теперь поддерживает Hadoop YARN
Apache Software Foundation добавила в ведущие проекты Falcon 2
ASF перевела свободный движок для SQL-запросов Drill в ведущие проекты 3 6
Apache Storm переведён в разряд ведущих проектов Apache Software Foundation 2
Apache Spark 1.0 — крупный релиз Open Source-фреймворка для анализа данных 1
Последние комментарии
- OlegL, 17 декабря в 15:00 → Перекличка 21
- REDkiy, 8 июня 2023 года в 9:09 → Как «замокать» файл для юниттеста в Python? 2
- fhunter, 29 ноября 2022 года в 2:09 → Проблема с NO_PUBKEY: как получить GPG-ключ и добавить его в базу apt? 6
- Иванн, 9 апреля 2022 года в 8:31 → Ассоциация РАСПО провела первое учредительное собрание 1
- Kiri11.ADV1, 7 марта 2021 года в 12:01 → Логи catalina.out в TomCat 9 в формате JSON 1