Новый Open Source-проект Myriad объединяет Apache YARN и Apache Mesos
1Иллюстрация с сайта Mymeedia.Com
Mesosphere (создатели ОС Mesosphere Datacenter Operating System) совместно с MapR Technologies Inc. (разработчиками проприетарной версии Apache Hadoop с повышенной производительностью) представили Myriad — платформу с открытым кодом, позволяющую планировщику заданий YARN работать на вычислительных кластерах под управлением Apache Mesos.
На практике это означает, что с появлением Myriad отпала необходимость физически разделять вычислительные ресурсы для пакета Hadoop и для приложений (например, веб-серверов), работающих на кластерах под управлением Mesos. До настоящего времени разработчики Hadoop исторически были вынуждены ориентировать свой продукт на выполнение задач по обработке большого объема данных на специально выделенных для этой цели кластерах. Это зачастую приводило к неэффективному использованию аппаратных ресурсов в дата-центрах. Теперь на одном и том же оборудовании можно запускать как ресурсоемкие распределенные вычисления на базе Hadoop, так и любые приложения, ориентированные на Mesos.
На данный момент Myriad тестируется в дата-центрах, принадлежащих eBay и Twitter (кроме того, первая компания внесла большой вклад в разработку первой версии кода Myriad). По словам представителя Mesosphere Адама Борделона (Adam Bordelon), проект все еще находится в состоянии разработки, и до момента начала полноценного использования его отделяет еще месяц-два. За это время в него планируется внести существенные дополнения, в первую очередь касающиеся безопасности.
Исходный код Myriad доступен на GitHub на условиях свободной лицензии Apache License 2.0.
Постоянная ссылка к новости: http://www.nixp.ru/news/13191.html. Aлександр по материалам sdtimes.com, Gigaom.Com.
IBS внедрит в Федеральную налоговую службу РФ свой дистрибутив Hadoop для больших данных 2
ASF рассказала о росте популярности фреймворка для распределённых программ Apache Hadoop 2.8
Инициатива Open Data Platform от разработчиков Hadoop стала проектом Linux Foundation 2
Microsoft запустила свой первый SaaS-сервис на базе Linux — HDInsight в Azure — и выбрала для него Ubuntu
Bigtop 1.0.0 — крупный релиз набора Big Data-инструментов с Hadoop 2.6.0, HBase 0.98.12 и Spark 1.3.1 1
Движок для BSP-вычислений Apache Hama, используемый в Samsung, теперь поддерживает Hadoop YARN
Последние комментарии
- OlegL, 17 декабря 2023 года в 15:00 → Перекличка 21
- REDkiy, 8 июня 2023 года в 9:09 → Как «замокать» файл для юниттеста в Python? 2
- fhunter, 29 ноября 2022 года в 2:09 → Проблема с NO_PUBKEY: как получить GPG-ключ и добавить его в базу apt? 6
- Иванн, 9 апреля 2022 года в 8:31 → Ассоциация РАСПО провела первое учредительное собрание 1
- Kiri11.ADV1, 7 марта 2021 года в 12:01 → Логи catalina.out в TomCat 9 в формате JSON 1