Apache Hadoop 2
Apache Software Foundation анонсировал выход Hadoop 2.2, платформы для параллельной обработки больших объемов данных и параллельных вычислений. Версия 2.2 стала первой стабильной версией в семействе 2.x.
Основные новинки Hadoop 2.x:
YARN — новая платформа управления задачами и ресурсами кластера, расчитанная на одновременный запуск различных приложения на кластере. Помимо Map-Reduce приложений, ядро теперь поддерживает поточные приложения, приложения баз данных, серверы для выполнения интерактивных запросов и т.п. Подробности о отличии новой архитектуры от 1.x можно прочитать в анонсе в блоге компании Hortonworks. NameNode, центральный индекс узел файловой системы HDFS, обзавелся собственными средствами обеспечения высокой доступности. В прошлых версиях NameNode являлась единой точной отказа, и для повышения его надежности использовались сторонние решения NameNode теперь может быть разделен на несколько узлов, обслуживающих различные пространства имен HDFS, файловая система Hadoop, теперь так же доступна через NFSv3 Поддержка снапшотов HDFS Поддержка шифрования трафика между узлами Различные улучшения производительности apache, hadoop