crossSvg

Platform V
SDP Hadoop

hero-s-1-mob-dark-bg.svg
Продукт Platform V для обработки и хранения данных на базе экосистемы Hadoop

SDP Hadoop — cобственная сборка фреймворка из компонентов экосистемы Apache Hadoop, которая позволяет гибко и безопасно решать задачи обработки, хранения и анализа больших объемов данных.

01

Хранение структурированных и неструктурированных данных

02

Обработка данных с применением модели распределенных вычислений

03

Управление кластером компонентов, необходимых для работы с данными

Компоненты продукта

Ambari

Компонент для управления и контроля кластера Hadoop со стороны системных администраторов, а также его интеграции с корпоративной инфраструктурой

HBase

Нереляционная распределенная база данных с открытым исходным кодом, написанная на языке Java

HDFS

Распределенная файловая система, которая содержит огромный объем данных и дает легкий доступ к ним

Hive

Инструмент инфраструктуры хранилища данных для обработки структурированных данных в Hadoop

Hadoop User Experience (HUE)

Веб-приложение с открытым исходным кодом для графического использования основных приложений Hadoop Ecosystem

MapReduce

Алгоритм преобразования наборов данных для децентрализованной обработки

Oozie

Проект с открытым исходным кодом на основе технологии Java, упрощающий создание потоков работ и координацию заданий

Solr

Платформа полнотекстового поиска с открытым исходным кодом, основанная на проекте Apache Lucence

Spark

Инструмент для молниеносных кластерных вычислений, ускоряющий работу программ в памяти в 100+ раз, а на диске — в 10+ раз

Sqoop

Инструмент для передачи данных между Hadoop и реляционными базами данных или мейнфреймами

Tez

Платформа на основе YARN для высокопроизводительной обработки данных в Hadoop

YARN

Компонент для связи блока хранения Hadoop с различными инструментами обработки, который служит для облегчения MapReduce за счет управления ресурсами и планирования работ

ZooKeeper

Централизованная служба для поддержки информации о конфигурации, именования, обеспечения распределенной синхронизации и предоставления групповых служб

Преимущества

light-glass-png.png
Собственная сборка Hadoop v3
open source-glass-png.png
Новейшие версии компонентов
shield-glass-png.png
Доработки для ПРОМ по безопасности и надежности
flag-glass-png.png
Готовность к нагрузкам уровня сервисов Сбера
Message-glass-png.png
Русскоязычная поддержка