Intel объявила о выпуске программного пакета Intel Distribution for Apache Hadoop (Intel Distribution), призванного предоставить доступ к возрастающим объемам информации, получившим название «большие данные». Новый продукт, включающий ПО Intel Manager for Apache Hadoop, обеспечит высокую производительность и поддержку расширенных опций безопасности.

Возможность управлять «большими данными» позволяет изменить мир за счет открытий, внедрения инновационных бизнес-моделей и расширения возможностей пользователей цифровых устройств. Однако объем обрабатываемой информации по-прежнему остается на низком уровне. Это связано с тем, что используемые технологии и методики неспособны адаптироваться к имеющимся типам данных либо дороги для практического внедрения. Hadoop – программный каркас на основе открытого кода для хранения и обработки больших объемов данных с использованием кластеров. По мере того как объемы данных возрастают, система остается открытой, сохраняет возможность масштабирования и соответствие требованиям к производительности, безопасности и удобству управления.

Intel предлагает открытую платформу на базе Apache Hadoop, способную соответствовать темпам развития аналитики больших данных. Система Intel Distribution стала первым решением, которое обеспечивает адекватное шифрование данных с помощью Intel AES New Instructions (Intel AES-NI) в чипах Intel Xeon. Благодаря этому в Hadoop Distributed File System можно безопасно анализировать данные с сохранением высокой скорости работы.
Оптимизации сетевой системы и подсистемы ввода-вывода, реализованные в Intel Xeon, повышают производительность системы во время анализа информации. Анализ одного терабайта данных, который ранее занимал более 4 ч, теперь может быть выполнен за 7 мин1 за счет объединения технологий с Intel Distribution. Согласно расчетам, в мире создается 1 петабайт (1000 терабайт) информации каждые 11 секунд (это объем данных для 13 лет просмотра видео высокой четкости). Для решения этой проблемы технологии Intel открывают большие возможности. Например, в больницах анализ информации мог бы помочь улучшить лечение, позволяя более оперативно ставить диагноз, определять эффективность терапии и взаимодействие лекарств.

Внедрение Intel Manager for Apache Hadoop позволяет упростить развертывание, настройку и слежение за работой новых приложений. Intel Active Tuner for Apache Hadoop выполняет автоматическую настройку конфигурации рабочих показателей системы. А ранее необходимо было выполнять отдельный анализ использования системных ресурсов каждым приложением.