Однако дальше ситуация в плане расстановки сил на BI-рынке стала развиваться по иному сценарию, чем в других софтверных направлениях (например, на рынке средств управления контентом, который бурно формировался в тот же период). Здесь в квадрант лидеров также вошла команда основных мегавендоров (IBM, Oracle, Microsoft и примыкающая к ним SAP). Но при этом сохранила ведущую позицию и группа специализированных поставщиков. Хотя признанный лидер прошлых лет — компания SAS — все-таки, кажется, уступила первенство. Вопреки прогнозам пятилетней давности, на BI-рынок не решились выйти поставщики устройств хранения данных, в том числе EMC. В то же время обращает на себя внимание существенное увеличение числа нишевых игроков, правда, при полном отсутствии сейчас «провидцев».
Выпущенный в феврале этого года отчет Magic Quadrant for Business Intelligence Platforms выглядит весьма лаконично: в нем полностью отсутствует общий обзор состояния рынка и тенденций его развития. Приводится лишь структуризация направления и описание рыночных позиций представленных в магическом квадранте игроков.
Следует отметить, что еще в 2007 г. активно обсуждались содержательные вопросы рынка, в том числе круг решаемых задач и их классификация. Тогда само понятие «бизнес-анализ» часто соседствовало с термином «управление эффективностью бизнеса» (business performance management, BPM) или даже заменялось им. А компания IDC пыталась ввести свое понимание сферы BPM, которую представляла в виде двух категорий — Business Analytics и BI.
Но в результате признание на рынке получило определение Gartner, которое с 2008-го звучит неизменно: BI-платформа — это набор средств, позволяющих всем пользователям, включая ИТ-специалистов, консультантов и бизнес-пользователей, создавать приложения, которые помогают организациям изучать и понимать свой бизнес.
Gartner выделяет 14 основных характеристик BI, распределенных по трем категориям:
- BI-инфраструктура, управление метаданными, разработка приложений;
- доставка информации — отчетность, приборные панели, нерегламентированные запросы, интеграция с MS Office;
- анализ — OLAP, расширенная визуализация, прогнозное моделирование и извлечение данных, карты показателей (scorecards), поисковый BI, мобильный BI.
В целом систематизация с 2008 г. осталась неизменной, лишь количество характеристик немного расширилось — добавились две:
- BI, основанный на поиске (Search-based BI). Тут применяется поисковый индекс как для структурированных, так и неструктурированных данных, а также карты индекса с классификационной структурой размерности и измерений (часто, но не обязательно, есть и семантический слой BI). С помощью этих механизмов пользователи легко выполняют навигацию по данным и находят нужную информацию через поисковый интерфейс, реализованный в стиле Google (Google-like interface). Такая возможность расширяет традиционный поиск по ключевым словам в метаданных и контенте BI-систем;
- мобильный BI (Mobile BI). Этот функционал позволяет организациям доставлять содержание отчетов и показания приборных панелей на мобильные устройства (такие, как смартфоны и планшеты). Подобные возможности применяются и для публикации информации, и для интерактивного управления процессом анализа. Все это делает функционал бизнес-аналитики доступным в любых географических точках в оперативном режиме работы.
Gartner считает, что направление BI-платформ останется одним из наиболее быстроразвивающихся софтверных рынков, хотя некоторые регионы мира и не испытывают сейчас экономического роста. По результатам проведенного компанией ежегодного опроса CIO относительно технологических приоритетов в 2012-м аналитические задачи заняли первую строку (третий раз за последние пять лет). Несмотря на экономический кризис, темпы роста остаются очень высокими: в период 2010-2015 гг. Gartner прогнозирует средний ежегодный рост на 8,1% (в 2006-2010 гг. говорилось о 8,6%).
Основные тенденции на рынке BI в Украине
Владимир Рябченко: За последние несколько лет все основные игроки завершили стратегические приобретения — компания SAP купила Sybase и присоединила Business Objects, Oracle приобрела Hyperion, компания Cognos завершила присоединение Applix и дала согласие на слияние с IBM, а последняя — выкупила Netezza. В результате этих событий мировой рынок BI-решений претерпел определенный передел сфер влияния и в 2011-2012 гг. сосредоточился в руках четырех «грандов» — SAP, IBM, Oracle, Microsoft. Эти вендоры совокупно занимают сейчас около 60% всего рынка.
Тенденции в Украине, с нашей точки зрения, совпадают с общемировыми. А именно:
- Увеличение числа пользователей BI-решений. BI-приложения стали доступны в режиме real-time, увеличилась доступность хранилищ данных и число мобильных приложений. На рынке появились BI-решения для SMB (SAP Edge и BO on Demand, IBM Cognos Express).
- Снижение дохода от продажи лицензий на BI-продукты. Этот фактор связан с уменьшением стоимости лицензий и тем, что BI все чаще является дополнением к ERP-системам. Снижением цены «гранды» стараются отсечь от рынка более мелких поставщиков.
- Уменьшение количества поставщиков. Вышеупомянутые перемены на рынке привели к тому, что количество независимых производителей BI-продуктов сократилось.
- Рост востребованности приложений для аналитики. Заказчики нуждаются в быстрых BI-решениях, что, в свою очередь, ведет к увеличению числа комплексных аналитических систем. Также все крупные поставщики предлагают продукты для аналитики в составе ERP-платформ.
- Увеличение количества проектов по миграции и обновлению BI-решений. Компании стали обращать внимание на стоимость лицензий и поддержки решений и снижать затраты путем объединения нескольких разных BI-платформ в одну. Свою роль сыграл тот факт, что BI-решения оказались под «зонтиком» крупных вендоров, системы которых уже установлены на многих предприятиях.
- Рост числа «альтернативных» BI-решений. Конкуренция с «грандами» привела к увеличению узкоспециализированных отраслевых продуктов.
- Появление на рынке решений, основанных на вычислениях in-memory: IBM solidDB, SAP HANA, Oracle In-Memory Database Cache и пр. Такие системы позволяют увеличить скорость обработки данных BI-приложений.
Игорь Ющенко: В последнее время особых изменений на рынке не наблюдалось, поскольку интерес к подобной технологии только подогревается. Многие руководители лишь сейчас приходят к пониманию важности ее использования в качестве дополнительного преимущества в конкурентной борьбе. На данный момент рынок бизнес-аналитики в своем развитии следует целому ряду трендов. Главная тенденция — упрощение систем для конечных пользователей с появлением новых интеллектуальных функций и возможностей. BI-среду часто характеризуют как сложную для разработки, внедрения и использования. Именно сложность является одной из основных причин того, почему системы бизнес-анализа до сих пор не использует большинство фирм. Аналитики указывают на то, что вендорам надо еще работать над простотой не только в плане архитектуры и юзабилити систем, но и над процессами их развертывания и использования. «Пользовательский конфликт» в применении сложных платформ, выявленный аналитиками в 2011 г., остался неизменными в 2012-м. Бизнес-пользователи хотели бы иметь простые в использовании и гибкие аналитические продукты.
В исследовании Gartner Magic Quadrant 2012 отмечается, что 52% бизнес-пользователей назвали простоту в использовании критерием номер один при выборе BI-системы. Однако ИТ-специалисты поставили на первое место функциональность и только на второе и третье — простоту для конечных пользователей и возможности интеграции данных и доступа к ним. Если в ближайшее время будет достигнут компромисс между юзабилити и мощностью BI-систем, это даст новый импульс для их использования в Украине. Стоит отметить, что в результате работы интеграторов по разъяснению специфики BI-решений в стране постепенно начинают понимать важность подготовки правильного хранилища данных для построения качественной аналитической системы.
Дмитрий Потапов: В последние два года украинский рынок BI уверенно растет, причем рост составляет до 16% ежегодно. В 2011 г. объем рынка BI в Украине составил приблизительно 10,5 млн долл, в 2012-м ожидается около 12 млн долл.
Типичный портрет заказчика
Максим Бодаев: Обычно системы BI в Украине внедряют компании, которые уже автоматизировали первичный учет и хотят работать эффективнее своих конкурентов как раз за счет аналитических решений. Кроме того, спрос на BI есть в компаниях, которые ранее полагались на отчеты и планы, составленные вручную, и «обожглись» на таких методиках, поскольку сведенные цифры оказались далеки от реальности.
Владимир Рябченко: Наиболее типичный заказчик — крупный холдинг или территориально распределенная структура, где критичны скорость получения достоверной информации и быстрота принятия управленческих решений, особенно по финансовым и товарным потокам.
Игорь Ющенко: Каждый заказчик индивидуален и, как правило, формирует свой пул заданий и потребностей. Однако интеграция данных из различных систем на предприятии (последствия лоскутной автоматизации) является наиболее часто встречаемой задачей для украинских заказчиков.
Кирилл Руднев: Традиционным потребителем BI были и будут розничные сети, финансовый сектор, телекоммуникационные операторы, дистрибуторы, транспортные компании, а также холдинговые структуры любого рода деятельности. Они все очень зависят от состояния экономики в стране, и именно этот фактор будет определять, насколько увеличится украинский BI- рынок. Общая тенденция — рост, так как многие компании уже обзавелись учетными системами и остро нуждаются в сведении и консолидации данных.
Дмитрий Потапов: На сегодняшний день типичный заказчик — это успешный топ-менеджер. Он поднял на ноги бизнес, которым руководит, получил диплом МВА и теперь намерен правильно выйти на IPO.
Основные задачи, решаемые украинскими заказчиками с помощью BI
Максим Бодаев: Большинство отечественных компаний все еще пытается средствами BI решать исключительно технические проблемы, связанные с получением в нужное время и с минимальными усилиями достоверной и качественной информации.
Владимир Рябченко: Прежде всего, BI-система нужна заказчику для того, чтобы он мог доверять цифрам, выявлять скрытые закономерности и выполнять прогнозы. При этом информация должна быть непротиворечива и предоставляться своевременно.
Среди других задач: получение интегральной картины бизнеса, прозрачность корпоративных данных для руководства, оценки бизнес-операций, использование полуструктурированных и неструктурированных данных.
Игорь Ющенко: Кроме традиционного формирования и наполнения хранилищ данных, заказчику нужно получать отчеты о деятельности предприятия в требуемое время и в нужных объемах для принятия тактических и стратегических решений. Информация для отчетов зачастую должна быть собрана в режиме реального времени из различных информационных систем таким образом, чтобы можно было легко и просто проверить все связи с исходными данными и при необходимости так же легко и просто их изменить.
Для заказчика также важно получать полную информацию о клиенте из различных информационных систем: банка и других открытых источников. Например, речь идет о таких данных, как доходы и расходы клиента, его депозиты, кредиты, место работы и должность, владение бизнесом, родственные связи и наличие имущества.
Кирилл Руднев: Внедряя системы бизнес-анализа, компании стремятся оптимизировать свои затраты, получить комплексную картину состояния предприятия, чтобы ускорить процесс принятия решений. Двумя важнейшими задачами BI-систем являются быстрота предоставления аналитической отчетности и консолидация данных, которые зачастую находятся в разрозненных системах, файлах и других источниках информации.
Создание консолидированного хранилища данных позволяет анализировать состояние компании за определенные периоды деятельности и применять аналитические алгоритмы прогнозирования. Можно также использовать дополнительные аппаратно-программные решения для повышения качества и скорости предоставления ключевой информации топ-менеджменту компании.
Дмитрий Потапов: С помощью BI-систем заказчик решает совершенно разные задачи, порой довольно экзотические. Я бы выделил следующие пункты:
- снижение трудозатрат и увеличение быстродействия в формировании оперативных сводок по текущему состоянию деятельности предприятия;
- получение ясной картины показателей деятельности, основанной на правильно сформированных корректных данных;
эффективные продажи и повышение заработка путем своевременного и глубокого анализа.
Правда, такие задачи заказчик пока что решает очень редко.
Технологические перспективы решений BI
Максим Бодаев: С технологической точки зрения инструменты BI будут развиваться в четырех направлениях:
- за счет применения технологий in-memory скорость вывода информации будет приближаться к реальному времени;
- доступность рабочего места перестанет зависеть от устройства конечного пользователя — будь то компьютер, планшет или другой гаджет;
- удобство работы повысится за счет интеграции BI с технологиями групповой работы с информацией и за счет улучшения юзабилити самого BI;
- BI-инструменты будут использоваться в работе не только со структурированной, но и с неструктурированной информацией.
Владимир Рябченко: Среди технологических направлений стоит отметить растущий интерес к таким явлениям, как облачные вычисления и вычисления в оперативной памяти (cloud computing и in-memory computing). Первые дают пользователям BI-систем возможность создавать различные многомерные кубы, строить графики и т.п. Правда, до сих пор остается открытым вопрос безопасности данных, которые загружаются в облака. Ведь в случае с системами бизнес-аналитики это критически важный вопрос.
Нельзя не упомянуть и мобильную аналитику. Все основные мировые поставщики аналитического ПО уже создали собственные продукты, ориентированные на рынок смартфонов и коммуникаторов. С появлением планшетных компьютеров ограничения пользовательского интерфейса мобильных устройств, столь важные именно для аналитических приложений, тоже постепенно преодолеваются. Сегодня многие специалисты считают, что «мобильный BI» также станет одной из самых заметных тенденций на ближайшие два-три года.
Кирилл Руднев: Объемы информации, которую необходимо оперативно обрабатывать, постоянно возрастают. Перед разработчиками анализа стоит задача совершенствовать подходы в построении BI-решений. Современные инструменты бизнес-аналитики повышают скорость обработки данных в оперативной памяти. Они предоставляют пользователям широкие возможности благодаря оптимальному использованию оперативной памяти, процессорной технологии и инновационных приложений.
Дмитрий Потапов: Весьма интересной перспективой, на мой взгляд, является «внешняя» аналитика. На сегодняшний день большинство BI-систем прекрасно решает очень непростые задачи анализа внутренних статистических данных предприятия. Однако ни одна из них нормально не извлекает полезные сведения из внешних источников, хотя они не менее важны для принятия управленческих решений. Сложные интеллектуальные системы, которые исследуют и упорядочивают пласты информации в мировой сети, пока не добрались до бизнеса, а обслуживают лишь узкий сегмент компаний интернет-отрасли. Да и аналитические сервисы основных поисковых порталов очень ограничены в своих возможностях и инструментарии.
Революционное будущее в системах аналитики для бизнеса лежит в создании систем, которые объединят имеющийся сейчас инструментарий визуализации и анализа с высокоинтеллектуальными механизмами добычи полезных для принятия решения данных из ресурсов мировой сети.
Создание аналитической системы для АТБ-Маркет
Компания «АТБ-Маркет» является одним из «локомотивов» розничного бизнеса в Украине. Зародившись в Днепропетровске, сеть активно расширяется не только в юго-восточном регионе, но и на западе, а также в столице страны. Только в 2012 г. планируется открыть более 120 новых магазинов, увеличив сеть более чем до 600 объектов в 16 областях. Разумеется, такой интенсивный рост требует не только солидных вложений, но и повышенного качества управления деятельностью организации. Одним из шагов, направленных на это, стало решение руководства компании о внедрении информационно-аналитической системы (ИАС) как инструмента для работы с важнейшими показателями по эффективности деятельности сети. Внедрение системы позволит высвободить ресурсы аналитических подразделений от значительного объема ручных операций по подготовке и обработке исходных данных. Одновременно усилия можно направить на анализ информации для обоснованного принятия управленческих решений.
После продолжительных тестов и обсуждения условий внедрения тендерный комитет в конце июля 2011 г. выбрал интегратора — компанию Citia BTC, предложившую SAP Sybase IQ в качестве СУБД, SAP Business Objects Data Integrator в качестве ETL-инструмента и SAP Business Objects Edge BI в качестве инструмента конечного пользователя. Таким образом, набор средств SAP показал в данном случае наиболее привлекательное соотношение цена/качество. Также важную роль в принятии решения сыграл опыт и экспертиза специалистов Citia BTC, представивших адекватный ситуации подход к организации работ и методологическому обеспечению проекта.
Реализация проекта началась в конце августа со спецификации требований к системе. В ходе совместной работы аналитика проекта с бизнес-экспертами заказчика были формализованы показатели и размерности, используемые для анализа объемов продаж с детализацией до чековой статистики, остатков товаров на складах и в магазинах, движения товаров, ассортиментного перечня и инвентаризации магазинов.
Для работ по спецификации требований и проектированию использовали case-средства SAP Sybase PowerDesigner 15.3. Данный инструмент обеспечил команду единой средой для работы с требованиями и моделью данных и их взаимосвязями, что позитивно сказалось на качестве результатов проекта.
По мере подготовки спецификаций на процедуры извлечения и загрузки данных во второй половине октября основная масса проектных работ перешла к группе разработки ETL-процедур, которую представляли специалисты заказчика. Контролировали качество выполнения работ специалисты Citia BTC. Для управления работами совместной команды активно использовался трекер Atlassian Jira. Первые запуски системы на загрузку данных удалось произвести в начале 2012 г. На завершающей стадии работ разработчики Citia BTC создали несколько юниверсов, объединивших в себе все требуемые показатели и размерности. После этого началось комплексное тестирование системы и введение в эксплуатацию, которая началась в первой половине апреля.
Ни один крупный проект не обходится без трудностей, не стало исключением и это внедрение. В части СУБД наиболее проблемным моментом оказалась крайне низкая скорость выполнения построчных операций загрузки данных — для обновления 1000 строк в справочниках измерений (процедуры SCD 1/2) требовалось до 20 минут. Незначительной оказалась и скорость выполнения сложных запросов, например соединение десятков таблиц по нескольким полям.
При разработке процедур извлечения, трансформации и загрузки данных проявилась недостаточная совместимость Data Integrator и Sybase IQ. Например, в случае применения условных выражений или соединения таблиц по полям с разными типами механизм pushdown отключался (чего не наблюдалось с другими СУБД). Кроме того, параллельная обработка данных в процедурах загрузки была неэффективной. Ну и, наконец, использование ранних релизов новой версии SBOB BI Edge 4.0 ожидаемо принесло целый букет мелких ошибок в продукте.
Что же касается организационной части, то опыт данного проекта в очередной раз подтвердил необходимость активного использования методик «гибкой» разработки. Они позволили бы на ранних сроках привлечь пользователей к формированию облика системы и избежать некоторых досадных ошибок, которые были выявлены только на заключительном этапе.
В настоящее время пользователи осваивают систему, овладевая всеми возможностями богатого инструментария, который зупрощает самостоятельный анализ данных благодаря интуитивно понятному графическому интерфейсу SBOB Edge BI 4.0.
Внедрение в «Банк Кредит Днепр»
Руководство «Банка Кредит Днепр» поставило перед консультантами CONIM GROUP такие основные задачи: создание единого информационного пространства на базе хранилища данных и построение аналитической платформы для коллективной работы с консолидированной информацией.
Специалисты CONIM GROUP построили для «Банка Кредит Днепр» хранилище данных на базе MS SQL, которое консолидирует в себе информацию из других, используемых в банке систем. Также были разработаны четкие процедуры выгрузки данных в хранилище.
Инструментарий решения SAP Business Objects позволил заказчику оперативно получать актуальные отчеты (в количестве свыше 20 штук) и формировать информационные панели для принятия управленческих решений руководством банка (более 10 инфопанелей). Также специалисты реализовали генерацию многомерных массивов данных (OLAP-кубы), что позволило оперативно получать аналитические отчеты и перестраивать их по нужному формату и в нужном виде.
Результатом проекта стало появление в «Банке Кредит Днепр» комплексной системы бизнес-аналитики и консолидации всех операционных данных в едином хранилище. Среди перспективных направлений доработки системы заказчик отметил совершенствование модуля отчетности, интеграцию с системой управления отношениями с клиентами (CRM), а также дальнейшее развитие хранилища.
