Большие данные и 12 правил Стивена Бробста

20 ноября в Москве состоялся Teradata Форум 2014, в котором приняли участие более 400 руководителейбизнес-подразделений, маркетинговых и ИТ-службкрупных игроков отечественного рынка,занятых в разных отраслях. Российские специалистыв компании своих зарубежных коллег и топ-менеджеровкорпорации Teradata выясняли преимущества углубленной аналитики данных, обменивались опытом создания эффективных каналов коммуникации, делились сомнениями, уточняли, как можно избежать ошибок, интерпретируя большие данные, и демонстрировали результаты применения инструментов Big Data.На заседаниях круглых столов, посвященных использованию технологий больших данных в энергетике и ЖКХ, на транспорте,у делегатовфорума была возможность оценить перспективы индустриального партнерства при реализации инфраструктурных проектов, например в сфере водо- и энергоснабжения.

Сегодня многие игроки российского рынка занимают выжидательную позицию относительно внедрения инструментов анализа больших данных, хотя руководители крупного бизнеса разделяют мнение о том, что Big Data – один из трендов технологического развития.Проведение в Москве четвертого по счету форума, посвященного проблемам повышения эффективности бизнеса с помощью аналитики больших данных, доказывает, что в компании Tеradataвысоко оценивают потенциал российского рынка. Представляя лучшие практики, топ-менеджеры корпорации показывают, каким образом анализ данных позволяет предприятиям выявлять тенденции, узнавать об отношении клиентов к предлагаемым на рынке продуктам или услугам. Получение соответствующей реальному положению дел информации помогает оценить потенциал бизнеса, оптимизировать управление и своевременно принимать взвешенные решения. Особую ценность для участников форума представлял опыт внедрения продуктов под брендом Tеradata в российских условиях.

Проект построения на платформе Tеradataкорпоративного хранилища данных в ВТБ24 представили сотрудники банка Олег Амурский, руководитель центра бизнес-аналитики, и Дмитрий Первухин, начальник управления подготовки отчетности ИТ-департамента.Предпосылками для реализации проекта стали переход банка от продуктовой к сегментной, а затем и к клиентоориентированной модели, рост бизнеса, необходимость подключения новых каналов коммуникаций, оптимизацияи унификация управленческой и аналитической отчетности.Достижению поставленных перед проектной командой целей способствовал подход к организации работ. Нестандартным решением стал выбор финансового департамента в качестве бизнес-заказчика, который консолидировал требования подразделений к аналитике и отчетности.

В прошлом году к корпоративному хранилищу данных (КХД) были подключены финансовый департамент и департамент рисков, обеспечена интеграция с операционными процессами. Доступ к КХД обеспечивается через портал с персонифицированными страницами пользований и подразделений. Типовые отчеты, реализуемые на базе единого хранилища данных, сотрудники получают по подписке, предусмотрена возможность доступа к данным через инструментальные средства для аналитиков. В ближайшее время планируется реализовать мобильность аналитических приложений. Как рассказали представители ВТБ 24, по ходу работы над проектом, который планируется развивать, было усвоено несколько уроков. В частности, упрощение проектных процедур для достижения контрольных сроков оборачивается в дальнейшем дополнительными работами. Важно своевременно начинать обучение пользователей инструментам доступа к КХД, не стоит недооценивать и необходимость регламентации процессов и процедур внутри хранилища.

Большинство российских компаний только присматривается к подобным проектам, стараясь выяснить, насколько эффективно инструментами Big Data пользуются в других странах.С повышенным интересом участники форума встретили выступление директора по технологиям корпорации Teradata Стивена Бробста(StephenBrobst), посвященное анализудопускаемых при интерпретации данных неточностей, которые приводят к неправильным выводам. В своем докладе «Как избежать больших ошибок в аналитике больших данных» топ-менеджер предложил алгоритм продуктивной работы с Big Data. В перечень сформулированных им правил входят, в частности, следующие советы.

  1. Оставаться скептиком, не принимая ничего на веру. 2. Не забывать о базовых правилах статистики.3. Установить источник поступления данных. 4. Помнить, что подготовка данных, как и работа с бизнес-заказчиком, требуют времени. 5. Проблема бизнеса и проблема анализа совпадают. 6. Теория вероятности и статистика часто плохо понимаются менеджерами, требуется разъяснять.7. Нельзяупускать из виду цель, при этом стоит задаваться вопросом, кто и как будет пользоваться результатами аналитики. 8. Проявлять гибкость, чтобы находить и опробовать разные гипотезы. 9. Правильно распределять время, что позволит искать новые возможности. 10. Придерживаться базовой методологии работы. 11. Начинать с поиска простых решений. 12. Визуализация данных (но только не в виде круговой диаграммы) обеспечит правильное их восприятие.

Примеры внедрения методик анализа и технологий больших данных в области управления инфраструктурой, энергетическими комплексами и объектами ЖКХ были представлены на заседании круглого стола на тему «SmartGrid – это не что иное, как софт, эффективно работающий с большими данными». Александр Логинов, руководитель группы исследований по направлению «Бизнес-аналитика и мониторинг» компании Siemens,рассказал, что «умные» измерительные приборы, сенсоры передают большие объемы данных. Например, обычная газовая турбина, работающая «в поле», генерирует 10 Гбат ежедневно, а новые экспериментальные установки, оборудованные огромным количеством датчиков, – 4 Тбайта в день. На основе анализа данных, поступающих из разных источников, можно контролировать состояние объекта или сети, прогнозировать развитие ситуации. Это даст возможность своевременно принимать меры, например проводить ремонтные работы, предотвращая аварийные ситуации, что поможет обеспечить повышение эффективности производства. Один из реализуемых Siemens в России проектов предусматривает оптимизацию управления энергосетью компании «Башкирэнерго». О первых его результатах красноречиво говорят цифры. Раньше на локализацию аварийной ситуации на сети требовалось минимум 2,5 часа, сейчас это занимает не более 2,5 минуты.

На российском рынке есть спрос на решения по автоматизации в сфере ЖКХ. Но реализация подобных проектов сопряжена с рядом трудностей, связанных, в частности, с инфраструктурными проблемами, сложностями интеграции данных,характером привычек потребителей, а также с неправильным использованием инструментов аналитики. Многие продукты, хорошо зарекомендовавшие себя за рубежом, приходится адаптировать для применения в российских условиях. Но прежде всего нужно помочь предприятию выстроить бизнес-процесс (наладить учет и передачу данных, назначить ответственных, интегрировать ИС, обеспечить точность измерений и т. п.). Для этого нужно применять экспертные знания в определенной индустрии и смежных областях. Интеграцияинформационных систем обеспечит возможность сбора данных. При этом важно учитывать, что в отлично настроенных автоматизированных системах за рубежом 2% приборов передают неточные данные или не выходят на связь. В России из-за наличия упомянутых инфраструктурных проблем этот показатель составляет 20–30%. С помощью математических алгоритмов и методов машинного обучения данные приходится восстанавливать. По словам А. Логинова,нет данных, которым можно было бы доверять, не проводя их проверкудо того, как они поступят в систему. Только после выполнения соответствующих процедур система будет готова выполнить анализпотребления ресурсов в ЖКХ, что позволит, например, установить и локализовать утечки воды, чтобы затем принять меры по их минимизации. Строгий учет данных дает возможность обеспечить надлежащий контроль пиковых значений расходования ресурсов, составить портрет пользователя и т. д. Применение технологий больших данных позволяет ежесуточно анализировать характер потребления ресурсов миллионами пользователей.

Опыт реализации других проектов показывает, что индустриальное партнерство таких компаний, как Teradata и Siemens, открывает дополнительные возможности не только в продвижении современных технологий на отечественный рынок, но и в обеспечении устойчивого функционирования систем и решений.

www.connect.ru

Поделиться:
Спецпроект

Напряженный трафик или Современные требования к инфраструктуре ЦОД

Подробнее
Спецпроект

Специальный проект "Групповой спутниковый канал для территориально-распределенной сети связи"

Подробнее

Подпишитесь
на нашу рассылку