Данные: Основа цифровой трансформации - Dell EMC

Данные: Основа
    цифровой трансформации
5 октября 2017 г.

Dave Kloc - Начальник отдела продаж данных EMEA - dkloc@pivotal.io
Franck Sidi - Начальник отдела информационных технологий EMEA - fsidi@pivotal.io

                                                                   © Copyright 2017 Pivotal Software, Inc. All rights Reserved. Version 1.0

Содержание

■   Что такое цифровая трансформация?

■   Что предлагает Pivotal?

■   Как цифровая трансформация
    помогает повысить эффективность
    бизнеса?                            Cover w/ Image

■   Примеры реализации цифровой
    трансформации

Данные: Основа цифровой трансформации

Что такое цифровая
 трансформация?

Данные - ключевой ресурс для организаций

 Идея цифровой трансформации

 “Если вы легли спать вчера
 как промышленная компания,
 утром вы проснетесь как
 компания, производящая
 ПО и аналитику.”
 Jeff Immelt
 CEO, General Electric

88%
                                               компаний из Fortune 100 ныне не существуют
                                                             (1955 vs. 2014)

Source: American Enterprise Institute (2014)

75%
                      приложений, поддерживающих цифровой бизнес,
                    к 2020 году будут разрабатываться внутри компаний,
                                       а не покупаться

Источник: Gartner

Тренд

  Цена и доступность вычислительных мощностей позволят
  облачным компаниям-разработчикам изменить мир

Мобильные устройства       Дешевые        Глобальный масштаб     Распространенность
и повсеместный доступ   вычислительные                         устройств и приложений
      в интернет           мощности                             генерирующих данные

Данные - ключевой ресурс для организаций
   Компании реализовавшие   Дополнительный доход от
      data driven подход       аналитики данных
         работают на

     5% $13
        эффективнее                 на каждый
                                инвестированный $1

Данные - ключевой ресурс для организаций

 Является ли моя компания data-
            driven?

Данные - ключевой ресурс для организаций

     Множество
  отчётов не делают
         вас
     data driven *          Графики и дашборды
                               не делают вас
                                 data driven
                                                 Алерты не делают
                                                  вас data driven
 * data driven - управляемый на основе
 данных

03

     Промышленная платформа “интернета
     вещей” от General Electric [GE Predix]
     построена на основе технологии Pivotal и
     превращает GE в аналитическую и IT
     компанию.

Данные: Основа цифровой трансформации

О компании Pivotal

A
                    Company

            Наша миссия -
      трансформировать разработку
    программного обеспечения в мире

ТРАНСФОРМИРОВАНИЕ В
СОВРЕМЕННУЮ IT КОМПАНИЮ
Создание высококачественного программного обеспечения
со скоростью стартапов требует современных программных
методологий, облачной платформы и инструментов

            01                               02              03

      Современная                     Современная        Современные
      Виртуальная                     Методология        Инструменты
       платформа                      программного        обработки
                                       обеспечения         данных

01
     Современная облачная платформа
     Создание высококачественного программного обеспечения
     со скоростью стартапов требует современных программных
     методологий, облачной платформы и инструментов

01

     Comcast теперь может превратить идею в
     функционал через 2-3 дня [не месяца!] …
     и более 900 разработчиков ежедневно
     внедряют инновации в Pivotal Cloud Foundry
     и Pivotal Gemfire.

02
     Современные программные методологии
     Современная платформа требует современного
     подхода к разработке программного обеспечения

                                                Технологии            Оптимизировано
            Методология
               Agile                           “Бережливого            для изменений
                                                 стартапа”               и развития

              СОВРЕМЕННАЯ                        СОВРЕМЕННАЯ              СОВРЕМЕННАЯ
              МЕТОДИКА В IT                      МЕТОДИКА В IT            МЕТОДИКА В IT

             Построение                          Построение             Организация
            стратегии для                  качественного продукта    быстро реагирует на
         разработка продукта               со скоростью стартапов   возникающие внешние
                                                                    изменения и проблемы

Встроенное автомобильное ПО Daimler
[Mercedes me] построено на
технологиях Pivotal и дает водителям
информацию о состоянии автомобиля в
режиме реального времени через
смартфоны и умные часы.

Современное цифровое предприятие
Создание высококачественного программного
обеспечения со скорости стартапа современных
программных методологий, облачной платформы
и инструментов данных

Данные: Основа цифровой трансформации

Современная платформа данных
         необходима
 для Цифровой трансформации

Современная аналитическая платформа

 Параллельные   Машинное обучение      Размещение в       Agile подход к
  вычисления     и искусственный         облачной          разработке
                    интеллект         инфраструктуре

                      Развитие технологии в Open Source

Архитектура аналитической системы
      Источники данных
                                                                     Приложения

                                             Улучшение модели

   Захват   Очистка   Обогаще   Маршрути
                      ние       зация
                                           Построение модели
                                           машинного обучения

                                                                 Тонкая
                                                                настройка

                                            PL/X
                                                                            Бизнес задачи
         Подсистема                                 MLlib
       хранения данных

Построение современной
аналитической платформы
Функциональные требования
                                                    ● Захват
1. Высокая скорость загрузки данных (датчики,
   транзакции, и т.д.)                              ● Анализ

2. Консолидация и очистка данных
                                                    ● Доступ
3. Доступ к данным с помощью SQL
4. Обработка нестандартных структур данных:
                                                    ● Безопасность
   графы, геоданные, текст, документы, видео
5. Мгновенный доступ к данным для пользователей и
   приложений
6. Требования информационной безопасности

Построение современной
аналитической платформы
Нефункциональные требования
                                       ● Open Source
 1. Открытый исходный код
                                       ● Надёжность
 2. Размещение в облачной
    инфраструктуре любых поставщиков   ● Маштабируемость

 3. Платформенно-независимое решение
 4. Промышленное решение
 5. Масштабируемость

Данные: Основа цифровой трансформации

Цифровая трансформация:
  Примеры реализации

Анализ трафика
Аналитика в режиме реального времени для органов госбезопасности
Задача:
• Идентифицировать риски и угрозы для страны на основе анализа
  интернет-трафика
• Непрерывная загрузка и анализ текстовых и аудио данных
• Сохранять географическое положение абонента
• Хранить до нескольких триллионов записей в одной таблице

Решение:
•   Pivotal Greenplum с модулями GPText и PostGIS
    для параллельной загрузки и анализа всех типов данных
    (70TB в день), хранение и обеспечение доступа ко всем данным
    за определенный период
•   2 Петабайта данных (структурированных и
    неструктурированных) хранится и обрабатывается на одном
    кластере

Применение Gemfire на масштабных объемах данных
со сверхмалым временем отклика
Несколько цифр

       Китайские железные дороги                  Индийские железные дороги
       •   5,700 станций                          •   7,000 станций
       •   4.6 миллионов билетов в день           •   23 миллионов пассажиров в день
       •   20 миллионов пассажиров в день         •   120,000 одновременно
       •   3TB операционных данных in-memory          работающих пользователей

       •   40,000 визитов в секунду               •   10,000 транзакций в минуту

       •   >1,500,000,000 кликов в день           •   >1,200,000,000 кликов в день

                                В мире: ~7,349,000,000
                                ~37% населения земли

Управление рисками в масштабе предприятия
Топовый инвестиционный банк
Проект
 ● Глобальная платформа для хранения, доступа и
    аналитики данных по брокерам, сделкам,
    активам и рискам
Задачи
 ● Высокая скорость поступления новых транзакций
 ●   Петабайты данных в хранилище
 ●   Машинное обучение и data science
 ●   Результаты анализа данных поступают в
     торговые системы в режиме реального времени
 ●   Агрегированная информация для менеджмента
Решение
 ● Pivotal Gemfire для транзакционных данных
 ●   Pivotal Greenplum для аналитики, отчетности,
     хранения данных
 ●   Двусторонняя связь между подсистемами

Данные: Основа цифровой трансформации

 Заключение

Pivotal Story

                   Поддержка            Интегрирован       Открытый
                    облачной            ная аналитика      исходный
                 инфраструктуры                               код
                   различных
                  провайдеров
                                        Единая платформа
                                                             Решения
                                          для широкого
                      Запускайте                           развиваются
                                             спектра
                    аналитические                           активным и
                                          аналитических
                приложения где угодно                      зрелым open-
                                              задач
                                                              source
                                                           сообществом

Трансформируем разработку ПО во всём мире