Transcript ЕС-лизинг
EC-лизинг Вирджиния Рометти – IBM CEO 2 марта 2012 года “В ближайшие 5 лет все компании на рынке разделятся на победителей и побежденных в зависимости от качества их аналитики” 12 апреля 2012 будет объявлен Watson Стратегические угрозы XXI века в области ИТ: Компьютеры против людей. Что делать нам? Чему учить? А.В. ШМИД д.т.н., профессор Председатель правления ЗАО «ЕС-лизинг» 2013 www.ec-leasing.ru 1 EC-лизинг • IBM –- ЕС-лизинг –- НИЦЭВТ История взаимоотношений Александр Шмид 1986 – начальник Центра проектирования ЭВМ и ОС НИЦЭВТ • 1988 – Главный конструктор по программному обеспечению стран СЭВ • 1989 – Главный Конструктор по взаимодействию IBM и Министерства радиопромышленности СССР • 1991 – член коллегии Министерства радиопромышленности СССР • 1992 –2004 - Главный конструктор НИЦЭВТ • 1994 – наст. время – Председатель правления группы ЕС США 1991г. В.И.Шимко Министр радиопромышленности СССР А.В.Шмид Главный Конструктор МРП 2 EC-лизинг ЕС-лизинг – системный интегратор ИТ систем глобальных организаций Крупнейшие проекты «ЕС-лизинг»: GM, Citi Bank, MCI, WalMart, Evant, JP Morgan, A/A, Delux, MBUSA Morgan-Stanley, CN Rail, Man Tech, RiteAid, Kroger, Lawson, Bank of Montreal, Starwood, Verizon, Deutsche Bank, UNO, Standard Life, Direct Inside, DTS Systems, Gtech, Ingram, Lowes, WellPoint, Fidelity, ЦБ РФ, ОАО «Газпром», Минсвязи РФ Общими являются глобальные по геоохвату и размерности характеристики их ИТ-систем: Варшавское шоссе, 125 - территориальное распределение систем, - часовые пояса, - работа ЦОД – 24 часа в сутки 7 дней в неделю Для повышения эффективности функционирования глобальных организаций и снижения стоимости владения их ИТ-системами были созданы и внедрены 3 инновационные технологии Непрерывность бизнеса ЦБ РФ. Риски. Многоборье EC-лизинг Инфраструктура обеспечения бизнес-процессов ЦБ РФ Единая телекоммуникационная система ЦБ (Интранет) 98 000 терминалов Массовые платежи: от 5 дней письмом в 1992 к менее, чем 1 мин ЭПС в 2012 RTGS (БЭСП) 400 РКЦ Число платежей 79 ВЦ ГУ 2 КЦОИ УОС ECB 1 КЦОИ ИАС 2012г 14 млн в день УОС БЭСП 250 ИАС ЦА 4000 ИАС ГУ ЦИАС АКС ЦИАС АП АС БЭСП СОИБ 2003г СОЖЦ 1,5 млн в день 425 000 единиц бухучета 7000 персонал ИТ 1500 персонал ГУБиЗИ Проектирование Сопровождение ЕС-лизинг «ЕС-лизинг» - 18 лет сотрудничества с ЦБ РФ 4 EC-лизинг Оптимизация инфраструктуры на примере ЦБ РФ 2003 – Децентрализованная обработка данных • 78 Центров обработки • 11 информационных систем 2007 – Централизованная обработка данных • 2 КЦОИ • 2 информационные системы 5 EC-лизинг Распределение ТУ Банка России по КЦОИ 6 EC-лизинг Модернизация архитектуры платежной системы ЦБ РФ в 2002-2012 Параметр Было в 2002 Было в 2007 Было в 2012 Примечание 1 Число эксплуатируемых платежных систем 12 3 1 2 Число ВЦ ГУ, обрабатывающих УОС 78 3 2 39 раз 3 Число UNIX серверов ГУ, обрабатывающих УОС 234 6 4 58 раз 4 Использование оборудования в течение 24-х часов (КПД архитектуры) 17% 67% 85% 5 раз 5 Катастрофоустойчивый режим обработки транзакций (по числу транзакций) 0% 77% 100% Новое свойство архитектуры! 12 раз 7 EC-лизинг Экономический эффект от консолидации инфраструктуры платежной системы Банка России 1 Себестоимость транзакции в системе ЦБ РФ 2 Число транзакций в день в ЦБ РФ 3 Себестоимость обработки транзакций в день 4 Себестоимость обработки транзакций в год при нагрузке 2012 г. 78 ЦОИ (2004 г.) СКОИ (2012 г.) Δ ~17 руб. при количестве ~ 5 млн. транзакций в день ~8.5 руб. ~2 раза ~ 5 млн ~10 млн 85 млн. руб. ~ 85 млн. руб. ~ 0 млн. руб. при удвоенной нагрузке 21 000 млн. руб. ~ 20 млрд. руб. ~ 42 000 млн. руб. 8 EC-лизинг Постановка задачи: 2007 год Информатизация, как средство обеспечения конкурентных преимуществ (повышение эффективности работы организаций) Выживает не быстрейший, не сильнейший, а тот, кто быстрее приспосабливается к изменениям окружающей среды Чарльз Дарвин Окружающая среда ИТ - информационное пространство, в котором и должны достигаться конкурентные преимущества (в пределе – кибервойны) Еще не было Big Data, но был прогноз IBM 9 Как сделать быстро и достоверно. Все в Корпоративное Хранилище Данных (КХД) EC-лизинг Текущее состояние Сбор данных и отчетность по процессам и бизнес-целям Стратегический уровень Тактический уровень Сбор данных и отчетность по процессам и проектам Оперативный Уровень Архитектура потоков данных Стратегическое Сбалансированная руководство система показателей Ключевые показатели эффективности деятельности Тактическое руководство Руководство Документооборот, департаментов, прогноз, мониторинг отделов, сотрудники Дочерние предприятия Центр обработки данных Корпоративное Хранилище КХД Все потоки управленческих данных Целевое состояние КХД ЦБ РФ (IBM) Сбалансированная Стратегическое система руководство показателей Ключевые показатели эффективности деятельности Тактическое руководство Руководство Документооборот, департаментов, прогноз, мониторинг отделов, сотрудники Дочерние предприятия Первичные данные о материальных и финансовых потоках Время сбора данных – дни, месяцы ЦОД – 42 Серверов – 5754 Баз данных – 11058 Передач информации – 8-11 Первичные данные о материальных и финансовых потоках Время сбора данных – часы ЦОД – 1 (+1) Серверов – 1 (+1) Баз данных – логическая 1 Передач информации – 1 10 Примеры повышения скорости доставки инфо для принятия решений в глобальных системах масштаба РФ EC-лизинг Надзорный блок ЦБ (кризис) От 3 месяцев к 1 дню Управление БЭСП (АП АС БЭСП) От 2 месяцев к 1 дню Корпоративная отчетность (ГАЗПРОМ с SAP) От 4 месяцев к 1 дню Опыт ЕС-лизинг 11 EC-лизинг Стратегический прогноз IBM развития ИТ 2005 - 2015 и его реализация Цюрих, ноябрь 2005г. Лаборатория стратегического планирования IBM К 2015 году компьютеры будут принимать решения ЛУЧШЕ людей во многих областях бизнеса 12 EC-лизинг Традиционная постановка задачи информационной поддержки принятия решений. Информированность и интеллектуальность решающего центра (Удовлетворение информационной потребности Руководителя) Представление о реальности Реальность 1. Инфо-потребность Big Data I Разведчик (Поисковик) Хранение Обработка 2. Решение II Watson? Аналитик Руководитель Единое информационное пространство (ЕИП) Инфо потребность должна удовлетворяться: БЫСТРО – информация об изменениях обстановки должна поступать к моменту принятия решения (быстрее, чем у конкурентов) ПОЛНО – необходимая и достаточная для принятия решений ДОСТОВЕРНО – исключение фальсификации 13 EC-лизинг Дорожная карта реализации стратегического прогноза 2005-2015гг 14 EC-лизинг 2011г. Watson: Обучающийся компьютер!!! 15 EC-лизинг Феномен BIG DATA Сопутствующие проблемы и возможности 16 Проклятие размерности Сколько информации мы теряем? EC-лизинг Information Creation and Available Storage 1,800 Information Created 1,600 Available Storage, 2007 Exabyte s 1,400 Tape Optical 21% 22% 1,200 1,000 Other 1% Available Storage Disk 56% 0,800 0,600 264 EB 0,400 0,200 2005 2006 2007 2008 2009 2010 2011 Рометти: «В 2013 году 2 дня = всему 2003 (рост в 178 раз!)» 17 17 EC-лизинг Какие объемы данных нужны для поддержки принятия решений? User Creation: Enterprise Worries **Consumers and Workers Creating, Capturing or Replicating Personal Information Размещение значимых данных предприятия: User Generated Content* 1,234 Exabytes Enterprise Touch Content** Overlap -1,000 Exabytes **Transported, Hosted, Managed or Secured Внутренние данные Внешние данные - 33% 67% 1,530 Exabytes Size of Digital Universe in 2011 1,773 Exabytes 18 EC-лизинг «Амнезия корпорации» или объем воспринимаемых ИАС первичных данных Объем данных Йоттабайт Все доступные данные Что можно обработать Лимит: скорость обработки Надо 10 Петабайт Зеттабайт Качество ИАС: IBM Big Data Потеря памяти (амнезия) 1. Объем первичных данных 2. Глубина и скорость анализа (площадь анализа) 3. Кто готовит и кто принимает решение Что можно обработать 1 Петабайт Стандартным подходом Терабайт Лимит: Объем базы Гигабайт Время Стандарт: запомнил – обработал IBM Big Data: обработал - запомнил ЦБ РФ – 640 Тб Библиотека им. Ленина – 7Тб Потоковая обработка IBM Big Data кардинально повышает объем используемых данных для аналитической разведки 19 EC-лизинг Big Data: Изменение парадигмы при работе с данными Традиционный подход Большие данные Структурный и повторяемый анализ Итеративность и исследование Запомнил - обработал Бизнес Обработал - запомнил ИТ Определяет что спросить Обеспечивает платформу для креативного анализа ИТ Бизнес Структурирует данные для ответа на вопрос Исследует что можно спросить Месячная отчетность Анализ прибыльности Анализ анкет Ограничение: память Отношение к бренду Стратегия продуктов Оптимизация ресурсов Пример IBM - МРП Ограничение: производительность 20 EC-лизинг Требования к функциям платформы Больших Данных Поиск и навигация источников данных в киберпространстве Подключение источников и анализ данных «в покое» InfoSphere Data Explorer и т.д. Hadoop File System и т.д. Подключение источников и анализ данных «в движении» InfoSphere Streams и т.д. Традиционные функции работы со структурированными данными Netezza и т.д. Интеграция всех видов данных для комплексного анализа IBM Information Server IBM Change Data Capture Автоматизация принятия решений и построение гипотез и прогнозов IBM Cognos IBM SPSS IBM Content Analyzer 21 EC-лизинг Инструменты Streams Обработка потоковой информации Streams Декларативный язык: Stream Processing Language (SPL) Готовые средства разработки (акселераторы разработки): Анализ текстов Телекоммуникационные данные Гео-данные Видео Интеллектуальный анализ Предсказательные модели Статистика Анализ машинных журналов (СПО) Анализ данных из сетей (СПО) Инструменты: Standard Toolkit Internet Toolkit Database Toolkit Financial Toolkit Data Mining Toolkit Big Data toolkit Text Toolkit Коннекторы: Netezza Connector Hadoop Connector Языки программирования 3-го поколения: Java, C/C++, Python, Perl, JavaScript, Ruby и т.д. 22 EC-лизинг Вирджиния Рометти – IBM CEO 11 марта 2013 года “В ближайшие 5 лет все компании на рынке разделятся на победителей и побежденных в зависимости от качества корпоративных решений. И опыт, и интуиция не помогут. Людей надо переучивать. Нигде этому сейчас не учат, но мы будем!” Чему учить? Новой культуре принятия решений (predictive analytics), обеспечивающей конкурентные преимущества 23 EC-лизинг Современная схема принятия решений: Что делают люди? Подтверждение решения CEO Задания интегральной инфо потребности Детализация области интересов Область интересов Обсуждение области интересов Watson Цифровая реальность Принятие решения Поиск в области интересов Креативная команда (П1 + П3) Обучение в области интересов 24 Создание инфраструкутры исследовательского и учебного процессов в области банковской аналитики в МИЭМ ВШЭ на основе новейших технологий ИБМ (повторение успеха 1972г) EC-лизинг Базовая кафедра МИЭМ НИУ ВШЭ Проекты Бизнессообщества Сейчас работают 11 организаций Институт Центр Компетенции по IBM Big Data (ЕС-лизинг) IBM, ЦБ РФ, ЕС-лизинг Учебные курсы Профессионалы, оборудование, программные продукты, пилотные проекты Лабораторные работы Тьюторы Консультации IBM 25 EC-лизинг Университетские курсы на кафедре "Информационные системы бизнес-аналитики и поддержки принятия корпоративных решений " по Big Data Как в MTI (IBM) К 1 сентября 2013 за счет ресурсов ЕСЛ предлагается реализовать в МИЭМ ВШЭ проект: «Создание инфраструктуры научно- исследовательского и учебного процессов в области банковской аналитики на основе новейших технологий ИБМ» Цели проекта 1. Создание в МИЭМ ВШЭ материальной основы для проведения инновационных НИР и ОКР по заказам ЕСЛ на основе новейших технологий IBM BIG DATA и IBM Banking Data warehouse (BDW) силами преподавателей, аспирантов, студентов. 2. Организация учебного процесса на основе применения новейших информационных технологий в реальной научно-исследовательской и опытно-конструкторской работах. 26 EC-лизинг Центр компетенции IBM Big Data ЕС-лизинг (первый в РФ) 1. Цели: Освоение и демонстрация технологии IBM Big Data 2. Отраслевая кастомизация технологий 3. Оказание услуг по созданию прототипов корпоративных решений 4. Предоставление виртуальных стендов IBM Big Data Big для удаленного использования у заказчика (накопление практик - ВШЭ) 5.Передача знаний от IBM: обучение персонала 6.Реализация проектов В декабре 2012 создан первый полнофункциональный виртуальный тестовый стенд IBM Big Data для ИПИ РАН с удаленным доступом к вычислительным ресурсам и инструментальным средствам 27 EC-лизинг Инфраструктура ЦК ЕСЛ Базовые кафедры по аналитике(подготовка кадров) IBM zSeries Сервера (mainframes): IBM Pure Data “Netezza” 3563-CCO IBM PureData System for Analytics N1001-002 Appliance for System z Appliance 1) IBM System z114 2818-M05 2) IBM System z10 BC model 2098-E10 3) IBM zSeries z9 4) IBM zSeries z800-2066 Операционные системы: IBM Pure Data “Netezza” 3563-CCO IBM PureData System for Analytics N1001-002 Appliance 1) z/OS 2) Linux for System z (SuSE, Redhat) 3) ISX 4) z/VM ЛВС и SAN сети вычислительного центра Intranet IBM pSeries Сервера: 1) IBM Power System BladeServers 7778-23X(JS23) в стойке BladeCenter 7989-BCH Операционные системы: 1) AIX 2) Linux for System p (SuSE, Redhat) АРМ управление инфраструктурой Внутренний Firewall IBM xSeries и HP (Intel) Сервера: 1) HP BL460cG6 двухпроцессорный четырехядерных блэйд-сервер (3 сервера) DMZ 2) IBM хSeries 460 четырехпроцессорных сервера (2 сервера) Внешний Firewall SSH, sFTP, HTTPs Internet Программное обеспечение : Более 900 продуктов IBM и др. VPN 28 EC-лизинг Лабораторные работы Центра компетенции по технологии IBM Big Data Наименование лабораторной работы Инструменты платформы IBM Big Data 1. Знакомство с основами Hadoop – HDFS, Map Reduce, Pig, Hive и Jaql 2. Администрирование IBM InfoSphere BigInsights IBM InfoSphere BigInsights 2.0 3. Освоение технологии BigSheets 4. Текстовая Аналитика IBM Data Studio 5. Интеграция IBM InfoSphere BigInsights c DB2 IBM InfoSphere BigInsights 2.0 6. Основы потоковой обработки данных 7. Инструменты и консоль IBM InfoSphere Streams 8. Создание приложений с помощью Data Explorer IBM InfoSphere Streams 3.0.0.2 IBM Data Explorer 8.7 Оборудование ЕС-лизинг ЭВМ IBM zSeries 10, 11 IBM pSeries IBM xSeries IBM Pure Data (Netezza) Операционные системы zOS zLinux Linux VMWare Windows AIX СУБД DB2 (z, Oracle, Linux, Windows) Oracle z Oracle Linux Oracle Windows 29 Лабораторные работ Центра компетенции по технологии создания Корпоративных хранилищ данных (КХД) предприятия EC-лизинг Наименование лабораторной работы Инструменты платформы 1. Знакомство с принципами и технологиями построения промышленных корпоративных хранилищ данных Best World Practices Система АП АС БЭСП Система КХД БР 2. Адаптация промышленных индустриальных моделей данных фирмы IBM для реализации КХД на примере модели для банковского сектора IBM Banking Data Warehouse Индустриальная модель -IBM Banking DataWarehouse IBM Infosphere Data Architect СУБД IBM DB2 СУБД Oracle 3. Разработка ETL-процедур очистки, извлечения, трансформации и загрузки информации от систем-источников для размещения в КХД IBM InfoSphere Datastage and QualityStage 4. Построение витрин данных в интересах ИАС IBM Infosphere Data Architect СУБД IBM DB2 СУБД Oracle 5. Разработка процедур формирования расчетных аналитических показателей и их размещения в витрине данных в интересах ИАС IBM InfoSphere DataStage and QualityStage 6. Система контроля качества данных в витринах и отчетах ИАС Разработка ЗАО «ЕС-лизинг» - «Подсистема межформенного и внутриформенного контроля» АП АС БЭСП Ресурсы ЕС-лизинг ЭВМ IBM zSeries 10, 11 IBM pSeries IBM xSeries IBM Pure Data (Netezza) Операционные системы zOS zLinux Linux VMWare Windows AIX СУБД DB2 (z, Oracle, Linux, Windows) Стенды прикладных систем: Стенд АП АС БЭСП Стенд КХД БР 30 Лабораторные работ Центра компетенции по технологии создания Информационно-аналитических систем предприятия EC-лизинг Наименование лабораторной работы Инструменты платформы 1. Многомерный анализ данных – проектирование и разработка многомерных структур данных, OLAPкубов IBM Cognos BI - Cube designer 2. Создание аналитически отчетов произвольной формы в реальном времени IBM Cognos BI – Analysis Studio 3. Создание сложных параметризированных аналитических отчетов IBM Cognos BI – ReportStudio 4. Статистический анализ и прогнозирование IBM SPSS Analytics Ресурсы ЕС-лизинг ЭВМ IBM pSeries IBM xSeries Операционные системы Windows AIX СУБД DB2 (z, Oracle, Linux, Windows) Стенды прикладных систем: Стенд АП АС БЭСП 31 EC-лизинг Центр компетенции по IBM Big Data Приглашаем посетить центр компетенции, ознакомиться с технологиями IBM BigData, принять участие в создании виртуальных отраслевых стендов www.ec-leasing.ru Тел.: (495) 319-58-09 Факс: (495) 319-69-90 e-mail: [email protected] 32 EC-лизинг Постановка задач при создании информационноаналитических систем в банковском секторе Анализ Интернет-ресурсов для системы раннего реагирования Банковское регулирование и надзор Банк России Анализ неструктурированных данных для обеспечения эффективности платежной системы РФ Управление кредитным риском Анализ социальных сетей для оценки кредитоспособности заемщиков Коммерческие банки Платежная система РФ 33 EC-лизинг Анализ Интернет-ресурсов для системы раннего реагирования Отношение населения Девиантная активность Степень удовлетворенности Депозиты Задачи Расчеты Пластиковые карты 34 EC-лизинг Анализ неструктурированных данных обеспечения эффективности платежной системы РФ Внутренние данные (отчеты) Оперативный анализ Выявление факторов Сравнительный анализ Задачи Потоковые данные (логи) Интернет-ресурсы 35 EC-лизинг Анализ социальных сетей для оценки кредитоспособности заемщиков Ранжирование заемщиков Оценка рисков Выявление факторов Потребности заёмщика Задачи Социологическая характеристика заёмщика Кредитоспособность заёмщика 36 EC-лизинг Выводы В ближайшие годы потребности в специалистах Data analyst в направлении predictive analytics составит 50-70 тыс. человек в год. Однако подготовки студентов по этой специальности нет ни в одном вузе страны. Предлагается сформировать поручение Министерству образования и науки РФ (Государственная Дума ) о подготовке соответствующих специалистов в необходимых количествах и отработать на базе ВШЭ прототип специальности. 37 EC-лизинг Вирджиния Рометти – IBM CEO: «Что нас ожидает в следующие 30 лет - самообучающиеся компьютеры» 38 EC-лизинг www.ec-leasing.ru 39