Комплексная автоматизация объектов ОАО «Фортум»: передовые решения уникальных задач
Комплексная автоматизация работы с данными "Октопус"
Transcript of Комплексная автоматизация работы с данными "Октопус"
![Page 1: Комплексная автоматизация работы с данными "Октопус"](https://reader034.fdocument.pub/reader034/viewer/2022042706/58ac13571a28ab33178b5f81/html5/thumbnails/1.jpg)
Комплексная автоматизация работы с данными в крупных
предприятиях
![Page 2: Комплексная автоматизация работы с данными "Октопус"](https://reader034.fdocument.pub/reader034/viewer/2022042706/58ac13571a28ab33178b5f81/html5/thumbnails/2.jpg)
Октопус позволяет Вам перейти на новый формат работы с данными компании.
Ваши данные вместе с Октопус это не просто факты –это сущности и связи составляющие знания.
Бесшовная интеграция гетерогенных источников, сквозной контроль поручений в связке с лучшими тасктреккерами, доступный разделяемый архив, встроенные инструменты коллаборации (от совместного редактирования, до чатов и электронной почты) и множество специфических аналитических и отчетных инструментов – все это Октопус.
![Page 3: Комплексная автоматизация работы с данными "Октопус"](https://reader034.fdocument.pub/reader034/viewer/2022042706/58ac13571a28ab33178b5f81/html5/thumbnails/3.jpg)
Продукт
![Page 4: Комплексная автоматизация работы с данными "Октопус"](https://reader034.fdocument.pub/reader034/viewer/2022042706/58ac13571a28ab33178b5f81/html5/thumbnails/4.jpg)
Продукт (2)
![Page 5: Комплексная автоматизация работы с данными "Октопус"](https://reader034.fdocument.pub/reader034/viewer/2022042706/58ac13571a28ab33178b5f81/html5/thumbnails/5.jpg)
Обзор продукта
‒ Хранение данных в графе
‒ Подключение новых источников
‒Механизм задач
‒ Выполнение задач по расписанию
‒ Контроль доступа
‒ Коллаборативные возможности
‒ Работа с архивом
‒ Контроль поручений
‒ Аналитические задачи
‒ Выделение сущностей из текстов
![Page 6: Комплексная автоматизация работы с данными "Октопус"](https://reader034.fdocument.pub/reader034/viewer/2022042706/58ac13571a28ab33178b5f81/html5/thumbnails/6.jpg)
Хранение данных в графе
‒ Property graph, как базовая модель данных
позволяет накладывать и сводить воедино данные любой природы
дает возможность не упустить важные связи и паттерны
‒ Технологическая основа – open source графовая NoSQL БД Neo4j, в совокупности с языком запросов Cypher, позволяет
значительно упростить ETL процессы
ускорить запросы для поиска и анализа связей и паттернов
предоставить возможности для пользовательского моделирования
‒ Open source Java/JS стек – наикрупнейшее community, большое количество готовых утилитарных решений и модулей
‒ Использование стека Hadoop для масштабирования
![Page 7: Комплексная автоматизация работы с данными "Октопус"](https://reader034.fdocument.pub/reader034/viewer/2022042706/58ac13571a28ab33178b5f81/html5/thumbnails/7.jpg)
Подключение новых источников
![Page 8: Комплексная автоматизация работы с данными "Октопус"](https://reader034.fdocument.pub/reader034/viewer/2022042706/58ac13571a28ab33178b5f81/html5/thumbnails/8.jpg)
Механизм задач
Получение данных из реляционных источников (так как в примере выше)
Получение данных с помощью REST API
Получение данных их социальных сетей (уже готовы модули для ВК, ОК, LinkedIn, HH, FB, Авито и другие)
Загрузка данных из файлов
Запуск аналитических задач (например - выделение сущностей из текстов)
Подключение справочников (в виде других проектов Октопуса)
![Page 9: Комплексная автоматизация работы с данными "Октопус"](https://reader034.fdocument.pub/reader034/viewer/2022042706/58ac13571a28ab33178b5f81/html5/thumbnails/9.jpg)
Выполнение задач по расписанию
Синхронизацию с каждым из внешних источников можно производить не только целиком, но и инкрементально, а также в определенное время, например раз в час. Такой подход не только позволяет достигать нужной акутальности данных, но и оптимизирует производительность системы
![Page 10: Комплексная автоматизация работы с данными "Октопус"](https://reader034.fdocument.pub/reader034/viewer/2022042706/58ac13571a28ab33178b5f81/html5/thumbnails/10.jpg)
Контроль доступа
![Page 11: Комплексная автоматизация работы с данными "Октопус"](https://reader034.fdocument.pub/reader034/viewer/2022042706/58ac13571a28ab33178b5f81/html5/thumbnails/11.jpg)
Коллаборативные возможности
![Page 12: Комплексная автоматизация работы с данными "Октопус"](https://reader034.fdocument.pub/reader034/viewer/2022042706/58ac13571a28ab33178b5f81/html5/thumbnails/12.jpg)
Работа с архивом
С Октопус то, что было сделано однажды, навсегда останется доступным. В случае допустимости, с точки зрения контроля доступа, информация доступна бесшовно для большого количества пользователей.
Скорость работы – загрузка, индексация, формирование узлов и связей:
20млн за 50 минут.
Скорость работы – доступ:
5 секунд.
Скорость работы – аналитические задачи:
Выделение сущностей 5Гб текстов – 1 час
![Page 13: Комплексная автоматизация работы с данными "Октопус"](https://reader034.fdocument.pub/reader034/viewer/2022042706/58ac13571a28ab33178b5f81/html5/thumbnails/13.jpg)
Контроль порученийСопряжение с лучшими мировыми платформами тасктреккерами – Jira, RedMine. Интеграция производится нашими специалистами
![Page 14: Комплексная автоматизация работы с данными "Октопус"](https://reader034.fdocument.pub/reader034/viewer/2022042706/58ac13571a28ab33178b5f81/html5/thumbnails/14.jpg)
Контроль поручений (2)
![Page 15: Комплексная автоматизация работы с данными "Октопус"](https://reader034.fdocument.pub/reader034/viewer/2022042706/58ac13571a28ab33178b5f81/html5/thumbnails/15.jpg)
Аналитические задачи
Гибкий подсчет метрик
Фильтрация графа связей по времени
Классификация и кластеризация сущностей
Объединение похожих сущностей
Геоанализ
И многое другое
![Page 16: Комплексная автоматизация работы с данными "Октопус"](https://reader034.fdocument.pub/reader034/viewer/2022042706/58ac13571a28ab33178b5f81/html5/thumbnails/16.jpg)
Выделение сущностей из текстов
![Page 17: Комплексная автоматизация работы с данными "Октопус"](https://reader034.fdocument.pub/reader034/viewer/2022042706/58ac13571a28ab33178b5f81/html5/thumbnails/17.jpg)
Октопус это полностью российское программное обеспечение, что подтверждено регистрацией в реестре российских программ для ЭВМ и баз данных Минкомсвязи России