Fujitsu: Технология глубинного обучения для анализа временных рядов данных с высокой точностью

Продукт
Разработчики: Fujitsu
Технологии: BI,  Интернет вещей Internet of Things (IoT)

В марте 2016 года Fujitsu Laboratories Ltd. объявила о разработке технологии глубинного обучения[1], способной с высокой точностью анализировать временные ряды данных. В перспективных приложениях для Интернета вещей временные ряды данных могут значительно варьироваться, поэтому выявление закономерностей их изменения оказывается для человека очень сложной задачей.

Машинное обучение является центральной технологией искусственного интеллекта. В последние годы в этой области все внимание было приковано к технологии глубинного обучения как способу автоматического извлечения характерных значений, необходимых для интерпретации и оценки явлений. Огромные объемы временных рядов данных собираются с устройств, особенно в эру Интернета вещей. Применяя глубинное обучение к этим данным и классифицируя их с высокой степенью точности, можно проводить дальнейший анализ с перспективой создания новых продуктов и решений и открытия новых направлений бизнеса.

Технология глубинного обучения, которая воспринимается как прорыв в развитии искусственного интеллекта, обеспечивает высочайшую точность распознавания изображений и речи, однако она по-прежнему применима лишь к ограниченным типам данных. В частности, до сих пор было трудно точно классифицировать в автоматическом режиме изменчивые временные ряды данных, поступающих от устройств, подключенных к Интернету вещей.

Fujitsu разработала технологию глубинного обучения на основе теории хаоса и топологии для автоматической точной классификации изменчивых временных рядов данных. Эта технология позволяет точно обрабатывать даже комплексные временные данные с большой амплитудой изменений.

Технология использует следующие процедуры для обучения и классификации:

1. Графическое представление временных рядов данных с использованием теории хаоса

Численные данные, поступающие с датчиков, представляются с помощью многомерных поверхностей как произведение комплексной комбинации динамических перемещений. Непосредственно исследование механизмов динамических перемещений представляет собой сложную задачу, однако построение графика зависимости этих изменений от времени, позволяет выявить характерные траектории для каждого механизма перемещений. Применение такого графического подхода позволяет провести различия между временными рядами данных с помощью схем.Кейс «Авито»: как прошла миграция баз данных 1С с Microsoft SQL Server на Postgres Pro Enterprise 2.3 т

2. Количественное описание диаграмм с помощью топологии

Поскольку сложно непосредственно применить машинное обучение к схемам, созданным на шаге 1, компания Fujitsu использовала топологический анализ данных[2], чтобы выразить характеристики диаграмм в виде численных значений. В этом методе вместо функций, которые обычно связаны с графическими изображениями, проводится анализ количества отверстий в схеме и основных характеристик формы, а затем данные преобразуются в векторное представление свойств.

3. Обучение и классификация с использованием свёрточных нейронных сетей

Компания Fujitsu переработала концепцию свёрточных нейронных сетей, которые обучаются на векторных представлениях, полученных на шаге 2, и обеспечивают возможность классификации изменчивых временных рядов данных.

В эталонных тестах, которые были проведены в репозитории UC Irvine Machine Learning Repository[3] по классификации временных рядов данных, собранных с гироскопов в устройствах носимой электроники, новая технология продемонстрировала точность примерно 85%, что почти на 25% лучше по сравнению с уже имеющимися технологиями. В тестах по определению психического состояния человека с использованием временного ряда данных о мозговых импульсах этот метод достиг точности около 77%, что примерно на 20% лучше, чем у существующих методов.

Технология, разработанная Fujitsu, расширяет типы данных, к которым можно применять глубинное обучение. Более того, поскольку она позволяет очень точно классифицировать временные ряды данных со значительными изменениями, открываются возможности для новых типов анализа. Например, с помощью подключенных к Интернету вещей устройств можно будет точно выявлять аномалии в поведении оборудования, прогнозировать аварии на заводах, можно также использовать технологию при анализе важнейших признаков в медицинской диагностике и в процессе лечения. Подобное применение технологии, как ожидается, позволит добиться значительных успехов в различных областях, связанных с искусственным интеллектом.



Подрядчики-лидеры по количеству проектов

За всю историю
2022 год
2023 год
2024 год
Текущий год

  Прогноз (250)
  Loginom Company (ранее BaseGroup Labs Аналитические технологии) (125)
  RBC Group Украина (124)
  БизнесАвтоматика НПЦ (119)
  Консультационная группа АТК (100)
  Другие (2605)

  БизнесАвтоматика НПЦ (12)
  Форсайт (8)
  Manzana Group (М Софт) (6)
  ФТО (5)
  Optimacros (Оптимакрос) (3)
  Другие (75)

  AW BI (ОСТ) ранее Analytic Workspace (8)
  Manzana Group (М Софт) (7)
  БизнесАвтоматика НПЦ (5)
  Simetra (ранее А+С Транспроект) (4)
  Форсайт (4)
  Другие (64)

  Simetra (ранее А+С Транспроект) (13)
  Форсайт (9)
  БизнесАвтоматика НПЦ (7)
  Инфомаксимум (Infomaximum) (6)
  Arenadata (Аренадата Софтвер) (6)
  Другие (75)

  Simetra (ранее А+С Транспроект) (4)
  Arenadata (Аренадата Софтвер) (3)
  Manzana Group (М Софт) (3)
  Mavericka (Мэврика) (2)
  Data Marketing (Дата Маркетинг) (1)
  Другие (12)

Распределение вендоров по количеству проектов внедрений (систем, проектов) с учётом партнёров

За всю историю
2022 год
2023 год
2024 год
Текущий год

  Qlik (QlikTech) (59, 464)
  Форсайт (20, 340)
  SAP SE (70, 303)
  Oracle (65, 267)
  Loginom Company (ранее BaseGroup Labs Аналитические технологии) (4, 236)
  Другие (1132, 1722)

  БизнесАвтоматика НПЦ (1, 12)
  Форсайт (3, 8)
  Manzana Group (М Софт) (3, 6)
  Optimacros (Оптимакрос) (1, 6)
  Microsoft (1, 5)
  Другие (41, 51)

  Optimacros (Оптимакрос) (1, 10)
  AW BI (ОСТ) ранее Analytic Workspace (2, 8)
  Форсайт (2, 8)
  Manzana Group (М Софт) (2, 7)
  PIX Robotics (Пикс Роботикс) (1, 5)
  Другие (39, 58)

  Simetra (ранее А+С Транспроект) (1, 13)
  Optimacros (Оптимакрос) (1, 11)
  VMware (2, 9)
  Форсайт (2, 9)
  Arenadata (Аренадата Софтвер) (2, 8)
  Другие (42, 73)

  Arenadata (Аренадата Софтвер) (2, 5)
  Optimacros (Оптимакрос) (1, 4)
  Simetra (ранее А+С Транспроект) (1, 4)
  Manzana Group (М Софт) (3, 3)
  Data Sapience (Дата Сапиенс) (1, 1)
  Другие (8, 8)

Распределение систем по количеству проектов, не включая партнерские решения

За всю историю
2022 год
2023 год
2024 год
Текущий год

  QlikView - 370
  Форсайт. Аналитическая платформа (ранее Prognoz Platform) - 321
  Deductor - 226
  Visary BI Платформа бизнес-аналитики - 119
  SAP NetWeaver Business Warehouse (SAP BW/4HANA) - 103
  Другие 2081

  Visary BI Платформа бизнес-аналитики - 12
  Optimacros Платформа для оптимизационного и консолидационного планирования - 6
  Форсайт. Аналитическая платформа (ранее Prognoz Platform) - 5
  Microsoft Power BI - 5
  Qlik Sense - 4
  Другие 55

  Optimacros Платформа для оптимизационного и консолидационного планирования - 10
  Форсайт. Аналитическая платформа (ранее Prognoz Platform) - 7
  Manzana Customer Data Platform (CDP) - 7
  AW BI: BI-платформа - 6
  PIX BI - 5
  Другие 56

  RITM3 - Real time integration transport measurements modelling managemet - 13
  Optimacros Платформа для оптимизационного и консолидационного планирования - 11
  ADB - Arenadata DB - 8
  Инфомаксимум: Proceset (Система класса Process mining) - 8
  Visary BI Платформа бизнес-аналитики - 7
  Другие 57

  ADB - Arenadata DB - 5
  RITM3 - Real time integration transport measurements modelling managemet - 4
  Optimacros Платформа для оптимизационного и консолидационного планирования - 4
  Manzana Predictive Analytics - 2
  Yandex DataLens - 1
  Другие 10

Подрядчики-лидеры по количеству проектов

За всю историю
2022 год
2023 год
2024 год
Текущий год

  ИндаСофт (102)
  Мобильные ТелеСистемы (МТС) (59)
  М2М телематика (45)
  Цифра (40)
  Simetra (ранее А+С Транспроект) (33)
  Другие (587)

  Мобильные ТелеСистемы (МТС) (9)
  Цифра (7)
  Датапакс (4)
  Юникорн (3)
  РИР (Росатом Инфраструктурные решения) (3)
  Другие (32)

  Simetra (ранее А+С Транспроект) (4)
  РИР (Росатом Инфраструктурные решения) (3)
  Цифра (3)
  Юникорн (3)
  МегаФон (2)
  Другие (24)

  Simetra (ранее А+С Транспроект) (13)
  Цифра (3)
  Softline (Софтлайн) (3)
  РИР (Росатом Инфраструктурные решения) (2)
  Юникорн (2)
  Другие (19)

  Simetra (ранее А+С Транспроект) (4)
  Цифра (2)
  Systeme Electric (ранее Schneider Electric Russia) (1)
  Top Systems (Топ Системы) (1)
  ФосАгро (1)
  Другие (1)

Распределение вендоров по количеству проектов внедрений (систем, проектов) с учётом партнёров

За всю историю
2022 год
2023 год
2024 год
Текущий год

  OSIsoft (1, 108)
  М2М телематика (16, 74)
  Цифра (8, 45)
  Мобильные ТелеСистемы (МТС) (15, 44)
  Simetra (ранее А+С Транспроект) (1, 36)
  Другие (678, 427)

  Мобильные ТелеСистемы (МТС) (3, 8)
  Цифра (1, 7)
  РИР (Росатом Инфраструктурные решения) (1, 4)
  Датапакс (1, 4)
  Юникорн (1, 3)
  Другие (13, 14)

  Цифра (2, 6)
  РИР (Росатом Инфраструктурные решения) (2, 4)
  Simetra (ранее А+С Транспроект) (1, 4)
  Юникорн (1, 3)
  МегаФон (2, 2)
  Другие (7, 7)

  Simetra (ранее А+С Транспроект) (1, 13)
  Цифра (2, 4)
  РИР (Росатом Инфраструктурные решения) (1, 3)
  Юникорн (1, 2)
  Искра Технологии (1, 2)
  Другие (14, 13)

  Simetra (ранее А+С Транспроект) (1, 4)
  Цифра (2, 2)
  Systeme Electric (ранее Schneider Electric Russia) (1, 1)
  Систэм Электрик Завод ЭлектроМоноблок (СЭЗЭМ) ранее Шнейдер Электрик Завод ЭлектроМоноблок (1, 1)
  Другие (0, 0)

Распределение систем по количеству проектов, не включая партнерские решения

За всю историю
2022 год
2023 год
2024 год
Текущий год

  PI System - 108
  M2M-Cyber GLX - 50
  Цифра: Диспетчер Система мониторинга промышленного оборудования и персонала - 37
  RITM3 - Real time integration transport measurements modelling managemet - 36
  Росатом Умный город - 33
  Другие 443

  Цифра: Диспетчер Система мониторинга промышленного оборудования и персонала - 7
  МТС Цельсиум - 5
  Датапакс: Сервис мониторинга пассажиропотока - 4
  Росатом Умный город - 4
  Ujin OS Платформа для создания умных домов и зданий (ранее MySmartFlat и Sapfir) - 3
  Другие 15

  RITM3 - Real time integration transport measurements modelling managemet - 4
  Цифра: Диспетчер Система мониторинга промышленного оборудования и персонала - 4
  Ujin OS Платформа для создания умных домов и зданий (ранее MySmartFlat и Sapfir) - 3
  Росатом Умный город - 3
  ZIIoT Платформа для работы с промышленными данными - 2
  Другие 10

  RITM3 - Real time integration transport measurements modelling managemet - 13
  Росатом Умный город - 3
  Искра Технологии: Безопасный город ОС5000 - 2
  Ujin OS Платформа для создания умных домов и зданий (ранее MySmartFlat и Sapfir) - 2
  ZIIoT Платформа для работы с промышленными данными - 2
  Другие 12

  RITM3 - Real time integration transport measurements modelling managemet - 4
  SystemeMeters TM Система термомониторинга - 1
  ZIIoT Платформа для работы с промышленными данными - 1
  Цифра: Диспетчер Система мониторинга промышленного оборудования и персонала - 1
  Другие 0