Альянс в сфере ИИ: Система оценки моделей машинного обучения в сельскохозяйственном секторе

ОС: Искусственный интеллект в сельском хозяйстве (АПК)

2023: Представление системы метрик бенчмаркинга отраслевых моделей машинного обучения

24 ноября 2023 года Альянс в сфере искусственного интеллекта представил систему метрик бенчмаркинга отраслевых моделей машинного обучения в сельскохозяйственном секторе. Было объявлено о запуске онлайн-площадки^[1], которая позволит бизнесу оценивать свои ИИ-решения. Ресурс создан в рамках Отраслевого клуба в сфере ИИ (АПК), который функционирует на базе Альянса.

АПК — стратегически важная для государства отрасль. И ее цифровизация набирает внушительные обороты, появляются новые решения с применением ИИ. Русагро официально вошла в Альянс в сфере искусственного интеллекта в октябре 2023, и за короткий срок совместно с участниками Отраслевого клуба удалось достичь результатов по созданию методологии оценки эффективности ML-моделей, которая легла в основу площадки. Уверен, что запуск системы метрик позволит реализовать хороший потенциал агробизнеса в области ИИ, сказал Артем Петров, генеральный директор Русагро Тех, директор по ИТ Русагро.

Благодаря активной коллективной работе профессионалов мы инициировали создание отраслевых бенчмарков на платформе Клуба. Это позволит нам разработать лучшие решения в отрасли, а разработчикам — определить уровень точности своих моделей и внести необходимые доработки, отметила Татьяна Сурдина, директор по маркетингу АО «ОХК «Уралхим».

Альянс совместно с партнерами разместил на ресурсе отраслевые задачи, основанные на анализе данных, а также тестовые датасеты и лидерборды – рейтинги лучших моделей машинного обучения, созданных пользователями сайта для решения опубликованных задач. Как с помощью EvaProject и EvaWiki построить прозрачную бесшовную среду для успешной работы крупного холдинга

Уже на ноябрь 2023 года на сайте доступна информация о метриках и бенчмарках в сфере растениеводства, животноводства и пищевой промышленности, а также описаны задачи по прогнозу урожая, классификации культур, мониторингу за состоянием животных и определению качества пищевого сырья.

Проект реализуется в рамках исполнения поручения Президента России о внедрении хозяйствующими субъектами системы оценки отечественных решений, в которых используются технологии искусственного интеллекта. На примере АПК разработана пилотная методология для последующего тиражирования на другие отрасли.

Реализация проекта осуществлялась в несколько этапов: в рамках глубинных интервью с компаниями агропромышленного сектора Альянс собрал наиболее часто используемые и эталонные метрики для создания базовой версии методологии. Затем в ходе сбора отраслевых бенчмарков метрики были верифицированы более широким составом участников и научным сообществом. И, наконец, по результатам сбора бенчмарков и анализа сформированных лидербордов, в методологию экспертами были внесены изменения, направленные на увеличение эффективности её прикладного применения.

На сайте, созданном в технологическом партнерстве с Cloud.ru, Альянс разместил пилотный бенчмарк, в запуске которого помогала команда «Геомир»: задача по детектированию культуры подсолнечника по снимкам с дронов. В первом бенчмарке уже поучаствовали Сбер Бизнес Софт, Аналитический центр лесного и сельского хозяйства, компания «Альбатрос», а также команда вуза ИТМО.

На ресурсе размещена информация о методологии проекта и о уже существующих сайтах с релевантными бенчмарками – как российскими, так и зарубежными.

Примечания