Просто о сложном: Cognitive Agro Pilot или как прошел День КиберПоля, часть 1

02.08.2021
Технологии
1601
Фото: cognitivepilot.com

23 июля на полях Песчанокопской Аграрной группы и в виртуальном формате в сети Интернет прошёл первый всероссийский «День КиберПоля», организованный компанией Cognitive. Журналисты нашего портала также поучаствовали в данном мероприятии и готовы поделиться с читателями своими впечатлениями.

Фото: cognitivepilot.com

Говорят «первый блин комом», но в данном случае «первый стрим — ливнем». Кажется всё можно предусмотреть, только вот с погодой в нынешнем году аграриям трудно договариваться. Весь вечер и всю ночь был ливень, который не позволил организаторам показать всё задуманное. Зерновые полегли. И даже во время 4-часового стрима дождь продолжал поливать. О нормальной уборочной кампании в таких условиях и речи быть не может. В связи с неблагоприятной погодой демонстрация работы автопилота проходила с демонтированной жаткой. Но в идеальных условиях возможности своих технологий продемонстрирует любой, а в ненормальных ещё надо постараться. И надо отдать должное организатором, что они не отменили мероприятие и смогли оживить его приглашением интересных спикеров из Smart Farming Club.

Приглашённые эксперты обсудили важность автоматизации и роботизации АПК в современных условиях, поделились личным опытом внедрения инноваций в передовых хозяйствах различных регионов России, обозначили тренды развития данного направления, а также затронули кадровые проблемы АПК и влияние внедрения искусственного интеллекта (ИИ) в сельхозпроцессы на социально-экономическое развитие сельских регионов.

Итак, по порядку. Основной герой стрима комбайнёр Юрий Васильевич, механизатор с 40-летним стажем, который работал на разных типах машин и его железный конь — комбайн TORUM 750, оборудованный системой беспилотного вождения Cognitive Agro Pilot. Помощником комбайнёра выступил сооснователь компании Cognitive Agro Pilot и её технический директор Антон Емельянов, который проводил прямые включения из студии (кабины) и посвятил зрителей в тонкости технологии беспилотного вождения.

В ходе презентации зрителям была продемонстрирована возможность системы в автономном режиме (без участия комбайнёра) осуществлять движение точно соблюдая траекторию кромки скошенной части культуры, автоматический набор и поддержание заданной скорости движения, возможность осуществлять автоматическую остановку перед различными видами искусственных препятствий и автоматическое возобновление движения после устранения помехи.

Фото: cognitivepilot.com

Возможно, кто-то хотел увидеть на презентации пустую кабину комбайна, который сам ездит по полю и убирает урожай, но пока это далёкая перспектива. Вместе с тем это уже не кажется фантастикой и есть уверенность, что темпы развития технологий скоро сделают это реальностью. На сегодняшний день без человека, любой даже самый современный агрегат напичканный суперсовременными технологиями пока не в состоянии выполнить весь комплекс операций по управлению комбайном на уборке урожая. А вот минимизировать рутинные трудозатраты, увеличить качество уборки, предвидеть ЧП и предотвратить последствия банальной невнимательности или усталости специалиста за рулём — это уже реально. Да, когда-то будет такое время, когда комбайнёр, сидя в теньке под берёзкой, сможет просто наблюдать за самостоятельной работой своего железного коня. Но пока ещё большая часть работ выполняется руками механизатора. И как отмечал главный герой стрима, уровень комфорта в современной технике настолько вырос, что механизатору пока гораздо удобнее быть в кабине, чем глотать пыль на солнцепёке или мокнуть под дождём.

Место проведения мероприятия — поля «Песчанокопской аграрной группы». Это одно из крупнейших агрохозяйств Ростовской области с объемом землепользования более 35 тыс. га. В его состав входят три предприятия, основным направлением деятельности которых является выращивание зерновых и технических культур. Парк техники агрохолдинга насчитывает более 200 единиц, в т.ч. основные бренды от Claas и Case New Holland, Ростсельмаш и Amazone. Место проведения мероприятия было выбрано не случайно, так как поля именно этой компании с прошлого года стали опытным полигоном по тестированию и эксплуатации систем управления на основе искусственного интеллекта на различных видах сельхозтехники. Тут проводится работа по созданию первой в мире открытой базы данных изображений («Cognitive Agro Dataset»), необходимой для обучения нейронных сетей для беспилотной сельхозтехники.

Cognitive Pilot проведет первый День КиберПоля с беспилотным комбайном

На чём основана и что может система беспилотного вождения Cognitive Agro Pilot

В отличии от систем основных зарубежных разработчиков в основе системы управления Cognitive Agro Pilot лежит не навигация по сигналу GPS, а компьютерное зрение. Вот почему разработчики в данном случае используют собственные датасеты (обработанная и структурированная информация) с реальных полей, которые позволяют воссоздать широкий класс ситуаций, в том числе и крайне редко встречающихся в условиях реальных сельхозработ, в разных погодных условиях при разной освещенности и в итоге обеспечат безопасную работу автономной системы управления сельхозтехникой.

Основные функциональные возможности Cognitive Agro Pilot в сравнении с другими технологиями вождения

Условия для подключения и состав системы беспилотного вождения

Для подключения требуется соблюдение всего двух условий: чтобы на агрегате имелись гидравлическая система руления и CAN-шина. Это условие выполнимо практически для любой техники, выпускаемой начиная с 2015-2016 гг.

Фото: cognitivepilot.com

На демонстрационном TORUM была установлена последняя версия Cognitive Agro Pilot. Она включает в себя две камеры с цветной матрицей, установленные на кронштейнах боковых зеркал. Угол обзора каждой камеры — 110 градусов. Камеры специально разработы для транспорта и имеют широкий динамический диапазон (Wide Dynamic Range, WDR). Т.е. изображение с камеры, поступающее на обработку в ИИ, будет менее подвержено влиянию условий освещённости, минимизируется количество сильно засвеченных или сильно затемнённых участков, что позволяет сделать картинку чётче, а ИИ принять более корректное решение по направлению и скорости движения.  По заверению разработчиков для решения многих технологических задач из всего набора сенсоров системе достаточнот всего одной видеокамеры, которая может вести по любой кромке.  Для уборки по двум кромкам (челноком)  потребуется уже две камеры.

Фото: cognitivepilot.com

Сигнал с камер поступает на обработку на нейропроцессор, на котором запущена современная нейронная сеть, которая позволяет определить основные объекты полевой сцены: транспортные средства и их рабочие агрегаты, скошенная и нескошенная часть сельхозкультур, кромку, рядки, валки, люди и другие элементы и соответственно сообщить ту траекторию, по которой нужно выполнить движение.

Бортовой нейропроцессор размещается в герметичном аллюминивом корпусе и крепится на передней стойке внутри кабины. Разъёмы устройства позволяют подключать до 4-х камер или других устройств, а также подключаться к CAN-шине комбайна.

Для решения задач позиционирования, оценки динамики движения комбайна, обеспечения связью с удалённым центром управления и другой техникой в поле используется модуль навигации и связи, устанавливаемый на крыше комбайна. Данный модуль оснащается двухдиапазонным GNSS сенсором, IMU сенсором, 3G/4G GSM модемом и блоком связи стандарта LoRaWan.

После обработки сигнала в нейропроцессоре сигнал передаётся на установленный под кабиной гидравлический модуль управления (подруливания) для выполнения поставленной задачи без участия механизатора. В комплекте с датчиком угла поворота колёс обеспечивается движение по заданной тракетории с высокой точностью.

Фото: cognitivepilot.com
Гидравлический модуль управления

Также система включает ещё один элемент: к джойстику на данной машине прикреплен специальный актуатор, который с помощью двунаправленного троса осуществляет управление скоростью.

Одним из важнейших параметров для аккуратной уборки урожая является точное соблюдение рекомендуемой скорости. Специализированный цифровой модуль автоматически поддерживает заданную скорость и при необходимости остановит комбайн.

Демонстрация распознавания системой различного состояния посевов. Светлым фоном выделены участки поля с полегшей пшеницей. Фото: cognitivepilot.com

Нередко приходится убирать полегшие культуры. Чтобы уменьшить потери зерна, такие участки необходимо проходить на пониженной скорости. Разработчики предусмотрели в системе и такую функцию. Технологии ИИ позволяют в автоматическом режиме определять такие участки поля и в нужный момент передать команду на снижение скорости.

Число экспортных продаж автопилотов Cognitive Agro Pilot выросло в 2,5 раза

Какие вопросы в работе системы беспилотного управления волновали зрителей

Сколько времени занимает установка и настройка системы?

Специалисты сервисного центра выполняют установку и настройку полного комплекта оборудования за два дня.

Можно ли будет поставить беспилотное управление на ACROS?

Да можно, устанавливали, работает. Мы освоили уже более 30 моделей комбайнов (все Ростсельмаш, Гомсельмаш, Брянсельмаш, CLAAS, John Deere, CNH).

На каком расстоянии система может первоначально заметить препятствие?

До 70 метров.

После устранения препятствия (помеха пропала) система сама принимает решение о возможности продолжения движения, или тут слово за оператором?

Сама. В случае необходимости оператор легко может перехватить управление слегка повернув руль.

Пока мы видели как система реагирует на неподвижное препятствие (человек, автомобиль). Интересно как Ваша система реагирует на приближение подвижного объекта, который появляется сбоку на близком расстоянии?

Для системы не важно — подвижно препятствие или нет. Если оно в зоне видимости и оно находится в опасной зоне, то будет отдана команда на остановку. Если кто-то выскакивает сбоку, все будет зависеть от взаимного расположения, скорости комбайна и пр.

По каким культурам работает система?

Наиболее распространенные культуры — зерновые, бобовые, рапс и другие, уборка и развитие которых имеет типичный характер.

Были и очень острые вопросы, которые вызвали жаркую полемику и на наш взгляд дали понять производителям, что волнует простых механизаторов в работе роботов и задали разработчикам системы направление, в котором следует в дальнейшем развивать разработки.

Как система реагирует, когда нет давления масла и оно слабое, когда лопнул ремень и слетела цепь, пробито колесо или например загорелся комбайн?

Никак. Cognitive Agro Pilot — это система помощи механизатору, которая автоматизирует часть его задач, а именно — управление движением комбайна. Потери эффективности от неправильной уборки урожая гораздо значительнее, чем фонд оплаты труда механизатора. Поэтому имеет экономический смысл достигать максимального эффекта от совместной работы системы и человека.

По заверению представителей компании, данное мероприятие это только начало большой программы демонстрации работы системы беспилотного вождения на сельхозтехнике различных марок и типов от известных брендов. Ждём новые тест-драйвы и обязательно поделимся с Вами нашими впечатлениями.

А о том, как обстоят дела на практике с автоматизацией и роботизацией в конкретных хозяйствах, какие тренды наметились в данном направлении, стоит или не стоит вкладывать деньги в дорогие инновационные разработки поговорим во второй части нашей статьи.

Первая в мире заводская комплектация комбайнов системой ИИ

Роботизация — ключевой тренд отрасли АПК