Что, если бы вы могли сказать дрону «Найти красный грузовик»? Программное обеспечение Avianna для обработки естественного языка для дронов

Представьте себе, что вы можете программировать миссии дронов, общаясь со своими БПЛА с помощью простых команд на человеческом языке, например, когда полицейский наблюдательный дрон может обнаружить автомобиль подозреваемого на оживленном шоссе, сказав ему: «Найди красный грузовик».

Avianna , недавно запущенный стартап по разработке программного обеспечения, предлагает набор продуктов, использующих искусственный интеллект (ИИ), позволяющий дронам и другим роботам понимать человеческий язык и работать автономно.

Вик Пеликано, основатель и генеральный директор Avianna, сказал, что основал компанию в начале этого года, чтобы использовать возможности искусственного интеллекта для создания более умных дронов. Он сказал, что первое поколение программного обеспечения для дронов, которое позволило летательным аппаратам превратиться из развлекательных продуктов в коммерчески полезные инструменты, недостаточно развито, чтобы перенести коммерческие операции с БПЛА в будущее.

«Мир, в котором вырастут мои дети, будет наполнен всевозможными роботами и беспилотными транспортными средствами», — сказал он в интервью.

«Даже такие крупные компании, как iRobot, не могут создать умного робота», — сказал Пеликано. «Здесь есть пробел, нам нужно выяснить, как внедрить ИИ в роботов».

Компания Avianna, расположенная в районе Чикаго и имеющая производственные мощности в Варшаве (Польша), предлагает набор из трех программных продуктов на базе искусственного интеллекта: Fleet AI, Vision AI и Mission AI. Пеликано сказал, что программное обеспечение можно запрограммировать для использования в любом типе роботизированных транспортных средств, включая БПЛА, наземные вездеходы, подводные лодки и подводные аппараты.

Fleet AI предназначен для упрощения и оптимизации операций владельца автопарка путем подключения интеллектуального чат-бота Avianna к роботам. Vision AI позволяет роботам визуально видеть окружающую среду и принимать обоснованные решения, а Mission AI позволяет роботам автономно выполнять миссии на основе команд на естественном языке.

«Искусственный интеллект флота предназначен для управления всем вашим автопарком, задает о них вопросы и рассматривает их целостно, как это сделал бы операционный менеджер», — сказал Пеликано. Искусственный интеллект миссии позволяет оператору автопарка осуществлять планирование на основе искусственного интеллекта, позволяя роботу выполнять определенные задачи, такие как доставка пиццы, стрижка двора или выдача посылки.

«Необходимым компонентом Mission AI, но также полезным и сам по себе, является Vision AI. Потому что для выполнения миссии вам нужно уметь видеть и интерпретировать то, над чем вы работаете», — сказал он. Программное обеспечение включает в себя усовершенствованную универсальную модель машинного зрения, к которой клиенты могут получить доступ через платформу, используя камеру своего дрона или другого типа робота.

«Используя достижения в области компьютерного зрения и наше собственное программное обеспечение, мы можем выполнять потрясающий сверхбыстрый анализ потоков видео в реальном времени во время полета робота, и он может, по сути, разговаривать сам с собой и корректировать свою миссию. Итак, если вы скажете ему: «Иди туда», и он пойдет туда, но увидит что-то на пути, он сможет определить, что это за вещь, и перенаправить себя вокруг нее».

Недавние достижения в области обработки естественного языка привели к разработке программного обеспечения, которое позволяет оператору вводить простые команды на английском языке и заставлять дрон реагировать на них.

«Я бы сказал, что за последние два года произошло наибольшее количество достижений, которые я когда-либо видел в этой области. Итак, с помощью моделей искусственного интеллекта на большом языке вы берете команды, которые кто-то говорит, и переводите их в список элементов управления дроном», — сказал Пеликано.

Однако дроны не полностью контролируются ИИ. «Вы не хотите, чтобы полный контроль передавался ИИ, поэтому там проводится некоторая проверка», — сказал он. «В конце концов, дроном на самом деле управляет алгоритм, безопасный алгоритм, который кто-то проверил».

Как он объяснил, «ИИ может придумать что-то вроде общих планов, а затем мы можем отточить их в алгоритмах, чтобы убедиться, что это безопасно».

Программное обеспечение Avianna адаптируется к широкому спектру приложений, особенно к тем, которые включают в себя «динамические среды открытого мира, которые создают проблемы для других средств автоматизации», таких как инспекция инфраструктуры, приложения в сельском хозяйстве и безопасности”, – сказал Пеликано.

“Это действительно привлекательные варианты использования… везде, где вы просто хотите, чтобы робот выполнял свою работу и говорил с вами только в случае необходимости, но вам не нужно постоянно за ним наблюдать», — сказал он.

«На сегодняшний день роботы подобны молоткам», — сказал он. «Это хорошие инструменты, они дополняют, улучшают способности отдельного человека. Они делают этого человека более продуктивным. Но с программным обеспечением Avianna робот станет автономным агентом, поэтому робот превратится из инструмента в настоящего работника».

Пеликано, запустивший Avianna в мае как самофинансируемый проект, занимается разработкой программного обеспечения. В 2022 году он продал свою первую компанию Verenia компании Oracle. «Я основал Verenia, мы запустили ее и управляли ею около 10 лет, а штат сотрудников вырос примерно до 100», — сказал он.

После продажи Verenia Пеликано начал пассивно инвестировать в сферу дронов и робототехники, встретившись со многими основателями и руководителями начинающих компаний в растущей отрасли. «И я понял, что у этих парней чего-то не было; их программное обеспечение было ужасным», — сказал он. «Это программное обеспечение с открытым исходным кодом отлично помогло начать хобби, но оно не похоже на то, что нужно сейчас или каким я вижу мир через 20 или 50 лет».

Avianna в настоящее время работает над пилотными программами с тремя компаниями-производителями дронов, имена которых Пеликано, отказался назвать, чтобы побудить эти компании включить программное обеспечение Avianna в свои линейки продуктов. Он сказал, что компания также работает с Министерством обороны США над изучением потенциального военного применения этой программной технологии.