Подход к глубокому обучению с подкреплением для улучшения автономного роботизированного захвата и сборки

Полуавтономные и автономные роботы внедряются во все большем количестве реальных сред, в том числе в промышленных условиях. Промышленные роботы могут ускорить производство различных продуктов, помогая людям выполнять основные задачи и облегчая их рабочую нагрузку. Двумя наиболее важными задачами в производстве являются захват объектов и сборка изделий, однако надежное решение этих задач с помощью роботизированных систем может оказаться сложной задачей. Одним из основных ограничений промышленных роботов для автоматизированных сборочных цепочек является то, что их необходимо тщательно программировать для решения конкретных задач (например, захвата и сборки определенных предметов), а их программирование для конкретного продукта может занять время. Исследователи из Технологического университета Циндао недавно решили устранить это важное ограничение промышленных роботов, используя глубокое обучение с подкреплением. В их статье, опубликованной в Международном журнале передовых производственных технологий , представлены новые алгоритмы глубокого обучения, которые могут ускорить время, необходимое для обучения промышленных роботов новым задачам захвата и сборки. «В этой статье предлагается основа, основанная на глубоком обучении с подкреплением , для автономного обучения навыкам хватания и сборки роботов», — написали в своей статье Чэнцзюнь Чен, Хао Чжан и их коллеги. «Между тем, представлены алгоритм обучения навыкам захвата робота на основе Q-обучения и алгоритм обучения навыкам сборки робота на основе PPO, где вводится априорная информация о знаниях для оптимизации действия захвата и сокращения времени обучения и данных взаимодействия, необходимых алгоритм обучения стратегии сборки». Новые методы обучения роботов, представленные в этой недавней статье, основаны на инструментах компьютерного зрения и машинного обучения, представленных в последние годы. Во-первых, исследователи разработали алгоритм глубокого обучения, предназначенный для быстрого обучения роботов новым навыкам захвата объектов, а также отдельный алгоритм для обучения роботов сборке определенных объектов. Одновременно они также разработали функции вознаграждения, которые можно использовать для эффективной оценки навыков захвата и сборки промышленных роботизированных систем. К ним относятся функции вознаграждения за ограничение захвата и сборки. Чтобы оценить потенциал предложенного ими набора инструментов для обучения роботов, Чен, Чжан и их коллеги протестировали его как в моделировании, так и на физических промышленных роботах. В своих реальных экспериментах команда специально использовала UR5, легкую роботизированную руку, часто применяемую для промышленных задач, а также камеру RealSense D435i для сбора RGB-изображений объектов, которые затем могли анализировать их алгоритмы. «Эффективность предложенной структуры и алгоритмов была проверена как в смоделированных, так и в реальных средах, а средний показатель успешного захвата в обеих средах составил до 90%. При допуске сборки «колышек в отверстии» 3 мм успех сборки этот показатель составил 86,7% и 73,3% в моделируемой среде и физической среде соответственно», — пишут исследователи в своей статье. Первоначальные результаты, полученные Ченом, Чжаном и их сотрудниками, очень многообещающие. Они позволяют предположить, что их набор алгоритмов обучения может ускорить программирование промышленных роботов, быстро научив их надежно захватывать и собирать объекты. В своих следующих исследованиях ученые планируют еще больше улучшить...

Подход к глубокому обучению с подкреплением для улучшения автономного роботизированного захвата и сборки

Читать полный текст на android-robot.com

 

Опубликовано: 17:22, 09.02.2024

 

Новость из рубрики: Hi-Tech

 

Поделиться новостью: Поделиться новостью в Facebook Поделиться новостью в Twittere Поделиться новостью в VK Поделиться новостью в Pinterest Поделиться новостью в Reddit

 
 

Виртуальная физическая лаборатория: инновационный подход к обучению 11:05, 24 Окт Виртуальная физическая лаборатория: инновационный подход к обучению Современные технологии активно внедряются в образовательные процессы, и физика — не исключение. Одним из таких нововведений является виртуальная физи...

Стартап ExLabs получил $1,9 миллионов на развитие технологии автономного захвата космических объектов 18:22, 19 Июн Стартап ExLabs получил $1,9 миллионов на развитие технологии автономного захвата космических объектов Exploration Laboratories — стартап, ориентированный на космические ресурсы, ускорит работу над технологией автономного захвата космических объе...

Тюринг-обвес для АУДИ  особенности 14:19, 13 Июл Тюринг-обвес для АУДИ — особенности Какой автомобиль относится к классу D и отличается повышенным комфортом? Это Audi А6 модели, которая отличается широкой линейкой двигателей. Для поку...

Эксперты Цифры Роботикс прогнозируют увеличение эффективности роботизированного станка в Перу более чем на 40% 02:11, 03 Апр Эксперты «Цифры Роботикс» прогнозируют увеличение эффективности роботизированного станка в Перу более чем на 40% «Цифра Роботикс» (входит в ГК «Цифра») роботизировала буровой станок в Перу. Система роботизации увеличила производительность станка на 16,4% по коли...

Android-Robot: Новости технологий и науки 18:29, 22 Апр Android-Robot: Новости технологий и науки О нашем портале Android-Robot — это ведущий ресурс, посвященный последним новостям в мире технологий и науки. Мы предлагаем тут самую актуальную ин...

Энергия захвата 02:44, 19 Июл Энергия захвата События, молниеносно разворачивающиеся в последние месяцы вокруг энергосбытовой компании "Ульяновскэнерго", напоминают сюжет незабвенного романа Ильф...

Миграцию летучих мышей удалось описать благодаря радарам и машинному обучению 14:33, 16 Июн Миграцию летучих мышей удалось описать благодаря радарам и машинному обучению Ученым удалось точно описать миграцию перелетных летучих мышей и отличить их от других животных. Оказалось, что они летают на меньшей высоте, чем пти...

Представили огромного автономного строительного робота 11:22, 04 Май Представили огромного автономного строительного робота Калифорнийский стартап Built Robotics представил огромного автономного строительного робота, который ускоряет создание солнечных ферм коммунального м...

02:44, 04 Июн Исследование ИИ показывает, что привычка к непрерывному обучению была более распространена во время изоляции Согласно исследованию Universitat Oberta de Catalunya (UOC), технологического центра Eurecat и Автономного университета Мадрида, опубликованному в PL...

13:00, 30 Авг Дизельный генератор ДГУ — надежный источник автономного питания В современном мире стабильное электроснабжение играет ключевую роль в повседневной жизни и работе предприятий. Однако непредвиденные отключения элект...

15:33, 11 Авг Представлена система захвата движения с роботизированным маркером Новая система захвата движения с роботизированным маркером, которая может улучшить взаимодействие человека и робота. Системы захвата движения (mocap)...

15:00, 12 Дек Новый метод улучшает реконструкцию сцены для тестирования моделей автономного вождения Разработка транспортных средств, которые могут безопасно работать без водителя-человека, была ключевой целью многих команд в сообществе исследователе...

15:00, 27 Май «Сил достаточно»: эксперт рассказал, что Шойгу сдержит обещание о «большом наступлении» после захвата Артемовска ВС РФ накопили в районе Артемовска достаточно сил, чтобы начать наступление в направлении Славянска и Краматорска. По словам военного эксперта, полко...

12:44, 30 Мар 12 преимуществ мятного чая для улучшения здоровья Если вам нравится свежий, охлаждающий вкус мятного чая, есть много причин продолжать наслаждаться им! Мята или Mentha spicata используется в традицио...

04:55, 08 Апр Times рассказала о неудачной попытке элитных украинских подразделений высадиться на берег Днепра для захвата ЗАЭС В октябре свыше 600 военных из элитных подразделений вооруженных сил Украины попытались высадиться на левый берег реки Днепр, чтобы захватить Запорож...

23:55, 24 Мар Метод улучшения планирования миссий, выполняемых несколькими БПЛА Беспилотные летательные аппараты (БПЛА), также известные как дроны, уже зарекомендовали себя как ценные инструменты для решения широкого спектра реал...

20:00, 06 Авг Инженеры исследуют целлюлозные нанофибриллы для улучшения 3D-печатного бетона Исследовательская группа под руководством инженеров Школы инженерии и прикладных наук Университета Вирджинии первой изучила, как новый материал на ра...

23:11, 17 Апр Невролог Демьяновская: для улучшения памяти нужно регулярно её тренировать Специалист подчеркнула, что помнить всё на свете невозможно, да и ненужно, поэтому забывать какие-то мелочи — вполне в порядке вещей. Но если пропада...

14:44, 21 Июн Dnny.com объявляет о новых функциях и обновлениях платформы для улучшения торговли /div> Dnny.com, авторитетная криптовалютная торговая платформа, недавно представила ряд заслуживающих внимания обновлений и новых функций, призванных...

20:00, 16 Дек Баранина и соль: полезные продукты для улучшения когнитивных способностей мозга Оказывается, наши пищевые привычки могут оказать непосредственное воздействие на работу мозга. Некоторые продукты, казавшиеся нам вредными, могут при...

10:00, 14 Апр Депутаты Курской областной думы рассмотрели законопроекты для улучшения жизни граждан Юрий Амерев, председатель Курской областной Думы, объявил о планах депутатов на следующее заседание. Они сосредоточатся на улучшении жизни населения ...

15:33, 16 Авг Услышать море: три технологии для улучшения качества звука и удобства телефонного разговора Услышать море: три технологии для улучшения качества звука и удобства телефонного разговора Erid: LatgBxZN6 В эру социальных сетей и мессенджеров тра...

05:33, 09 Июн Только не в мусорку! В России меняют подход к утилизации одежды В России, как и во многих странах мира, сформировалось общество потребления. Оно предпочитает избавляться от испорченных и даже вполне сносных вещей,...

09:00, 01 Авг Исследователь искусственного интеллекта предлагает инновационный подход к проверке ИИ Мустафа Сулейман, британский исследователь искусственного интеллекта, соучредитель и бывший руководитель прикладного ИИ в DeepMind, предлагает новый ...

14:22, 06 Июн Новый подход к реализации параллельных беспроводных вычислений в памяти Передовые коммуникационные технологии, такие как мобильная сеть пятого поколения (5G) и Интернет вещей (IoT), могут значительно выиграть от устройств...

18:55, 04 Апр Bitget объявляет о партнерстве с Cactus Custody от Matrixport для улучшения институциональной безопасности криптоактивов /div> Bitget, известная биржа криптовалют и компания Web3, недавно заключила соглашение о сотрудничестве с Cactus Custody, дочерней компанией Matrixp...

01:33, 25 Авг Новый пикап Sollers российской сборки: характеристики Как стало известно «Мотору» от директора по технологическому развитию и индустриализации Sollers Виктора Зорникова, под отечественным брендом во Влад...

08:33, 01 Апр Вышла новая версия мобильного симулятора сборки ПК + New PC Симулятор + New PC — это единственный достойный конкурент популярной компьютерной игре PC Building Simulator. Амбициозный проект позволяет испытать с...

05:22, 06 Июн Lada Granta спасена: АвтоВАЗ отказался от прекращения выпуска, модель получит всевозможные улучшения АвтоВАЗ оставит на конвейере бюджетную модель Lada Granta после появления в линейке новой и более дорогой Lada Iskra, о чем заявил вице-президент по ...

06:44, 10 Май Новый подход использует генеративный искусственный интеллект для имитации движений человека Международная группа исследователей создала новый подход к имитации движений человека, объединив центральные генераторы шаблонов (CPG) и глубокое обу...

17:44, 03 Ноя МИД РФ: «Подход МОК не может быть расценен иначе, кроме как сегрегация по национальному признаку» Ранее Международный олимпийский комитет (МОК) объяснил санкции против российских спортсменов «нарушением олимпийского перемирия» в 2022 году. «Ссылки...

08:00, 09 Окт Подход искусственного интеллекта позволил создать «спортивно умную» роботизированную собаку Когда-нибудь, когда случаются землетрясения, пожары и наводнения, первыми, кто отреагирует, станут стаи собак-роботов-спасателей, спешащих на помощь ...

15:00, 10 Апр Армия РФ уничтожила два цеха сборки беспилотников ВСУ в зоне спецоперации Российские войска уничтожили два цеха сборки беспилотников Вооруженных сил Украины (ВСУ) в зоне спецоперации. Об этом сообщила пресс-служба Миноборон...

15:33, 11 Окт В России могут появиться автомобили Skoda казахстанской сборки Марка Skoda вернется на рынок Казахстана, причем сразу с автомобилями локальной сборки. Об этом сообщила пресс-служба компании Skoda Auto, уточнив, ч...

03:33, 17 Дек Индия лишила автономного статуса Кашмир — область, за которую трижды в современной истории воевала с Пакистаном. Это может повлечь не только репрессии местной оппозиции, но и новую войну Индийские солдаты патрулируют центр города Шринагар в подконтрольной Дели Кашмирской долине. Число военных и силовиков на улицах кашмирских городов у...

17:33, 06 Май Усовершенствованный подход искусственного интеллекта повышает производительность неинвазивного интерфейса «мозг-компьютер» Поиск жизнеспособной альтернативы инвазивным интерфейсам «мозг-компьютер» (BCI) постоянно находится в центре внимания He Lab Университета Карнеги-Мел...

16:00, 09 Май Имплантаты Wraparound представляют собой новый подход к лечению травм спинного мозга Крошечное гибкое электронное устройство, охватывающее спинной мозг, может стать новым подходом к лечению травм позвоночника, которые могут вызвать гл...

01:22, 11 Окт Новая «Теория сборки» объединяет физику и биологию для объяснения эволюции Международная группа ученых разработала новую теоретическую основу, которая объединяет физику и биологию, предоставляя единый подход к пониманию слож...

15:00, 14 Ноя Chery Tiggo 8 Pro российской сборки (XCite X-Cross 8) поступил в продажу Российский бренд XCite сообщил о начале продаж полноприводного кроссовера XCite X-Cross 8. Машины уже поступают в дилерскую сеть. XCite X-Cross 8, ко...

05:55, 13 Дек Пользователи жалуются на качество сборки OnePlus 12 – щели, клей и насекомые Не так давно компания OnePlus выпустила свой новый флагманский смартфон – OnePlus 12. Через несколько дней после появления гаджета на прилавках первы...

19:44, 04 Апр Microsoft начала тестирование потенциальной RTM-сборки Windows 11 версии 24H2 Несколько часов назад Microsoft выпустила новую инсайдерскую сборку Windows 11 под номером 26100 для инсайдеров на каналах Dev и Canary, которая расс...

08:44, 04 Фев Xiaomi открыла программу по набору желающих протестировать ранние сборки HyperOS Как известно, компания Xiaomi выпустила в прошлом месяце анонсировала линейку устройств POCO X6 Pro и расширила выпуск HyperOS до 11 устройств. Кроме...

02:55, 15 Янв В магазинах появились новые Kia российской сборки: на все машины действует гарантия пять лет или 150 тыс. км пробега Вместе с Kia Seltos, которые вновь начали отгружать дилерам несколько дней назад, в российских автосалонах появились Kia Soul. Автомобили везут с кал...

12:22, 23 Апр Страховщики рассказали, сколько стоит застраховать Chery Tiggo 7 Pro российской сборки (Xcite X-Cross 7) Страховые компании рассчитали стоимость страховки на кроссовер Xcite X-Cross 7, он же Chery Tiggo 7 Pro российской сборки. Так как машина еще не пост...

17:44, 13 Май Mazda6 японской сборки с мотором 2,5 л, «автоматом», топовым оснащением и гарантией 2 года — за 4,2 млн рублей. В Белоруссии устроили распродажу Mazda Официальный дилер Mazda в Белоруссии, компания «Атлант-М Холпи», анонсировала распродажу некогда очень популярных и в России, и в Белорус...

01:00, 11 Фев Стартап Thea Energy разработал подход к термоядерной энергии, объединяющий точность и экономичность — программное управление магнитами для стабилизации плазмы в термоядерных реакторах Стартап Thea Energy нацелился на создание инновационной термоядерной электростанции, применяя подход, который объединяет аспекты двух основных методо...

16:00, 07 Сен «Для меня важно было снять фильм про людей, которые ищут подход друг к другу»: режиссёр Нурбек Эген о сериале «Контакт» с Павлом Майковым TРоссийский драматический сериал о непростых отношениях отца и дочери "Контакт" вернулся на платформу Premier со вторым сезоном. Редакция Spltnk пого...

06:00, 10 Июл Список изменений в обновлении KB5040435 (сборки 22621.3880 и 22631.3880) для Windows 11 версий 22H2 и 23H2 Microsoft выпустила накопительное обновление KB5040442 (сборки 22621.3880 и 22631.3880) для Windows 11 версий 22H2 и 23H2, которое приносит с собой и...

05:00, 11 Дек Список изменений в обновлении KB5048685 (сборки 22621.4602 и 22631.4602) для Windows 11 версий 22H2 и 23H2 Microsoft выпустила накопительное обновление KB5048685 (сборки 22621.4602 и 22631.4602) для Windows 11 версий 22H2 и 23H2, которое приносит с собой и...

18:00, 14 Авг Список изменений в обновлении KB5041585 (сборки 22621.4037 и 22631.4037) для Windows 11 версий 22H2 и 23H2 Microsoft выпустила накопительное обновление KB5041585 (сборки 22621.4037 и 22631.4037) для Windows 11 версий 22H2 и 23H2, которое приносит с собой и...

12:00, 26 Мар Медведев заявил о предвзятости судей: «СКА сталкивается с сомнительными решениями весь сезон: непонятно отмененные шайбы, странные удаления, пропускается грязь. Арбитрам нужно изменить подход к работе» Клуб из Санкт-Петербурга вылетел из розыгрыша Кубка Гагарина, потерпев поражение в серии (1-4). Последний матч СКА проиграл со счетом 4:5. «Работая и...