Логотип
Баннер в шапке 1
Баннер в шапке 2

Visual-Robotics Bridge (VRB)

Продукт
Разработчики: Университет Карнеги - Меллона (Carnegie Mellon University)
Дата премьеры системы: июнь 2023 г.
Отрасли: Информационные технологии
Технологии: Робототехника

2023: Анонс продукта

В середине июня 2023 года группа исследователей из Университета Карнеги-Меллона представила модель Visual-Robotics Bridge (VRB) для обучения роботов домашним делам, таким как поднятие трубки телефона, открытие ящиков и т. п.

До 2023 года ученые обучали роботов, физически показывая им, как выполняется та или иная задача, или тренируя их в течение нескольких недель в симулированной среде. Оба эти метода требуют много времени и ресурсов и часто оказываются безуспешными.

Группа исследователей представила модель Visual-Robotics Bridge (VRB) для обучения роботов домашним делам

Команда из Университета Карнеги-Меллона утверждает, что предложенная ими модель, VRB, способна заставить робота выучить задачу всего за 25 мин, и это без участия людей или симулированной среды. Эта работа может радикально улучшить методы обучения роботов и может позволить роботам обучаться на огромном количестве доступных в интернете и видео.

VRB представляет из себя усовершенствованную версию In-the-Wild Human Imitating Robot Learning (WHIRL), модели, которую исследователи ранее использовали для обучения роботов. Разница между WHIRL и VRB заключается в том, что в первом случае требуется, чтобы человек выполнял задачу перед роботом в определенной среде. После наблюдения за человеком робот может выполнить задачу в той же среде. Однако в VRB человек не требуется, и при определенной практике обучаемый робот может имитировать действия человека даже в условиях, отличных от тех, что показаны на видео.CIO девелопера Tekta Group Антон Солорев — о переходе с ERP Microsoft на «1С» и особенностях цифровизации в строительстве 3.3 т

Модель VRB работает на основе аффорданс - концепции, объясняющей возможность действия на объект. Дизайнеры используют эту концепцию, чтобы сделать продукт удобным для пользователя и интуитивно понятным.

В ходе исследования ученые из Университета Карнеги-Меллона сначала заставили роботов просмотреть несколько видеороликов из больших наборов видеоданных, таких как Ego4d и Epic Kitchen. Эти обширные данные были разработаны для обучения программ ИИ человеческим действиям. Затем они использовали аффорданс, чтобы роботы поняли точки соприкосновения и шаги, которые делают действие завершенным, и, наконец, они протестировали две роботизированные платформы в различных реальных условиях в течение 200 часов. Оба робота успешно выполнили 12 задач, которые люди выполняют практически ежедневно в своих домах, например, открыли банку с супом, взяли трубку телефона, подняли крышку, открыли дверь, выдвинули ящик и т. д. На следующих этапах разработчики надеются использовать VRB для обучения роботов более сложным многоэтапным задачам.[1]



СМ. ТАКЖЕ (1)


Подрядчики-лидеры по количеству проектов

За всю историю
2022 год
2023 год
2024 год
Текущий год

  Promobot (Промобот) (31)
  Cognitive Pilot (Когнитив Роботикс) (14)
  Яндекс (Yandex) (14)
  Nvidia (Нвидиа) (11)
  Сбербанк (11)
  Другие (519)

  Mains Lab (Мэйнс Лаборатория) (2)
  Яндекс (Yandex) (2)
  Московский центр инновационных технологий в здравоохранении Медтех (2)
  Бирюч-НТ Инновационный Центр (1)
  РИР (Росатом Инфраструктурные решения) (1)
  Другие (45)

  Департамент информационных технологий Москвы (ДИТ) (2)
  Яндекс (Yandex) (2)
  Инфосистемы Джет (2)
  Fora Robotics (Фора Роботикс) (2)
  Яндекс.Облако (Yandex Cloud) (2)
  Другие (46)

  Сбер Бизнес Софт (2)
  Синимекс (Cinimex) (2)
  Геоскан (Geoscan) (2)
  Университет Иннополис (2)
  Яндекс (Yandex) (2)
  Другие (60)

  GlowByte, ГлоуБайт (ранее Glowbyte Consulting, ГлоуБайт Консалтинг) (1)
  Сбербанк (1)
  Ситроникс (Sitronics) (1)
  Другие (1)

Распределение вендоров по количеству проектов внедрений (систем, проектов) с учётом партнёров

За всю историю
2022 год
2023 год
2024 год
Текущий год

  Promobot (Промобот) (10, 32)
  ABB Group (8, 23)
  Cognitive Pilot (Когнитив Роботикс) (3, 21)
  Cognitive Technologies (Когнитивные технологии) (1, 21)
  Яндекс (Yandex) (2, 11)
  Другие (604, 146)

  Эфко ГК (2, 1)
  Транспорт будущего (2, 1)
  Бирюч-НТ Инновационный Центр (2, 1)
  РОББО (ранее ScratchDuino, СкретчДуино) (1, 1)
  3D Bioprinting Solutions (3Д Биопринтинг Солюшенс) (1, 1)
  Другие (13, 13)

  Fora Robotics (Фора Роботикс) (1, 2)
  3D Bioprinting Solutions (3Д Биопринтинг Солюшенс) (1, 1)
  Dobot (Shenzhen Yuejiang Technology) (1, 1)
  Intuitive Surgical (1, 1)
  НИТУ МИСиС (Национальный исследовательский технологический университет) (1, 1)
  Другие (5, 5)

  Яндекс (Yandex) (1, 2)
  Pudu Robotics (Pudu Technology) (1, 2)
  Intuitive Surgical (1, 1)
  Ronavi Robotics, Ронави Роботикс (ранее Ронави логистические системы) (1, 1)
  Геоскан (Geoscan) (1, 1)
  Другие (2, 2)

Данные не найдены

Распределение систем по количеству проектов, не включая партнерские решения

За всю историю
2022 год
2023 год
2024 год
Текущий год

  Promobot - 26
  Cognitive Agro Pilot Система автоматического вождения - 21
  ABB IRB Промышленные роботы - 19
  Da Vinci (робот-хирург) - 11
  Яндекс.Ровер - 10
  Другие 130

  Робот-врач Promobot - 1
  Astabot Робот-палетный перевозчик - 1
  МИСиС и 3D Bioprinting Solutions: 3D-биопринтер в виде роборуки для применения в операционной in situ - 1
  Визорлабс Видеопилот (VizorLabs Spotter) - 1
  Hi-Fly Cargo - 1
  Другие 9

  For-1 Антропоморфный робот - 2
  Яндекс: Складские роботы - 1
  Robotech: RP-серия Роботы-паллетайзеры - 1
  Da Vinci (робот-хирург) - 1
  МИСиС и 3D Bioprinting Solutions: 3D-биопринтер в виде роборуки для применения в операционной in situ - 1
  Другие 2

  Pudu CC1 Робот-уборщик - 2
  Яндекс.Ровер - 2
  Unitree H1 Антропоморфные роботы - 1
  Геоскан БАС (Беспилотные авиационные системы самолетного типа) - 1
  Da Vinci (робот-хирург) - 1
  Другие 2
Данные не найдены