Роботы и ИИ на службе у человека (часть 1)
Часть 1 - Часть 2
Совсем недавно на подобных видеороликах мы видели как роботы - андроиды служат человеку, а теперь это становится реальностью.
Digit
Компания Amazon, лидер в сфере электронной коммерции, начала эксперименты с гуманоидными роботами на своём исследовательском участке на юге от Сиэтла. Робот, названный Digit, был создан специалистами из Agility Robotics и обладает способностью поднимать и перемещать предметы, подобно человеку. «Digit способен двигаться, брать и обрабатывать предметы в углах и пространствах складов новыми способами. Его размер и форма оптимизированы для работы в зданиях, созданных для человека», - заявила Amazon.
Digit представляет собой гуманоидного бота с четырьмя конечностями, которому легко удаётся маневрировать и взаимодействовать с людьми на складах и производствах. Он отлично справляется с перемещением и сортировкой грузов, а лестницы ему совсем не помеха. Разве что Digit обладает когтеобразным или рукавицеобразным захватом, ввиду того, что пятипалую руку воспроизвести сложно.
Amazon подчёркивает, что Digit будет помогать персоналу компании. «На начальном этапе мы будем использовать эту технологию для помощи сотрудникам в утилизации контейнеров, что представляет собой повторяющийся процесс сбора и перемещения пустых контейнеров», - уточнила компания.
Стоит отметить, что в экосистеме Amazon уже функционирует более 750 000 роботов. Они занимаются рутинными задачами и тем самым освобождают сотрудников для более сложных задач.
Тем временем компания Agility Robotics, финансируемая Amazon, собирается открыть новый завод по производству роботов в городе Салем, штат Орегон. Планируется, что завод будет выпускать более 10 000 роботов в год. Agility Robotics уже превзошла инициативу Tesla, успешно разработав готовые к производству прототипы своих человекоподобных роботов и создав специализированное производство для их серийного выпуска. Первые клиенты могут рассчитывать на поставку роботов Digit в 2024 году, а их общее появление на рынке запланировано на 2025-й. В ближайших планах Agility Robotics - наладить и протестировать первые производственные линии. Интересно, что эти же роботы и будут использоваться на самом заводе для транспортировки материалов и комплектующих.
Американский стартап Agility Robotics продемонстрировал новые способности своего гуманоидного робота Digit. Теперь он не только внешне напоминает человека, но и умеет воспринимать команды на естественном языке, а не только по заранее запрограммированным запросам.
Восприятие роботом естественного языка стало возможным благодаря подключению к нему большой языковой модели. В качестве эксперимента Digit поместили в демонстрационное пространство с семью пронумерованными тумбами разной высоты и тремя коробками. Используя обычную человеческую речь, ему отдавали разные команды по перемещению коробок.
Как показано на видео, Digit попросили взять коробку цвета «светового меча Дарта Вейдера» и поставить её на самую высокую тумбу. Робот действовал неспешно, а все мыслительные процессы и команды прописывались ИИ в чате. Результат - точно выполненное задание.
«Наш отдел инноваций разработал эту интерактивную демонстрацию, чтобы показать, как большая языковая модель может сделать роботов более универсальными и оперативными. На демонстрации люди говорили с Digit естественным языком. Это даёт возможность заглянуть в будущее», - отмечают в Agility Robotics.
Figure 01
Робототехнический стартап Figure сообщил о подписании партнерства с BMW Manufacturing. В рамках сотрудничества двух компаний BMW начнет использовать человекоподобных роботов Figure на своем североамериканском заводе в Спартанбурге (штат Южная Каролина). Это первая коммерческая сделка, подписанная Figure с момента создания компании в 2022 году.
По словам Бретта Адкока (Brett Adcock), генерального директора Figure, сначала на производстве начнут использовать небольшое количество роботов. Если будут достигнуты целевые показатели производительности труда, их количество увеличат. Роботы будут интегрированы в производственные процессы в различных цехах - кузовном, обработки листового металла, на складе. Предварительно машины пройдут обучение посредством тренировки нейросетей: ИИ многократно покажут процессы, которые впоследствии будет выполнять робот. По завершении процесса тренировки машины будут работать автономно. «Мы разработали робота так, чтобы он был безопасен для находящихся рядом людей», - сказал Адкок.
Если эксперимент окажется удачным, то впоследствии человекоподобные роботы Figure появятся и на других заводах BMW.
Компания Figure обучает роботов новым задачам через телеоперации и симуляцию. Их гуманоиды могут анализировать удачные и неудачные шаги в задаче, решая, как выполнить её автономно и внося исправления в реальном времени. Ранние модели Figure 01 медленные и слабые, но у них достаточно силы и ловкости рук и ног, чтобы работать. Важны не мышцы, а их интеллект.
В новом видео Figure 01 подходит к сложенным коробкам, берет одну из них, затем подходит к конвейерной ленте и ставит объект на нее. Figure и ее конкуренты начинают тестировать роботов общего назначения в реальных рабочих ситуациях. Хотя эти гуманоиды делают примитивные вещи, они вполне могут начать окупаться. Роботы способны работать круглосуточно, и это более дешевая рабочая сила, чем люди.
Каждая новая задача, даже самая маленькая, помогает развивать большую модель поведения, которая со временем будет включать широкий спектр задач и физических возможностей. Андроиды учатся группами, поэтому прогресс одного означает прогресс всех. Роботы общего назначения могут развиваться темпами, сравнимыми с бурным ростом искусственного интеллекта.
Потенциал этой технологии для изменения общества огромен. В экономике могут исчезнуть ограничения на рабочую силу, а уровень производительности сильно увеличится.
Это объясняет, почему Figure привлекла инвестиции на сумму $675 млн. В нее уже инвестировали OpenAI и Microsoft, и теперь к ним присоединяются Amazon, Nvidia и целый ряд венчурных фондов.
Робот Figure 01 научился готовить кофе, о чем компания сообщила в X. Андроид реагирует на устную команду, открывает верхний отсек кофемашины, помещает внутрь капсулу с кофе, закрывает отсек и нажимает на кнопку. Человек, который попросил кофе, самостоятельно забирает готовый напиток.
Ключевым моментом здесь является не сама задача, а то, что робот потратил 10 часов на изучение видео и теперь может делать что-то самостоятельно. В его библиотеку добавлено новое автономное действие, которое можно перенести на другого робота Figure, работающего в той же системе, посредством группового обучения. Если этот процесс обучения применить к широкому спектру задач, то Figure 01 сможет научиться делать все: от чистки бананов до использования гаечного ключа.
OpenAI согласилась разработать для андроидов Figure новое поколение ИИ-моделей. И теперь нам показали, что это значит.
Как подтвердил глава Figure Бретт Эдкок, встроенные в робота F1 камеры посылают данные в большую зрительно-языковую модель, обученную OpenAI, сообщает Venture Beat. Собственная нейросеть Figure «тоже получает картинку с частотой 10 Гц через камеры робота». Также модель OpenAI отвечает за способность андроида понимать человеческую речь. Все эти потоки информации преобразуются нейросетью в «быстрые, низкоуровневые, ловкие действия» F1.
Стоя перед кухонным столом, F1 описал все, что видит, а затем верно интерпретировал просьбу человека дать ему что-нибудь съедобное, аккуратно протянув ему яблоко. Затем робот выбрасывает мусор и ставит тарелку и чашку в сушилку.
Эдкок заверил, что во время съемок видео роботом никто не управлял, и что запись не была ускорена при монтаже. В таком случае это действительно примечательный результат сотрудничества, которому еще только две недели. Конечная цель компании, по словам ее руководителя, обучить модель таким образом, чтобы она могла управлять действиями миллиардов человекоподобных роботов.
Eve
На видео, опубликованном 9 февраля 2024 года, роботы 1X передвигаются с помощью платформы на трех колесах. Используя захваты-когти, андроиды перекладывают предметы, самостоятельно заряжаются, складывают игрушки. Все гуманоиды работают на основе одной и той же модели поведенческого искусственного интеллекта.
На кадрах показали способность роботов EVE обучаться и выполнять различные задачи автономно, просто просматривая отснятый материал. Представители 1X заявили, что обучали роботов с помощью нейронной сети. Она состоит из искусственных нейронов, которые копируют архитектуру человеческого мозга для обучения на данных, а затем применяют полученные знания к новым данным.
Единая нейронная сеть, основанная на зрении, контролирует все поведение роботов, показанное на видео. Он работает, собирая и анализируя изображения с машин, прежде чем отправлять команды для управления движением и действиями роботов.
Инженеры 1X обучили модели машинного обучения на данных, полученных от 30 роботов EVE. Затем они использовали для обучения «базовой модели». Она обрабатывает несколько типов физического поведения - от уборки до социального взаимодействия с людьми и другими роботами. Позже ученые доработали модель так, чтобы машины могли лучше выполнять конкретные задачи.
Спустя менее шести недель 1X показала новое видео с гуманоидами. Сложность задач за этот короткий промежуток шагнула далеко вперед. Eve продемонстрировал многоэтапную обработку задач. Он разобрал сумку с продуктами, решил, куда их положить, а также открывал и закрывал дверцу шкафа после того, как убрал их. Робот также использовал мягкие инструменты, в частности, вытер разлитую жидкость тканью. Отсутствие больших пальцев не помешало ему сложить все четыре выступа картонной коробки вместе. Наконец, гуманоид сложил рубашку, что потребовало деликатного обращения с деформируемыми поверхностями.
Apollo
Робототехническая компания Apptronik заключила коммерческое соглашение с Mercedes-Benz. Автопроизводитель будет использовать на своих заводах гуманоидных роботов Apollo. Они займутся тяжёлым монотонным трудом, который не требует особых навыков. В некоторых странах, таких как Венгрия, на такую работу уже невозможно нанять людей: нет желающих. Роботы с «восхитительном глупым лицом», как описывают их журналисты The Verge, должны помочь компании сохранить в стране автомобильное производство, столкнувшееся с критической нехваткой рабочей силы.
Apptronik считает, что роботы-гуманоиды позволяют автопроизводителям автоматизировать процессы без изменения уже действующих производственных мощностей. Роботы могут делать то же, что и люди, но в несколько раз быстрее. А ещё им не нужны отдых и зарплата. Предполагается, что Apollo и его коллеги возьмут на себя физически трудные и скучные задачи, для которых тяжело найти работников-людей.
Примечательно, что роботы трудятся на заводе Mercedes в Венгрии. Эта страна уже несколько лет испытывает кризис рабочей силы. Молодые люди и квалифицированные сотрудники постарше переезжают в Западную Европу в поисках лучшей жизни и высокого заработка. Еще в 2016 году Audi и Mercedes сообщили, что найти сотрудников на местные заводы почти невозможно - никто не хочет заниматься монотонным физическим трудом.
Руководитель производства Mercedes Йорг Бюрцер подтвердил, что с помощью роботов Appolo компания хочет доукомплектовать штат рабочих, так как их нехватка становится критической для производства. Оказалось, что для низкоквалифицированного труда легче купить дорогих роботов, чем нанять людей.
Walker S
Китайский производитель электромобилей NIO проводит испытания человекоподобных роботов на своей сборочной линии, чтобы перейти на следующий уровень автоматизации. Роботы Walker S, представленные компанией UBTECH Robotics, помогают в проверке качества замков дверей, ремней безопасности и фар, а также прикрепляют логотипы на автомобили. Подробностей о характеристиках нового робота пока нет, но его предшественник имел рост 145 см, весил 77 кг и был оснащен литий-железо-фосфатным аккумулятором, обеспечивающим всего два часа автономной работы.
Производитель роботов-гуманоидов, зарегистрированный в Гонконге, UBTech Robotics опубликовал видео, на котором показано, как его робот Walker S работает на сборочной линии завода NIO. Компания заявляет, что Walker S впервые используется на конвейере по сборке электромобилей.
Во время испытаний робота Walker S были использованы его возможности по захвату и передаче изображений в режиме реального времени. С помощью этих функций робот мог проверять качество замков дверей, ремней безопасности и фар, а также наносил логотипы на транспортные средства.
NIO производит электромобили на своих двух заводах в Хэфэе, крупнейшем городе провинции Аньхой на востоке Китая.
Хотя NIO еще не сделала официального заявления относительно пилотной программы использования роботов-гуманоидов, UBTECH Robotics с энтузиазмом оценивает потенциал использования роботов на сборочных линиях электромобилей для повышения производительности. Компания утверждает на своем сайте, что «будущее людей заключается в сосуществовании человека и робота»
Подробностей о роботе Walker S нет на сайте UBTECH. Но его предшественник, гуманоидный робот Walker, имеет рост 145 см и вес 77 кг. Робот оснащен литий-железо-фосфатным аккумулятором, который полностью заряжается за два часа и обеспечивает до двух часов автономной работы.
Mobile ALOHA
Проекты по сбору данных и обучения роботов различной манипуляции через имитацию набирают обороты: исследователи из Стэнфордского университета представили проект Mobile ALOHA.
Mobile ALOHA - это недорогая ($32 тысячи) система дистанционного управления роботом, предназначенная для сбора данных. Она дополняет систему ALOHA мобильной базой и интерфейсом дистанционного управления. Используя данные, собранные с помощью Mobile ALOHA, можно выполнить контролируемое клонирование поведения (совместное обучение с существующими статическими наборами данных ALOHA повышает производительность при выполнении задач мобильного манипулирования).
Для обучения системы до 90% успеха достаточно всего 50 демонстраций (под этим понимается определённая последовательность действий, которую осуществляет оператор-человек при помощи специальных контроллеров).
Подобный подход позволил научить Mobile ALOHA автономно выполнять такие сложные мобильные манипуляционные задачи как: обжаривание и подача креветки, открытие двухдверного настенного шкафа для хранения кастрюли, вызов лифта и вход в него, а также легкое ополаскивание грязной сковородки из кухонного крана.
В автономном режиме робот управляется нейросеткой с ноутбука с GPU Nvidia 3070 Ti (8GB VRAM) и CPU Intel i7-12800H, а питается всё хозяйство робота от аккумулятора на 1.26 кВт весом 14 кг (расположен в основании робота (всего весит аж целых 75 кг)).
Ноутбук обрабатывает видеопоток с трёх вебкамер Logitech C922x, получая цветные кадры разрешением 480×640 с частотой 50 Гц (две камеры крепятся на запястьях ведомых манипуляторов, а третья просто смотрит вперёд) и данные проприоцепции со всех четырёх рук через
последовательные порты USB, а от мобильной базы Tracer через CAN-шину.
В качестве действий, записываются линейная и угловая скорости мобильной базы, совместные позиции всех 4 роботов-манипуляторов.
Гибкости систем робота достаточно, чтобы в режиме телеуправления через робота можно было и еду приготовить:
и домашние дела выполнить:
Ученые собрали мобильного робота из материалов, которые можно купить самостоятельно.
Уже на данный момент робот совершил научный прорыв:
- Он обошел «парадокс Моравека», который гласит, что роботам с трудом даются механические задачи, легкие для людей, - нужны огромные ресурсы, чтобы, например, просто поймать мяч.
- Aloha использует сразу две руки и контролирует все тело (как человек).
- Робот научился всему благодаря обучению-имитации, как ребенок, повторяя за людьми, которые показывали, что делать.
Эксперт назвал, когда человекоподобные роботы станут доступными
Человекоподобные роботы, подобные тому, создание которых анонсировала компания Tesla, могут появиться в масс-маркете по доступным ценам на горизонте пяти-семи лет, такой прогноз озвучил РИА Новости исполнительный вице-президент по развитию цифрового и нового бизнеса компании "Вымпелком" (торговая марка "Билайн") Евгений Черешнев в 2021 году.
Компания Tesla Inc накануне анонсировала появление в 2022 году прототипа модели робота-гуманоида Tesla Bot собственной разработки. Робот будет использовать некоторые из устройств искусственного интеллекта (ИИ), которые уже применяются в автомобилях компании. Как сообщил глава Tesla Илон Маск, робот будет также полезен в быту: он сможет ходить в магазин, приносить различные предметы и выполнять другие повседневные команды.
"Если говорить про ботов, я считаю, что в течение двух-трех лет вполне могут появиться человекоподобные роботы, которые будут использоваться в быту… Единственным препятствием для их массового распространения на первом этапе будет цена, но никаких технологических препон для развития этой ниши бизнеса нет. Если говорить о сроках появления доступных по цене ботов, то есть масс-маркета, - это горизонт пяти-семи лет", - сообщил Черешнев.
Эксперт указал, что разработки в этой отрасли идут десятки лет, "Tesla не то, чтобы изобретает велосипед с нуля". По его словам, с точки зрения технологий искусственного интеллекта разница между роботом-гуманоидом и машиной Tesla минимальна.
"Отличается только внешняя форма, но, по сути, и шагающий робот, и машина - это всего лишь компьютеры, оснащенные определённым набором очень похожих сенсоров. ИИ может одинаково эффективно управлять разными типами манипуляторов: у машины - это колеса и подвеска, у бота - это механизированные руки и ноги", - пояснил он.
Вице-президент "Вымпелком" отметил, что в настоящее время не стоит вопрос о том, будут ли человека окружать человекоподобные роботы, помогающие в быту - скорее, когда и кто первым будет монетизировать и внедрять эти технологии. Кроме того, по его прогнозам, люди начнут массово применять беспилотные автомобили в течение трех-пяти лет.
"Все упирается не в техническую проблему, а в юридический аспект - когда страховые компании будут готовы брать новые для себя риски за поведение роботов на дорогах и в быту", - заключил он.
Маск ожидает на Земле 1 млрд человекоподобных роботов в 2040-х годах
Бизнесмен Илон Маск выразил надежду, что в 2040-х гг. на Земле может появиться 1 млрд роботов-гуманоидов «при условии, что основы цивилизации будут стабильными». Об этом владелец Tesla заявил в X.
Таким образом, Маск согласился с предсказанием основателя исследовательской лаборатории искусственного интеллекта (ИИ) Midjourney Дэвида Хольца.
«Мы должны ожидать появления 1 млрд роботов-гуманоидов на Земле в 2040-х гг. и 100 млрд (в основном инопланетных) роботов по всей Солнечной системе в 2060-х гг.», - заявил Хольц. На что Маск ответил: «Вероятно, что-то в этом роде, при условии, что основы цивилизации стабильны».
Tesla представила своего первого человекоподобные робота, известного под внутренним названием Optimus, весной 2022 г. Тогда же Маск заявил, что со временем производство таких машин «в потенциале может стать более значительным, чем автомобильный бизнес [Tesla]», и поможет справиться с нехваткой рабочей силы. По его словам, первое применение серийные роботы найдут на предприятиях Tesla.
Билл Гейтс поддержал внедрение человекоподобных роботов во все сферы жизни
Основатель компании Microsoft Билл Гейтс заявил о поддержке повсеместного внедрения человекоподобных роботов «общего назначения», которых можно использовать в быту и на производстве. Он опубликовал статью с описанием перспективных стартапов и новых лабораторий робототехники, и выделил среди них три компании, занимающиеся разработкой «роботов-гуманоидов»: компанию Agility с их роботом Digit, компанию Apptronik, создатель Apollo, и лабораторию RoMeLa (Robotics and Mechanisms Lab) из UCLA, стоящую за «футбольным» роботом ARTEMIS.
В частности, Гейтс отмечает, что компания Apptronik из Остина, возникшая из лаборатории робототехники в Университете Техаса, разрабатывает роботов, способных выполнять широкий спектр задач - «от переноса коробок на производстве до помощи по дому».
Гейтс подчеркнул, что для «максимально плавной интеграции роботов» в нашу повседневную жизнь они должны быть смоделированы по образцу людей. Например, робот Digit от Agility в настоящее время лидирует по числу применений в реальной жизни, включая недавний эксперимент на складах Amazon. Он заложил основу для сделки с BMW, заключённой компанией Figure.
«Меня радуют компании, которые находятся на переднем крае робототехники и трудятся над тем, чтобы начать революцию в в этой сфере. Некоторые из их роботов имеют „человекоподобную конструкцию“, что позволяет им легко взаимодействовать в среде, созданной для людей. Другие обладают сверхчеловеческими способностями, такими как полет или выдвижные руки, которые могут дополнить способности обычного человека», - объяснил предприниматель.
«Я понимаю опасения по поводу того, что роботы могут лишить людей работы. Правительствам придется помочь людям сориентироваться в этой ситуации. Но учитывая нынешний дефицит рабочей силы в экономике, а также опасность некоторых профессий, я считаю, что вероятность того, что роботы заменят нас на любимой работе, невелика. Скорее всего, они будут выполнять работу, которую люди не хотят делать. При этом они могут сделать людей более здоровыми, продуктивными и даже менее одинокими», - заключил Гейтс.
Илон Маск планирует выпускать человекоподобных роботов миллионами
Поставки человекоподобных роботов от Tesla, которым дали название Optimus, начнутся в 2025 году, заявили в недавней отчётной конференции представители компании, основателем которой является Илон Маск. Эти роботы будут обладать уникальными характеристиками, которые делают их одними из самых передовых и инновационных устройств на рынке. Маск назвал Optimus "самым совершенным на планете роботом, похожим на людей" и заявил, что он сможет выполнять широчайший спектр задач, от сборки механических устройств до оказания помощи престарелым людям.
Tesla Optimus - это человекоподобный робот с продвинутым искусственным интеллектом. Он разработан для выполнения различных задач, включая помощь в домашних делах, выполнение работ на улице и даже участие в развлекательных мероприятиях. Робот обладает множеством функций, включая распознавание речи, обладает способностью к обучению и самообучению, а также возможностью взаимодействия с людьми через различные интерфейсы.
Поставки Optimus начнутся в 2025 году. Маск заявил, что Optimus может иметь "глубокое влияние на общество" и, что он планирует выпускать их миллионами. Цена робота, по сообщению Reuters составит $20 000.
Министерство промышленности КНР планирует массовый выпуск роботов-андроидов
Китай намерен совершить к 2025 году прорыв в создании и массовом выпуске человекоподобных роботов. Об этом говорится в документе, опубликованном Министерством промышленности и информационных технологий КНР. Сегмент человекоподобных роботов в стране к 2025 году «достигнет международного передового уровня и массового производства». К 2027 году способности человекоподобных роботов в вопросе технологических инноваций будут значительно улучшены и Китай станет в этой области «конкурентоспособным на международном уровне», указано в документе под названием «Руководящее мнение по инновациям и развитию человекоподобных роботов».
Издание «Цзинцзи цанькао бао» приводит интервью неназванного представителя министерства, отвечающего за департамент науки и техники. Он, в частности, заявил, что в ближайшее время в Китае планируется создать 2-3 крупных производства по выпуску гуманоидных роботов, а также сеть специализированных малых и средних предприятий, сформировать 2-3 агломерационные зоны промышленного развития.
Гуманоидные роботы - человекоподобные роботы, как правило, имеющие руки, ноги и определенную форму головы. В отличие от андроидов, гуманоиды необязательно должны полностью копировать внешность человека.
В китайском министерстве уверены, что усовершенствованные двуногие машины способны изменить мир, выполняя рутинную работу на фермах, фабриках и в домах, чтобы снять нагрузку с людей. Роботы также должны выполнять функции спасателей во время техногенных аварий - там, где высокая степень угрозы для жизни людей-спасателей.
Китай призывает соотечественников к активным действиям по разработке роботов, но с «оглядкой на китайскую мудрость». «Принимайте активное участие в разработке международных правил и стандартов и вносите китайскую мудрость в развитие глобальной индустрии гуманоидных роботов».
Часть 1 - Часть 2
Click to viewСовсем недавно на подобных видеороликах мы видели как роботы - андроиды служат человеку, а теперь это становится реальностью.
Digit
Компания Amazon, лидер в сфере электронной коммерции, начала эксперименты с гуманоидными роботами на своём исследовательском участке на юге от Сиэтла. Робот, названный Digit, был создан специалистами из Agility Robotics и обладает способностью поднимать и перемещать предметы, подобно человеку. «Digit способен двигаться, брать и обрабатывать предметы в углах и пространствах складов новыми способами. Его размер и форма оптимизированы для работы в зданиях, созданных для человека», - заявила Amazon.
Digit представляет собой гуманоидного бота с четырьмя конечностями, которому легко удаётся маневрировать и взаимодействовать с людьми на складах и производствах. Он отлично справляется с перемещением и сортировкой грузов, а лестницы ему совсем не помеха. Разве что Digit обладает когтеобразным или рукавицеобразным захватом, ввиду того, что пятипалую руку воспроизвести сложно.
Amazon подчёркивает, что Digit будет помогать персоналу компании. «На начальном этапе мы будем использовать эту технологию для помощи сотрудникам в утилизации контейнеров, что представляет собой повторяющийся процесс сбора и перемещения пустых контейнеров», - уточнила компания.
Стоит отметить, что в экосистеме Amazon уже функционирует более 750 000 роботов. Они занимаются рутинными задачами и тем самым освобождают сотрудников для более сложных задач.
Тем временем компания Agility Robotics, финансируемая Amazon, собирается открыть новый завод по производству роботов в городе Салем, штат Орегон. Планируется, что завод будет выпускать более 10 000 роботов в год. Agility Robotics уже превзошла инициативу Tesla, успешно разработав готовые к производству прототипы своих человекоподобных роботов и создав специализированное производство для их серийного выпуска. Первые клиенты могут рассчитывать на поставку роботов Digit в 2024 году, а их общее появление на рынке запланировано на 2025-й. В ближайших планах Agility Robotics - наладить и протестировать первые производственные линии. Интересно, что эти же роботы и будут использоваться на самом заводе для транспортировки материалов и комплектующих.
Американский стартап Agility Robotics продемонстрировал новые способности своего гуманоидного робота Digit. Теперь он не только внешне напоминает человека, но и умеет воспринимать команды на естественном языке, а не только по заранее запрограммированным запросам.
Восприятие роботом естественного языка стало возможным благодаря подключению к нему большой языковой модели. В качестве эксперимента Digit поместили в демонстрационное пространство с семью пронумерованными тумбами разной высоты и тремя коробками. Используя обычную человеческую речь, ему отдавали разные команды по перемещению коробок.
Как показано на видео, Digit попросили взять коробку цвета «светового меча Дарта Вейдера» и поставить её на самую высокую тумбу. Робот действовал неспешно, а все мыслительные процессы и команды прописывались ИИ в чате. Результат - точно выполненное задание.
«Наш отдел инноваций разработал эту интерактивную демонстрацию, чтобы показать, как большая языковая модель может сделать роботов более универсальными и оперативными. На демонстрации люди говорили с Digit естественным языком. Это даёт возможность заглянуть в будущее», - отмечают в Agility Robotics.
Figure 01
Робототехнический стартап Figure сообщил о подписании партнерства с BMW Manufacturing. В рамках сотрудничества двух компаний BMW начнет использовать человекоподобных роботов Figure на своем североамериканском заводе в Спартанбурге (штат Южная Каролина). Это первая коммерческая сделка, подписанная Figure с момента создания компании в 2022 году.
По словам Бретта Адкока (Brett Adcock), генерального директора Figure, сначала на производстве начнут использовать небольшое количество роботов. Если будут достигнуты целевые показатели производительности труда, их количество увеличат. Роботы будут интегрированы в производственные процессы в различных цехах - кузовном, обработки листового металла, на складе. Предварительно машины пройдут обучение посредством тренировки нейросетей: ИИ многократно покажут процессы, которые впоследствии будет выполнять робот. По завершении процесса тренировки машины будут работать автономно. «Мы разработали робота так, чтобы он был безопасен для находящихся рядом людей», - сказал Адкок.
Если эксперимент окажется удачным, то впоследствии человекоподобные роботы Figure появятся и на других заводах BMW.
Компания Figure обучает роботов новым задачам через телеоперации и симуляцию. Их гуманоиды могут анализировать удачные и неудачные шаги в задаче, решая, как выполнить её автономно и внося исправления в реальном времени. Ранние модели Figure 01 медленные и слабые, но у них достаточно силы и ловкости рук и ног, чтобы работать. Важны не мышцы, а их интеллект.
В новом видео Figure 01 подходит к сложенным коробкам, берет одну из них, затем подходит к конвейерной ленте и ставит объект на нее. Figure и ее конкуренты начинают тестировать роботов общего назначения в реальных рабочих ситуациях. Хотя эти гуманоиды делают примитивные вещи, они вполне могут начать окупаться. Роботы способны работать круглосуточно, и это более дешевая рабочая сила, чем люди.
Каждая новая задача, даже самая маленькая, помогает развивать большую модель поведения, которая со временем будет включать широкий спектр задач и физических возможностей. Андроиды учатся группами, поэтому прогресс одного означает прогресс всех. Роботы общего назначения могут развиваться темпами, сравнимыми с бурным ростом искусственного интеллекта.
Потенциал этой технологии для изменения общества огромен. В экономике могут исчезнуть ограничения на рабочую силу, а уровень производительности сильно увеличится.
Это объясняет, почему Figure привлекла инвестиции на сумму $675 млн. В нее уже инвестировали OpenAI и Microsoft, и теперь к ним присоединяются Amazon, Nvidia и целый ряд венчурных фондов.
Робот Figure 01 научился готовить кофе, о чем компания сообщила в X. Андроид реагирует на устную команду, открывает верхний отсек кофемашины, помещает внутрь капсулу с кофе, закрывает отсек и нажимает на кнопку. Человек, который попросил кофе, самостоятельно забирает готовый напиток.
Ключевым моментом здесь является не сама задача, а то, что робот потратил 10 часов на изучение видео и теперь может делать что-то самостоятельно. В его библиотеку добавлено новое автономное действие, которое можно перенести на другого робота Figure, работающего в той же системе, посредством группового обучения. Если этот процесс обучения применить к широкому спектру задач, то Figure 01 сможет научиться делать все: от чистки бананов до использования гаечного ключа.
OpenAI согласилась разработать для андроидов Figure новое поколение ИИ-моделей. И теперь нам показали, что это значит.
Как подтвердил глава Figure Бретт Эдкок, встроенные в робота F1 камеры посылают данные в большую зрительно-языковую модель, обученную OpenAI, сообщает Venture Beat. Собственная нейросеть Figure «тоже получает картинку с частотой 10 Гц через камеры робота». Также модель OpenAI отвечает за способность андроида понимать человеческую речь. Все эти потоки информации преобразуются нейросетью в «быстрые, низкоуровневые, ловкие действия» F1.
Стоя перед кухонным столом, F1 описал все, что видит, а затем верно интерпретировал просьбу человека дать ему что-нибудь съедобное, аккуратно протянув ему яблоко. Затем робот выбрасывает мусор и ставит тарелку и чашку в сушилку.
Эдкок заверил, что во время съемок видео роботом никто не управлял, и что запись не была ускорена при монтаже. В таком случае это действительно примечательный результат сотрудничества, которому еще только две недели. Конечная цель компании, по словам ее руководителя, обучить модель таким образом, чтобы она могла управлять действиями миллиардов человекоподобных роботов.
Eve
На видео, опубликованном 9 февраля 2024 года, роботы 1X передвигаются с помощью платформы на трех колесах. Используя захваты-когти, андроиды перекладывают предметы, самостоятельно заряжаются, складывают игрушки. Все гуманоиды работают на основе одной и той же модели поведенческого искусственного интеллекта.
На кадрах показали способность роботов EVE обучаться и выполнять различные задачи автономно, просто просматривая отснятый материал. Представители 1X заявили, что обучали роботов с помощью нейронной сети. Она состоит из искусственных нейронов, которые копируют архитектуру человеческого мозга для обучения на данных, а затем применяют полученные знания к новым данным.
Единая нейронная сеть, основанная на зрении, контролирует все поведение роботов, показанное на видео. Он работает, собирая и анализируя изображения с машин, прежде чем отправлять команды для управления движением и действиями роботов.
Инженеры 1X обучили модели машинного обучения на данных, полученных от 30 роботов EVE. Затем они использовали для обучения «базовой модели». Она обрабатывает несколько типов физического поведения - от уборки до социального взаимодействия с людьми и другими роботами. Позже ученые доработали модель так, чтобы машины могли лучше выполнять конкретные задачи.
Спустя менее шести недель 1X показала новое видео с гуманоидами. Сложность задач за этот короткий промежуток шагнула далеко вперед. Eve продемонстрировал многоэтапную обработку задач. Он разобрал сумку с продуктами, решил, куда их положить, а также открывал и закрывал дверцу шкафа после того, как убрал их. Робот также использовал мягкие инструменты, в частности, вытер разлитую жидкость тканью. Отсутствие больших пальцев не помешало ему сложить все четыре выступа картонной коробки вместе. Наконец, гуманоид сложил рубашку, что потребовало деликатного обращения с деформируемыми поверхностями.
Apollo
Робототехническая компания Apptronik заключила коммерческое соглашение с Mercedes-Benz. Автопроизводитель будет использовать на своих заводах гуманоидных роботов Apollo. Они займутся тяжёлым монотонным трудом, который не требует особых навыков. В некоторых странах, таких как Венгрия, на такую работу уже невозможно нанять людей: нет желающих. Роботы с «восхитительном глупым лицом», как описывают их журналисты The Verge, должны помочь компании сохранить в стране автомобильное производство, столкнувшееся с критической нехваткой рабочей силы.
Apptronik считает, что роботы-гуманоиды позволяют автопроизводителям автоматизировать процессы без изменения уже действующих производственных мощностей. Роботы могут делать то же, что и люди, но в несколько раз быстрее. А ещё им не нужны отдых и зарплата. Предполагается, что Apollo и его коллеги возьмут на себя физически трудные и скучные задачи, для которых тяжело найти работников-людей.
Примечательно, что роботы трудятся на заводе Mercedes в Венгрии. Эта страна уже несколько лет испытывает кризис рабочей силы. Молодые люди и квалифицированные сотрудники постарше переезжают в Западную Европу в поисках лучшей жизни и высокого заработка. Еще в 2016 году Audi и Mercedes сообщили, что найти сотрудников на местные заводы почти невозможно - никто не хочет заниматься монотонным физическим трудом.
Руководитель производства Mercedes Йорг Бюрцер подтвердил, что с помощью роботов Appolo компания хочет доукомплектовать штат рабочих, так как их нехватка становится критической для производства. Оказалось, что для низкоквалифицированного труда легче купить дорогих роботов, чем нанять людей.
Walker S
Китайский производитель электромобилей NIO проводит испытания человекоподобных роботов на своей сборочной линии, чтобы перейти на следующий уровень автоматизации. Роботы Walker S, представленные компанией UBTECH Robotics, помогают в проверке качества замков дверей, ремней безопасности и фар, а также прикрепляют логотипы на автомобили. Подробностей о характеристиках нового робота пока нет, но его предшественник имел рост 145 см, весил 77 кг и был оснащен литий-железо-фосфатным аккумулятором, обеспечивающим всего два часа автономной работы.
Производитель роботов-гуманоидов, зарегистрированный в Гонконге, UBTech Robotics опубликовал видео, на котором показано, как его робот Walker S работает на сборочной линии завода NIO. Компания заявляет, что Walker S впервые используется на конвейере по сборке электромобилей.
Во время испытаний робота Walker S были использованы его возможности по захвату и передаче изображений в режиме реального времени. С помощью этих функций робот мог проверять качество замков дверей, ремней безопасности и фар, а также наносил логотипы на транспортные средства.
NIO производит электромобили на своих двух заводах в Хэфэе, крупнейшем городе провинции Аньхой на востоке Китая.
Хотя NIO еще не сделала официального заявления относительно пилотной программы использования роботов-гуманоидов, UBTECH Robotics с энтузиазмом оценивает потенциал использования роботов на сборочных линиях электромобилей для повышения производительности. Компания утверждает на своем сайте, что «будущее людей заключается в сосуществовании человека и робота»
Подробностей о роботе Walker S нет на сайте UBTECH. Но его предшественник, гуманоидный робот Walker, имеет рост 145 см и вес 77 кг. Робот оснащен литий-железо-фосфатным аккумулятором, который полностью заряжается за два часа и обеспечивает до двух часов автономной работы.
Mobile ALOHA
Проекты по сбору данных и обучения роботов различной манипуляции через имитацию набирают обороты: исследователи из Стэнфордского университета представили проект Mobile ALOHA.
Mobile ALOHA - это недорогая ($32 тысячи) система дистанционного управления роботом, предназначенная для сбора данных. Она дополняет систему ALOHA мобильной базой и интерфейсом дистанционного управления. Используя данные, собранные с помощью Mobile ALOHA, можно выполнить контролируемое клонирование поведения (совместное обучение с существующими статическими наборами данных ALOHA повышает производительность при выполнении задач мобильного манипулирования).
Для обучения системы до 90% успеха достаточно всего 50 демонстраций (под этим понимается определённая последовательность действий, которую осуществляет оператор-человек при помощи специальных контроллеров).
Подобный подход позволил научить Mobile ALOHA автономно выполнять такие сложные мобильные манипуляционные задачи как: обжаривание и подача креветки, открытие двухдверного настенного шкафа для хранения кастрюли, вызов лифта и вход в него, а также легкое ополаскивание грязной сковородки из кухонного крана.
В автономном режиме робот управляется нейросеткой с ноутбука с GPU Nvidia 3070 Ti (8GB VRAM) и CPU Intel i7-12800H, а питается всё хозяйство робота от аккумулятора на 1.26 кВт весом 14 кг (расположен в основании робота (всего весит аж целых 75 кг)).
Ноутбук обрабатывает видеопоток с трёх вебкамер Logitech C922x, получая цветные кадры разрешением 480×640 с частотой 50 Гц (две камеры крепятся на запястьях ведомых манипуляторов, а третья просто смотрит вперёд) и данные проприоцепции со всех четырёх рук через
последовательные порты USB, а от мобильной базы Tracer через CAN-шину.
В качестве действий, записываются линейная и угловая скорости мобильной базы, совместные позиции всех 4 роботов-манипуляторов.
Гибкости систем робота достаточно, чтобы в режиме телеуправления через робота можно было и еду приготовить:
и домашние дела выполнить:
Ученые собрали мобильного робота из материалов, которые можно купить самостоятельно.
Уже на данный момент робот совершил научный прорыв:
- Он обошел «парадокс Моравека», который гласит, что роботам с трудом даются механические задачи, легкие для людей, - нужны огромные ресурсы, чтобы, например, просто поймать мяч.
- Aloha использует сразу две руки и контролирует все тело (как человек).
- Робот научился всему благодаря обучению-имитации, как ребенок, повторяя за людьми, которые показывали, что делать.
Эксперт назвал, когда человекоподобные роботы станут доступными
Человекоподобные роботы, подобные тому, создание которых анонсировала компания Tesla, могут появиться в масс-маркете по доступным ценам на горизонте пяти-семи лет, такой прогноз озвучил РИА Новости исполнительный вице-президент по развитию цифрового и нового бизнеса компании "Вымпелком" (торговая марка "Билайн") Евгений Черешнев в 2021 году.
Компания Tesla Inc накануне анонсировала появление в 2022 году прототипа модели робота-гуманоида Tesla Bot собственной разработки. Робот будет использовать некоторые из устройств искусственного интеллекта (ИИ), которые уже применяются в автомобилях компании. Как сообщил глава Tesla Илон Маск, робот будет также полезен в быту: он сможет ходить в магазин, приносить различные предметы и выполнять другие повседневные команды.
"Если говорить про ботов, я считаю, что в течение двух-трех лет вполне могут появиться человекоподобные роботы, которые будут использоваться в быту… Единственным препятствием для их массового распространения на первом этапе будет цена, но никаких технологических препон для развития этой ниши бизнеса нет. Если говорить о сроках появления доступных по цене ботов, то есть масс-маркета, - это горизонт пяти-семи лет", - сообщил Черешнев.
Эксперт указал, что разработки в этой отрасли идут десятки лет, "Tesla не то, чтобы изобретает велосипед с нуля". По его словам, с точки зрения технологий искусственного интеллекта разница между роботом-гуманоидом и машиной Tesla минимальна.
"Отличается только внешняя форма, но, по сути, и шагающий робот, и машина - это всего лишь компьютеры, оснащенные определённым набором очень похожих сенсоров. ИИ может одинаково эффективно управлять разными типами манипуляторов: у машины - это колеса и подвеска, у бота - это механизированные руки и ноги", - пояснил он.
Вице-президент "Вымпелком" отметил, что в настоящее время не стоит вопрос о том, будут ли человека окружать человекоподобные роботы, помогающие в быту - скорее, когда и кто первым будет монетизировать и внедрять эти технологии. Кроме того, по его прогнозам, люди начнут массово применять беспилотные автомобили в течение трех-пяти лет.
"Все упирается не в техническую проблему, а в юридический аспект - когда страховые компании будут готовы брать новые для себя риски за поведение роботов на дорогах и в быту", - заключил он.
Маск ожидает на Земле 1 млрд человекоподобных роботов в 2040-х годах
Бизнесмен Илон Маск выразил надежду, что в 2040-х гг. на Земле может появиться 1 млрд роботов-гуманоидов «при условии, что основы цивилизации будут стабильными». Об этом владелец Tesla заявил в X.
Таким образом, Маск согласился с предсказанием основателя исследовательской лаборатории искусственного интеллекта (ИИ) Midjourney Дэвида Хольца.
«Мы должны ожидать появления 1 млрд роботов-гуманоидов на Земле в 2040-х гг. и 100 млрд (в основном инопланетных) роботов по всей Солнечной системе в 2060-х гг.», - заявил Хольц. На что Маск ответил: «Вероятно, что-то в этом роде, при условии, что основы цивилизации стабильны».
Tesla представила своего первого человекоподобные робота, известного под внутренним названием Optimus, весной 2022 г. Тогда же Маск заявил, что со временем производство таких машин «в потенциале может стать более значительным, чем автомобильный бизнес [Tesla]», и поможет справиться с нехваткой рабочей силы. По его словам, первое применение серийные роботы найдут на предприятиях Tesla.
Билл Гейтс поддержал внедрение человекоподобных роботов во все сферы жизни
Основатель компании Microsoft Билл Гейтс заявил о поддержке повсеместного внедрения человекоподобных роботов «общего назначения», которых можно использовать в быту и на производстве. Он опубликовал статью с описанием перспективных стартапов и новых лабораторий робототехники, и выделил среди них три компании, занимающиеся разработкой «роботов-гуманоидов»: компанию Agility с их роботом Digit, компанию Apptronik, создатель Apollo, и лабораторию RoMeLa (Robotics and Mechanisms Lab) из UCLA, стоящую за «футбольным» роботом ARTEMIS.
В частности, Гейтс отмечает, что компания Apptronik из Остина, возникшая из лаборатории робототехники в Университете Техаса, разрабатывает роботов, способных выполнять широкий спектр задач - «от переноса коробок на производстве до помощи по дому».
Гейтс подчеркнул, что для «максимально плавной интеграции роботов» в нашу повседневную жизнь они должны быть смоделированы по образцу людей. Например, робот Digit от Agility в настоящее время лидирует по числу применений в реальной жизни, включая недавний эксперимент на складах Amazon. Он заложил основу для сделки с BMW, заключённой компанией Figure.
«Меня радуют компании, которые находятся на переднем крае робототехники и трудятся над тем, чтобы начать революцию в в этой сфере. Некоторые из их роботов имеют „человекоподобную конструкцию“, что позволяет им легко взаимодействовать в среде, созданной для людей. Другие обладают сверхчеловеческими способностями, такими как полет или выдвижные руки, которые могут дополнить способности обычного человека», - объяснил предприниматель.
«Я понимаю опасения по поводу того, что роботы могут лишить людей работы. Правительствам придется помочь людям сориентироваться в этой ситуации. Но учитывая нынешний дефицит рабочей силы в экономике, а также опасность некоторых профессий, я считаю, что вероятность того, что роботы заменят нас на любимой работе, невелика. Скорее всего, они будут выполнять работу, которую люди не хотят делать. При этом они могут сделать людей более здоровыми, продуктивными и даже менее одинокими», - заключил Гейтс.
Илон Маск планирует выпускать человекоподобных роботов миллионами
Поставки человекоподобных роботов от Tesla, которым дали название Optimus, начнутся в 2025 году, заявили в недавней отчётной конференции представители компании, основателем которой является Илон Маск. Эти роботы будут обладать уникальными характеристиками, которые делают их одними из самых передовых и инновационных устройств на рынке. Маск назвал Optimus "самым совершенным на планете роботом, похожим на людей" и заявил, что он сможет выполнять широчайший спектр задач, от сборки механических устройств до оказания помощи престарелым людям.
Tesla Optimus - это человекоподобный робот с продвинутым искусственным интеллектом. Он разработан для выполнения различных задач, включая помощь в домашних делах, выполнение работ на улице и даже участие в развлекательных мероприятиях. Робот обладает множеством функций, включая распознавание речи, обладает способностью к обучению и самообучению, а также возможностью взаимодействия с людьми через различные интерфейсы.
Поставки Optimus начнутся в 2025 году. Маск заявил, что Optimus может иметь "глубокое влияние на общество" и, что он планирует выпускать их миллионами. Цена робота, по сообщению Reuters составит $20 000.
Министерство промышленности КНР планирует массовый выпуск роботов-андроидов
Китай намерен совершить к 2025 году прорыв в создании и массовом выпуске человекоподобных роботов. Об этом говорится в документе, опубликованном Министерством промышленности и информационных технологий КНР. Сегмент человекоподобных роботов в стране к 2025 году «достигнет международного передового уровня и массового производства». К 2027 году способности человекоподобных роботов в вопросе технологических инноваций будут значительно улучшены и Китай станет в этой области «конкурентоспособным на международном уровне», указано в документе под названием «Руководящее мнение по инновациям и развитию человекоподобных роботов».
Издание «Цзинцзи цанькао бао» приводит интервью неназванного представителя министерства, отвечающего за департамент науки и техники. Он, в частности, заявил, что в ближайшее время в Китае планируется создать 2-3 крупных производства по выпуску гуманоидных роботов, а также сеть специализированных малых и средних предприятий, сформировать 2-3 агломерационные зоны промышленного развития.
Гуманоидные роботы - человекоподобные роботы, как правило, имеющие руки, ноги и определенную форму головы. В отличие от андроидов, гуманоиды необязательно должны полностью копировать внешность человека.
В китайском министерстве уверены, что усовершенствованные двуногие машины способны изменить мир, выполняя рутинную работу на фермах, фабриках и в домах, чтобы снять нагрузку с людей. Роботы также должны выполнять функции спасателей во время техногенных аварий - там, где высокая степень угрозы для жизни людей-спасателей.
Китай призывает соотечественников к активным действиям по разработке роботов, но с «оглядкой на китайскую мудрость». «Принимайте активное участие в разработке международных правил и стандартов и вносите китайскую мудрость в развитие глобальной индустрии гуманоидных роботов».
Часть 1 - Часть 2