Сколько потребуется времени, чтобы роботизированная рука научилась вращать кубик? Правильный ответ: около 100 лет.
Именно столько виртуального времени потребовалось исследователям OpenAI, чтобы обучить робота. OpenAI — некоммерческая лаборатория искусственного интеллекта, в финансировании которой принимает участие Элон Маск, Команда заплатила Google $3500 для запуска программного обеспечения на тысячах компьютеров одновременно, потратив на анализ числовых данных около 48 часов. После обучения робота в виртуальной среде он прошел испытание в лаборатории.
По словам разработчиков, роботизированная рука Dactyl уже научилась двигаться самостоятельно. Их задача упростилась до манипуляции кубиком — необходимо, чтобы одна из букв: O, P, E, N, A, I находилась вверху по выбору по случайному выбору.
Расположение пальцев Dactyl отслеживаются по инфракрасным точкам и с помощью камер. На тренировках за каждое движение, которое приближает куб к цели, робот получает небольшое вознаграждение. Падение кубика обернется серьезным штрафом, в 20 раз превышающим награду.
Этот процесс называется обучение с подкреплением. Программное обеспечение робота повторяет попытки миллионы раз в искусственной среде, чтобы получить наивысшую вознаграждение.
В виртуальной реальности ученые изменяли силу тяжести, угол руки и другие переменные, чтобы программное обеспечение адаптировалось к окружающей обстановке. Это помогло приблизить реальные результаты к моделируемым.
Изменения помогли — прежде чем уронить кубик, рука успевала перевернуть его 10 раз. При моделировании, как правило, это удавалось сделать 50 раз подряд.
Команда исследователей работала около года, чтобы довести механическую руку до сегодняшнего состояния. Цель OpenAI — создание искусственного интеллекта или машин, которые думают как люди.
Комментарии
(0) Добавить комментарий