Энтузиаст под ником MrRandom93 представил на Reddit небольшого робота Rob с поддержкой ChatGPT. Проект находится на начальной стадии развития, но робот уже умеет распознавать предметы перед собой и рассказывать, что он видит.
«Мой робот, управляемый ChatGPT, теперь может видеть и описывать мир вокруг себя», — уточнил создатель устройства Rob.
В качестве основной системы управления роботом использована плата с Rasberry Pi 4B. Микрокомпьютер управляет глазами (экраном) робота, а также получает данные с внешней видеокамеры, передаёт звук на динамик и подключён к сети для отправки запросов на серверы OpenAI.
Автор проекта на коротком видео показал как Rob может распознавать различные предметы и даже оценивать обстановку перед собой. Он с помощью камеры делает снимки, изображение обрабатывается с помощью ИИ, а потом система описывает через динамик то, что робот видит.
Энтузиаст MrRandom93 пояснил, что уже начал добавлять роботу систему управления гироскопом и сервоприводами рук и ног на базе Arduino. Эта часть проекта находится в разработке.
На видео автор просит робота определить, что он держит в руке — оригинальный телефон Nokia. На что робот отвечает: «Анализ изображения идентифицирует человеческое предплечье и протянутое вперёд цифровое устройство». Затем MrRandom93 хвалит устройство как «хорошего робота». Rob сразу же поблагодарил человека и пошутил, что создатель заставил его «микросхемы покраснеть».
Ранее китайский стартап CheerDots представил компьютерную мышь Cheerdots 2 с диктофоном и ChatGPT. Благодаря этому появилась функция запись разговоров с преобразованием голоса в текст. Кроме того, можно автоматически выделить из записи важное с помощью ИИ.
Источник новости: habr.com