Ябум Muto S2 18DOF AI Vision шестиногий робот для Raspberry Pi 5 & Jetson NANO, 2DOF PTZ FPV

Обзор

Yahboom Muto S2 — это 18-DOF гексапод-робот, разработанный для Raspberry Pi 5 или NVIDIA Jetson NANO в качестве основного контроллера. Это настольный бионический гексапод-робот с корпусом из алюминиевого сплава, 18 степенями свободы и встроенным алгоритмом управления обратной кинематикой для имитации походки. С программированием на Python3 и обработкой изображений OpenCV он поддерживает функции визуального взаимодействия ИИ, такие как распознавание цвета, отслеживание/следование, отслеживание лица, распознавание QR-кодов и визуальный патруль по линии. Методы управления включают приложение для мобильного телефона, беспроводное управление с помощью ручки и управление через веб-страницу компьютера (Jupyter Lab) с передачей видео в реальном времени (FPV).

Ключевые особенности

• Гексапод-робот с ИИ видением: Алгоритм обратной кинематики, бионическая походка, 18DOF суставы, визуальное взаимодействие ИИ.
• 18DOF движущиеся суставы: Использует 18 высокопроизводительных сервоприводов и структурные элементы из алюминиевого сплава для соединения трех суставов на каждой ноге.
• 35KG умная система сервоприводов с последовательной шиной: 18 шт. 35KG металлических сервоприводов.
• 2D камера PTZ: 2DOF камера PTZ для приложений с использованием зрения.
• Передача видео в реальном времени: Подключение через локальную сеть через мобильное приложение для просмотра HD видео в реальном времени.
• Регулировка & движения и позы : Поддерживает свободную регулировку скорости ходьбы и высоты корпуса робота (Регулировка высоты робота / Регулировка скорости робота; регулировка скорости ходьбы: медленно/быстро).
• Режим обучения: Ручное управление движением одной ноги основной машины; другая ведомая машина выполняет то же действие.
• Примечание о поддержке Raspberry Pi 5: «MUTO RS оснащен платой расширения с регулируемым источником питания», адаптированной для Raspberry Pi 5, обеспечивая стабильное 5.1V/5A питание; ограничение тока 0.6A увеличивает выходной ток USB порта до 1.6A (чтобы избежать замерзания/перезагрузки).

Для помощи в выборе и поддержки после продажи, свяжитесь с https://rcdrone.top/ или отправьте электронное письмо на [email protected].

Характеристики

Сравнение основных контроллеров (как указано)

Робот Muto S2 предоставляет два основных контроллера, Raspberry Pi 5 и Jetson NANO 4GB SUB, и методы использования в основном одинаковы, оба используют систему Ubuntu. Различные основные контроллеры лишь незначительно влияют на плавность работы системы.Курс материалов, функции продукта и предоставленное программное обеспечение для управления согласованы.

Список функций (Курсы/Примеры)

Камера PTZ

• 00. Калибровка значения цвета HSV
• 01. Распознавание цвета
• 02. Отслеживание цвета
• 03. Следование за цветом
• 04. Группа действий по распознаванию цвета
• 05. Обнаружение лица
• 06. Отслеживание лица
• 07. Приветствие людей
• 08. Распознавание QR-кода
• 09. Инструкции по QR-коду
• 10. Следование по визуальной линии
• 11. Обучение движениям
• 12. Синхронизированное действие с обучающим пультом

Глубокое машинное обучение

• 01. KNN
• 02. Основы TensorFlow
• 03. Основы использования PyTorch
• 04. Yolov5 обнаруживает объекты в реальном времени
• 05. Построение среды Jetson-inference
• 06. Обнаружение объектов и действия
• 07. Управление движением робота
• 08. Робот с управлением жестами

Курс Jetson NANO

• 1. О системе JetsonNano
• 2. Настройка сети и Jtop
• 3. Увеличение пространства подкачки
• 4. Использование API библиотеки GPIO
• 5. Конфигурация аппаратной библиотеки
• 6. Функция чтения пинов
• 7. Управление уровнем выхода пинов
• 8. Управление светодиодом
• 9. Jetson Nano взаимодействует с внешними устройствами через последовательные порты
• 10. I2C коммуникация Jetson nano

Курс дистанционного управления

• 1. Закрытие процесса управления приложением
• 2. Руководство по дистанционному управлению через мобильное приложение
• 3. Дистанционное управление через USB беспроводной контроллер

Основной курс по роботам

• 1. Управление зуммером
• 2. Управление сервоприводом PWM
• 3. Управление сервоприводом шины
• 4. Движение робота вперед и назад
• 5.Робот движется влево и вправо
• 6. Робот вращается влево и вправо
• 7. Управление высотой
• 8. Управление головой
• 9. Выполнение группы действий
• 10. Чтение данных
• 11. Управление с компьютера-хоста
• 12. Драйвер камеры

Курс Raspberry Pi

• 1. Создание среды Python
• 2. Helloworld
• 3. Выходной сигнал высокого и низкого уровня на пине
• 4. Чтение высокого и низкого уровня на пине
• 5. Выход PWM
• 6. Последовательная связь
• 7. Связь I2C
• 8. Последовательная связь
• 9. Связь I2C

Курс Open Source CV

• 1. Введение в Open Source CV
• 2. Чтение и отображение изображений
• 3. Запись изображений
• 4. Качество изображения
• 5. Операции с пикселями
• 6. Масштабирование изображения
• 7. Обрезка изображения
• 8. Панорамирование изображения
• 9. Отражение изображения
• 10. Аффинное преобразование
• 11. Поворот изображения
• 12. Перспективное преобразование
• 13. Обработка в градациях серого
• 14. Бинарное изображение
• 15. Обнаружение зеленых краев
• 16. Рисование отрезков линий
• 17. Рисование прямоугольных окружностей
• 18. Рисование текста и изображений

Видео

Руководства / Учебные пособия

Ссылка на учебное пособие (официальная): http://www.yahboom.net/study/Muto-S2

Детали

Платформа бионического гексапода с 18 степенями свободы сочетает управление походкой на основе обратной кинематики с взаимодействием на основе AI с камерой.

Создана для работы на Raspberry Pi 5 или NVIDIA Jetson Nano для изучения робототехники, проектов в области зрения и экспериментов с походкой.

Ключевые возможности включают функции компьютерного зрения на основе OpenCV, программирование на Python, управление по WiFi и потоковое видео FPV.<|vq_15392|>

Выберите Raspberry Pi 5 или Jetson Nano в качестве основного контроллера, с возможностью расширения питания для стабильности Pi 5.

Структурированный список функций и учебный план охватывают PTZ-визию, основы глубокого обучения и пошаговые курсы для обоих контроллеров.

Восемнадцать сервоприводов с высоким крутящим моментом приводят в движение три сустава на каждую ногу для стабильного, артикулированного движения гексапода.

Встроенная обратная кинематика помогает координировать траектории ног для более плавных и стабильных симулированных походок.

Реальное время FPV позволяет управлять и контролировать робота с помощью приложения на телефоне через локальное сетевое соединение.

Сохраняйте группы действий в приложении, чтобы запускать предустановленные движения или точно настраивать отдельные суставы для создания индивидуальных поз.

Интерактивные движения поддерживают игривое поведение, такое как приветствия в стиле жестов и рутинные движения.

Демонстрации реактивного движения подчеркивают корректировки баланса при прохождении препятствий на близком расстоянии и динамическом движении.

Поведения на основе зрения могут поддерживать отслеживание и следование для экспериментов с взаимодействием ИИ.

Быстрые команды позволяют выполнять общие действия, такие как сворачивание и движение вперед.

Настройте высоту корпуса и скорость ходьбы в соответствии с различными поверхностями, демонстрациями и тестированием на настольных компьютерах в помещении.

Режим обучения позволяет вручную направлять движение ноги одного робота и зеркально отображать его на втором устройстве.

Функции ИИ на основе камеры включают отслеживание цвета, отслеживание лица и распознавание QR-кодов с использованием рабочих процессов OpenCV.

Изучите более глубокие демонстрации ИИ, такие как обнаружение объектов, оценка позы на основе скелета и процедуры управления жестами.

Программируйте поведение на Python и быстро итеративно разрабатывайте с ноутбука для управления движением, обработки изображений и автоматизации.

MUTO S2 поддерживает кроссплатформенное приложение для iOS/Android для дистанционного управления, калибровки робота, режимов производительности и мониторинга данных.

Muto S2 поддерживает управление с ПК через веб-страницу JupyterLab и управление движением робота с помощью беспроводного геймпада 2.4G/USB.

Каталог курсов Yahboom Muto S2 включает в себя руководства по сборке, управлению движением, функциям компьютерного зрения OpenCV и экспериментам с ИИ.

Yahboom Muto S2 включает организованные учебные ресурсы с файлами курсов по ИИ и глубокому обучению для пошаговой настройки и программирования.

Компоновка Muto S2 включает OLED-экран, модуль камеры PTZ с 2 степенями свободы, расширительную плату USB-хаба и крепление для большой литиевой батареи.

Muto S2 использует интеллектуальный серво-привод с последовательной шиной с диапазоном движения 0–270° и указанными характеристиками, включая крутящий момент 35 кгс·см и работу при напряжении 6.0–8.4В.

USB HD 1080P камера PTZ использует 2DOF серво-привод для управления панорамированием/наклоном и подключается через USB 2.0 с углом обзора до 80–120°.

Литий-ионный аккумуляторный блок 7.4В 9900мАч использует интерфейс зарядки DC 4.0×1.7 и провода длиной около 15 см для легкого подключения.

Yahboom Muto S2 поставляется с чертежом, показывающим вид сверху и спереди с размерами в миллиметрах для планирования размещения и зазора.

MUTO S2 доступен с основной платой управления Jetson Nano 4GB USB или Raspberry Pi 5, обе поддерживают Python, 18DOF соединения и обеспечивают около 3.7 часов работы от батареи.

Набор Muto S2 hexapod включает шасси робота, модуль PTZ камеры, компоненты OLED, расширительную плату USB-хаба, аккумуляторный блок, зарядное устройство, кабели и основные инструменты, с аксессуарами Raspberry Pi или Jetson Nano, перечисленными как добавочные‑