Огляд
DOFBOT SE - це AI великий модельний зоровий роботизований маніпулятор (версія віртуальної машини) від Yahboom. Це 6 DOF настільний роботизований маніпулятор, який генерує рішення управління на віртуальній машині на ПК і керує суглобами через контролер STM32. Система розроблена на основі ROS2 для підтримки кінематики (прямої/оберненої), планування руху, симуляції MoveIt та виявлення зіткнень, а також забезпечує взаємодію з AI зору для завдань, таких як відстеження розпізнавання кольору та захоплення об'єктів.
Ключові особливості
- Основне управління віртуальною машиною ПК: використовує віртуальну машину ПК для заміни ARM розробницьких плат; Mac не підтримується.
- Розробка ROS2: система управління роботами ROS2 (зображення вказує ROS2 Humble), що підтримує планування руху, симуляцію та пов'язані робочі процеси.
- 6 DOF серійне управління сервоприводом: інтегроване управління для багатосуглобового руху та захоплення.
- Взаємодія з AI зору: двомірний зір з функціями, такими як розпізнавання/відстеження/захоплення кольору та розпізнавання жестів.
- Взаємодія з великими моделями AI (доступність функцій залежить від версії): зображення описують мультимодальні можливості (текст/голос/зір), включаючи масштабовану базу знань RAG, природний голосовий діалог та розуміння візуальних сцен.
- Кілька методів управління: текстові стани мобільного додатку, бездротовий пульт та програмне забезпечення для ПК.
Специфікації
| Модель | DOFBOT SE (версія віртуальної машини) |
| Головне управління | Віртуальна машина ПК |
| Ступінь свободи | 6 |
| Розмах рук | 350мм |
| Кут відкриття-закриття захвату | 6см |
| Точність повторюваного позиціонування | ±0.5мм |
| Тип структури | Традиційна структура роботизованої руки |
| Камера | USB HD камера |
| Візуальний розмір | Плоске 2D зображення |
| Голос | Модуль голосу великої моделі ШІ + динамік |
| Дисплей | / |
| Функції (текст зображення) | Контроль взаємозв'язку; планування руху MoveIt; симуляція робота Rviz; 2D візуальна взаємодія; голосова взаємодія; велика модель ШІ |
| Позиціонування (текст зображення) | Віртуальна версія початкового рівня роботизованої руки великої моделі ШІ |
| Система ROS (текст зображення) | ROS2 Humble |
Примітка щодо роздільної здатності камери: наданий текстовий опис згадує про 0.3MP камера, також вказує на 30MP модуль камери під “Професійна апаратна конфігурація”. Зображення вказують на USB HD камеру, але не показують значення мегапікселів. Для підтвердження точного модуля камери, що постачається, зверніться до [email protected] або відвідайте https://rcdrone.top/ .
Програмне забезпечення & Керування
- ROS2 керування: спрощує 6 DOF серійне управління сервоприводами; підтримує пряму задачу, обернену задачу та планування руху (текст).
- MoveIt + RViz: зображення перераховують планування руху MoveIt та симуляцію роботизованої руки RViz.
- Серійна комунікація віртуальної машини: зображення описують надсилання інструкцій з віртуальної машини до STM32 ко-процесора через серійний порт для управління кожним суглобом.
- Методи дистанційного керування (текст): мобільний додаток, бездротовий пульт та програмне забезпечення для ПК.
Штучний інтелект: зорове сприйняття, жести та навчання моделей (як описано)
- Візуальне розпізнавання/відстеження цілей штучного інтелекту: розпізнавання кольору & відстеження; захоплення кольору; взаємодія з кольором; сортування відходів; складання кольорових блоків; “гра на захоплення”.
- Взаємодія за допомогою жестів (MediaPipe): група дій роботизованої руки з управління жестами; стек управління розпізнаванням жестів; управління положенням роботизованої руки; розпізнавання та відстеження долоні роботизованою рукою.
- Алгоритмічні фреймворки (текст зображення): алгоритм оберненої кінематики; YOLOv11; OpenCV; MediaPipe.
- Глибоке навчання & навчання моделей (текст зображення): підтримує індивідуальне навчання та розгортання квантифікації моделей; приклади, що показані, включають класифікацію сміття та навчання моделей (презентація випадку YOLOv11).
Примітки, показані на зображеннях: “Сміттєвий кошик не включений до списку відправлення.” “Моделювання навчання вимагає, щоб користувачі навчалися самостійно.”
Відмінності версій (текст на зображенні)
| Стандартна версія | Покращена версія | |
| Підтримка основного контролю | Віртуальна машина ПК | |
| Модуль голосу великої моделі ШІ | Ні | Так |
| Функція великої моделі ШІ | Ні | Так |
| Візуальна взаємодія ШІ | Так | Так |
| Система ROS | ROS2 Humble | |
| Рекомендовані користувачі | Підходить для навчання візуальним функціям ШІ | Підходить для навчання великій моделі ШІ, голосовій взаємодії ШІ та застосуванням візуальних функцій ШІ |
Застосування
- Навчання та дослідження ROS2: кінематика, планування руху, симуляція MoveIt та виявлення зіткнень.
- Демонстрації AI-бачення: відстеження об'єктів, розпізнавання кольорів, захоплення та розміщення, а також робочі процеси сортування.
- Демонстрації мультимодальної взаємодії (як описано): розбір відео, контроль дій за довгими командами, інтелектуальне управління та сортування в 3D-просторі.
Навчальні посібники & Відео
Посилання на навчальний посібник: Роботизована рука Yahboom DOFBOT SE
Деталі

DOFBOT SE поєднує 6‑DOF настільну руку з контролем віртуальної машини на стороні ПК та робочими процесами ROS2 Humble для навчання та розвитку.

Головний контроль віртуальної машини зменшує залежність від апаратного забезпечення, зберігаючи при цьому основні функції, такі як планування руху, симуляція RViz та 2D візуальна взаємодія.

Вища конфігурація додає глибину на основі 3D візуальної взаємодії для просторового сприйняття та застосувань захоплення.

Інші варіанти рук у серії підкреслюють різні ступені свободи та структурні вибори для специфічних дослідницьких і навчальних потреб.

У порівнянні з платами розробки ARM, підхід віртуальної машини ПК підкреслює легшу експансію, резервне копіювання/відновлення та економічно ефективну розробку.


Створений для розробки ROS2, DOFBOT SE підтримує взаємодію з AI-баченням та багатосуглобове управління сервоприводами в компактній настільній формі.

Багатомодальна взаємодія, візуальні застосунки та покрокові навчальні посібники допомагають перейти від першого руху до практичних завдань AI-бачення.

Виберіть конфігурацію, яка відповідає вашим потребам, від основ ROS2 Humble до розширених можливостей великих моделей AI.

Великі мовні, голосові та візуальні моделі забезпечують більш природні команди та зворотний зв'язок під час роботи з роботизованою рукою.

Демонстрації застосунків зосереджені на перетворенні природних команд на повторювані дії, такі як обробка та сортування послідовностей.


Мультимодальне розуміння підтримує різноманітні сценарії в класному стилі, такі як Q&A, аналіз та кероване виконання завдань.

Функції 2D-бачення включають розпізнавання кольорів, відстеження цілей та кероване захоплення для інтерактивних проектів на столі.

Розпізнавання жестів та контент навчання моделей розширює взаємодію за межі захоплювача для більш багатих експериментів з контролем ШІ.

Кінематика ROS2 плюс симуляція MoveIt допомагає перевірити траєкторії перед виконанням рухів на реальній руці.


Підтримка ROS2 Humble та кілька методів управління — мобільний додаток, управління ПК та бездротова ручка — підходять для різних навчальних налаштувань.

Додаток DOFBOT SE включає в себе захоплення жестами разом з дистанційним керуванням, відстеженням, калібруванням сервоприводів та режимами сортування для гнучкої роботи.

Роботизована рука DOFBOT SE підтримує відстеження розпізнавання облич та навчання групи дій для повторюваних рухів.

Комплект роботизованої руки DOFBOT SE 6-DOF має USB-камеру, основну плату STM32 та чітко позначені суглоби J1–J6, з можливістю підключення динаміка та модуля штучного інтелекту.

Комплект DOFBOT SE поєднує в собі 6DOF сервоприводну руку з розширювальною платою, яка забезпечує чітко позначені порти та заголовки для підключення периферійних пристроїв та живлення.

Комплект DOFBOT SE включає в себе модуль USB-камери, бездротову ручку 2.4G з платою приймача та модуль штучного інтелекту з динаміком і проводкою для легкого інтегрування.

Опис курсу DOFBOT SE охоплює налаштування, калібрування, дистанційне керування та уроки програмування, включаючи модулі штучного інтелекту.

Навчальний план комплекту охоплює основи великих моделей, налаштування середовища та практичні проекти, такі як налаштування API-ключа та інтеграція функцій штучного інтелекту.

Комплект включає структуровані ресурси з відкритим кодом та покрокові відеоуроки, що охоплюють функції великих моделей штучного інтелекту та основи ROS2.

Комплект DOFBOT SE включає доступ до простого файлу 3D-моделі та надає технічну підтримку з післяпродажного обслуговування.

DOFBOT SE включає контур міліметрових розмірів та швидкий список специфікацій, що охоплює вбудовану платформу та програмне середовище, таке як Ubuntu 22.04 з ROS2 Humble та Python.

Комплект DOFBOT SE включає корпус роботизованої руки та шасі, основну плату STM32, камеру з кріпленням, 2.4G бездротова ручка, кабелі, інструменти та інструкція.
Related Collections
