Модуль камеры Yahboom ROS-WiFi ESP32-S3 2MP для роботов ROS2, microROS WiFi-UDP беспроводная передача изображений

Обзор

Этот модуль камеры ROS-WiFi (тип продукта модуля камеры) интегрирует чип ESP32-S3, камеру 2MP и черный 3D-печатный корпус для беспроводной передачи изображений на роботах ROS2. Информация о WiFi-сети может быть настроена через модуль последовательного порта для обеспечения более плавной беспроводной передачи изображений в одной локальной сети. Используя протокол microROS, модуль предоставляет данные изображения в реальном времени на хост-компьютер с установленным ROS2, что позволяет использовать приложения для визуального распознавания на основе ИИ.

Примечание: Перед использованием этого модуля следуйте учебным пособиям Yahboom и вручную настройте его для подключения к WiFi-сети в домашней или офисной среде.

Ключевые особенности

• Встроенное решение ESP32-S3; поддерживает беспроводную передачу WiFi на частоте 2,4 ГГц и передачу видеоизображений в реальном времени.
• Камера высокой четкости 2MP для четкого изображения.
• Дизайн антенны с патчем для повышения стабильности сигнала; поддерживает передачу видеоизображений на расстояние до 20 метров.
• Беспроводная передача видео и решение для передачи изображений ROS для разработки ROS2.
• Конфигурация WiFi через модуль последовательного порта; поддерживает подключение WiFi + режим точки доступа.
• Поддерживает режим WiFi-UDP; после подключения модуля передачи изображений и робота к прокси WiFi-UDP виртуальной машины, виртуальная машина может подписываться на темы, публикуемые модулем передачи изображений и роботом.
• Руководство по совместимости: может быть удаленно подключено к виртуальным машинам ПК, сериям Raspberry Pi, сериям Jetson и другим основным контроллерам.
• Предоставляет примеры программного обеспечения для AI-визуализации (включая: распознавание цвета OpenCV с использованием HSV, 3D-распознавание объектов MediaPipe, распознавание жестов (14 видов), создание/распознавание QR-кодов, обнаружение лиц MediaPipe (68 контрольных точек лица) и обнаружение позы MediaPipe (33 ключевых точки)).
• Поддержка дополнительной конфигурации: поддерживается 2D электрический PTZ в конфигурации PTZ; стандартная конфигурация имеет фиксированный угол обзора без регулировки угла.

Спецификации

Что включено

Стандартная конфигурация (модуль камеры ROS-WiFi)

• Модуль камеры ROS-WiFi x1
• Винт x3
• Соединительный кабель x2
• Модуль последовательного порта x1

Конфигурация PTZ (модуль камеры ROS-WiFi + 2DOF PTZ)

• Модуль камеры ROS-WiFi x1
• Винт медный столб + пакет установки фиксированного крыла x1
• Соединительный кабель x2
• Модуль последовательного порта x1
• Пакет аксессуаров PTZ (PTZ собран) x1

Для проводки, конфигурации и поддержки интеграции ROS2, свяжитесь с [email protected] or посетите https://rcdrone.top/.

Приложения

• Беспроводная передача изображений для роботов ROS2 через microROS в одной локальной сети
• Разработка визуализации ROS2 на хост-компьютерах, включая ПК/виртуальные машины
• Демонстрации ИИ-визуализации с примерами OpenCV и MediaPipe
• Установка на умные автомобили, дроны, роботы и другие платформы

Подробности

Компактный модуль камеры ROS-WiFi для роботов ROS2, объединяющий ESP32-S3 и 2МП камеру в защитном корпусе, напечатанном на 3D-принтере.

Ключевые функции включают потоковую передачу видео по Wi-Fi на 2.4GHz, темы изображений microROS/ROS2, поддержку WiFi-UDP и настройку WiFi через последовательный порт.

Краткий обзор характеристик подчеркивает обработку ESP32-S3, подключение WiFi плюс режим точки доступа и последовательный интерфейс для конфигурации.

Выберите конфигурацию ROS-WiFi для беспроводной передачи изображений ROS и включенные примеры программ ИИ-визуализации от Yahboom.

Модуль подключается к хосту, работающему под управлением ROS2, для публикации данных изображения с камеры по WiFi для задач компьютерного зрения.

Доступны два варианта сборки: фиксированный угол обзора или дополнительная 2D электрическая PTZ установка для регулировки панорамирования/наклона.

Совместим с распространенными контроллерами, такими как виртуальные машины ПК, Raspberry Pi и Jetson для разработки и отладки ROS2.

Режим WiFi-UDP позволяет виртуальной машине подписываться на темы, публикуемые как роботом, так и модулем камеры в одной локальной сети (LAN).

Встроенные примеры проектов охватывают общие задачи компьютерного зрения, такие как распознавание цвета, обнаружение жестов, декодирование QR-кодов и отслеживание позы.

Дизайн антенны с патчем помогает поддерживать стабильное WiFi-соединение для более плавной передачи изображений в пределах локальной сети (до 20 м, как указано).

2-мегапиксельная HD-камера обеспечивает более четкие изображения для последующего распознавания ИИ на компьютере-хосте ROS2.

Настройка проходит по простому алгоритму: настройка WiFi, запуск агента камеры ROS2, публикация тем изображений, затем подписка на хосте.

Начальные учетные данные WiFi можно установить через модуль последовательного порта, подключенный к компьютеру, перед переключением на беспроводной режим.

Камера Yahboom ROS-WiFi ESP32-S3 поддерживает беспроводную передачу видео для удобного просмотра в реальном времени на компьютере.

Модуль камеры Yahboom ROS WiFi ESP32-S3 можно установить на роботах или манипуляторах для выполнения задач визуализации на борту.

Комплект камеры Yahboom ROS-WiFi ESP32-S3 включает в себя загрузку учебного пособия с примерами проектов, такими как OpenCV, MediaPipe, распознавание лиц, управление жестами и распознавание QR-кодов.

Модуль камеры Yahboom ESP32-S3 с WiFi оснащен компактным корпусом объектива и может быть установлен на небольшом кронштейне с сервоприводом для панорамирования/наклона.

Модуль камеры ROS-WiFi имеет размеры корпуса 48×37.5×14 мм с интерфейсом последовательного порта 5V (TXD, GND) и антенну PCB 2.4GHz с коэффициентом усиления 3dBi.

Электрический PTZ-кронштейн с 2 степенями свободы включает в себя размеры чертежей и ключевые характеристики сервоприводов, такие как размер 62×56×80 мм и диапазон управления PWM от 0 до 180° для более легкой интеграции.