ESP32-S3 con Cámara AI DFR1154

INFORMACIÓN

El ESP32-S3 Cámara con IA de DFROBOT es un módulo potente todo en uno que integra reconocimiento de imágenes de borde, visión nocturna y control por voz, ideal para proyectos de inteligencia artificial en dispositivos embebidos. Basado en el microcontrolador ESP32-S3, este módulo ofrece conectividad Wi-Fi y Bluetooth, e incluye una cámara de alta sensibilidad con luz IR para capturar imágenes incluso en la oscuridad.

Gracias a su capacidad de ejecutar modelos de IA directamente en el dispositivo (sin necesidad de conexión a la nube), permite realizar tareas como detección de objetos, reconocimiento facial y comandos de voz usando plataformas como ChatGPT. Es ideal para aplicaciones de seguridad, automatización del hogar, robótica y proyectos educativos enfocados en visión por computadora e interacción natural con el entorno.

ESPECIFICACIÓN Y CARACTERÍSTICAS

• Marca: DFROBOT
• Matrícula: DFR1154
• Voltaje:
  • Funcionamiento: 3.3V
  • Entrada:
    • Tipo C: 5V DC
    • VIN: 5-12V DC
• ESP32-S3: Chip ESP32-S3R8
• Procesador: Microprocesador Xtensa® de doble núcleo y 32 bits LX7
• Frecuencia principal: 240 MHz
• SRAM: 512 KB
• ROM: 384 KB
• Flash: 16 MB
• PSRAM: 8 MB
• SRAM del reloj de tiempo real: 16 KB
• USB: Interfaz USB 2.0 OTG de velocidad completa
• Cámara: OV3660 IR de gran angular de 160°
• IR: Iluminación infrarroja (IO47)
• MIC: micrófono I2S PDM
• LED: LED integrado (IO3)
• ALS: Sensor de luz ambiental LTR-308
• SD: Ranura para tarjeta SD
• Chip de potencia: HM6245
• Botones:
  • RST: Botón de reinicio
  • ARRANQUE: Botón de ARRANQUE (IO0)
• SPK: Interfaz de altavoz MX1.25-2P
• MAX98357: Chip amplificador I2S
• Temperatura de funcionamiento: -10~60 °C
• Dimensiones: 42mm × 42mm
• Peso: 25.8g

DOCUMENTACIÓN Y RECURSOS

• Wiki
• Dimensiones
• Esquemático

Datasheet

• ESP32-S3 Series
• OV3660
• MIC

TUTORIALES

• Reconocimiento de objetos con Edge Impuse – Blog UNIT
• Configuración de Arduino IDE
• Transmisión de video
• Integración de HomeAssistant

INFORMACIÓN ADICIONAL

Diagrama de elementos

• OV3660 : cámara infrarroja gran angular de 160°
• IR : Iluminación infrarroja (GPIO47)
• MIC : micrófono I2S PDM
• LED : LED integrado (GPIO3)
• ALS : Sensor de luz ambiental LTR-308
• ESP32-S3 : Chip ESP32-S3R8
• SD : ranura para tarjeta SD
• Memoria Flash : 16 MB de memoria Flash
• VIN : entrada de 5-12 V CC
• HM6245 : Chip de potencia
• Tipo C : interfaz USB tipo C para alimentación y carga de código
• Gravedad :
  • +: 3,3-5 V
  • -: GND
  • 44: GPIO44, RX nativo en ESP32-S3
  • 43: GPIO43, transmisión nativa en ESP32-S3
• RST : Botón de reinicio
• BOOT : botón BOOT (GPIO0)
• SPK : Interfaz de altavoz MX1.25-2P
• MAX98357 : chip amplificador I2S

Aplicaciones

• Mirillas electrónicas
• Reconocimiento de matrículas
• Juguete robot con inteligencia artificial
• Gafas inteligentes

Procesamiento inteligente de IA y computación de borde

La cámara con IA ESP32-S3 utiliza las potentes capacidades de red neuronal del chip ESP32-S3 para el reconocimiento de imágenes basado en bordes con plataformas como Edge Impulse, YOLOv5 y OpenCV. Admite un procesamiento eficiente en el dispositivo para tareas como la detección de objetos y la clasificación de imágenes, mientras que la integración con ChatGPT permite la ejecución de comandos controlados por voz. Esta combinación de procesamiento local de IA y acceso a modelos en la nube hace que el módulo sea ideal para una amplia gama de aplicaciones de IoT.

Interacción de voz integrada para una mayor usabilidad

El micrófono y el amplificador integrados admiten reconocimiento de voz (ASR ) y diálogo interactivo con ChatGPT , lo que permite comandos de voz intuitivos e interacción en tiempo real. Esta integración permite la automatización inteligente en dispositivos IoT, simplificando el control y mejorando la experiencia del usuario. Con funciones de reconocimiento de voz, la ESP32-S3 AI CAM abre nuevas posibilidades para asistentes inteligentes activados por voz, vigilancia controlada por IA y gestión de dispositivos manos libres.

Visión nocturna para monitoreo durante todo el día

Equipada con una cámara infrarroja gran angular de 160° e iluminación infrarroja, la ESP32-S3 AI CAM tiene una calidad de imagen excepcional incluso en condiciones de poca luz o en total oscuridad. El sensor de luz del módulo mejora aún más su adaptabilidad, lo que la convierte en la opción ideal para la monitorización 24/7 en aplicaciones como monitorización de bebés, vigilancia de seguridad y sistemas de domótica.

Compatibilidad con transmisión inalámbrica: Wi-Fi y BLE 5

El módulo de cámara con IA ESP32-S3 está equipado con conectividad Wi-Fi y BLE 5, lo que permite una monitorización remota fluida desde sus dispositivos móviles u otros equipos conectados. Ya sea en casa o fuera de ella, puede acceder fácilmente a las transmisiones de vídeo en directo y gestionar su sistema de monitorización de forma remota. Esta capacidad de transmisión inalámbrica amplía la flexibilidad del módulo, convirtiéndolo en la solución ideal para aplicaciones que requieren vigilancia y control en tiempo real, como la seguridad del hogar y la automatización inteligente.

ENLACES EXTERNOS

• Review ESP32-S3 con Cámara AI DFR1154 – Video 
• Primer vistazo ESP32-S3 con Cámara AI – Video
• Análisis de la cámara ESP32 con IA –  Video
• Demostración de RTC de openAI para ESP-IDF – Github
• Asistente de voz con ChatGPT en la cámara DFRobot ESP32 S3 AI