Meta integra su agente de IA Muse en hardware con un SDK abierto

El SDK Muse Gadgets, según reporta Hackster.io, busca que el agente de IA Muse, que hasta ahora opera principalmente como una herramienta de software para asistir en tareas diarias y responder preguntas, tenga una presencia en el entorno físico. Los desarrolladores pueden utilizar el SDK para dotar a Muse de acceso a pantallas, micrófonos, altavoces, botones, sensores y actuadores. Esto habilita la creación de dispositivos que van desde interfaces de hogar inteligente controladas por voz hasta asistentes de IA de escritorio con capacidad de respuesta a entradas físicas.

Meta ha proporcionado dos SDKs diferenciados para soportar distintas plataformas de hardware. El ESP32 Device SDK está destinado a proyectos basados en microcontroladores, permitiendo la conexión de pantallas, la gestión de entrada y salida de audio, y la interacción con sensores y otros componentes electrónicos externos. Por otro lado, el Linux Device SDK se orienta a placas Raspberry Pi y otros ordenadores Linux, ofreciendo capacidades adicionales como la ejecución de comandos personalizados, la automatización de tareas de administración del sistema y la integración con Home Assistant.

Para facilitar el inicio, se han puesto a disposición diversos proyectos de ejemplo. Uno de ellos utiliza el Waveshare ESP32-S3-Touch-AMOLED-1.75C, que incluye una pantalla táctil AMOLED redonda de 1.75 pulgadas, micrófono, altavoz y batería. Otro ejemplo emplea el Seeed reTerminal E1002, una pantalla E Ink a color capaz de mostrar información proporcionada por Muse, como resúmenes diarios o listas de tareas. También se puede usar una Raspberry Pi 5 para conectar Muse con Home Assistant y otras aplicaciones Linux. Adicionalmente, Meta está desarrollando un HDMI stick para interactuar con Muse a través de televisores, si bien los detalles sobre este hardware aún no se han publicado.

Como alternativa para usuarios que prefieren evitar el ensamblaje de hardware, Meta ha desarrollado un dispositivo denominado Muse Home Link. Este se conecta a la red Wi-Fi del hogar y permite que Muse se comunique con dispositivos de hogar inteligente compatibles y otros equipos mediante APIs HTTP locales. Muse Home Link incorpora un microcontrolador ESP32-C5 con soporte para Wi-Fi 6 de doble banda, Bluetooth LE y conectividad IEEE 802.15.4 para Zigbee y Thread. Dispone de 8 MB de memoria flash, 8 MB de PSRAM, un puerto USB-C y un LED. Estas unidades se distribuirán de forma gratuita a suscriptores activos de Muse en Estados Unidos hasta agotar existencias.

Para construir sus propios dispositivos, los desarrolladores necesitarán un token del SDK y la aplicación móvil de Muse para el emparejamiento. Los SDKs y el firmware han sido publicados en GitHub bajo la licencia Apache 2.0, con la excepción de algunos componentes de terceros que conservan sus licencias originales.