HUSKYLENS 2 SEN0638 : capteur de vision IA 6 TOPS pour projets intelligents

HUSKYLENS 2 est un capteur de vision IA de nouvelle génération conçu pour mettre la vision artificielle puissante à la portée de tous les créateurs. Il fonctionne avec un processeur double cœur à 1,6 GHz intégrant un accélérateur IA de 6 TOPS (soit 000 milliard d'opérations par seconde), exécutant tous les algorithmes directement en local pour des performances rapides et à faible latence.

Sa conception repose sur trois atouts majeurs : une prise en charge étendue des modèles IA, avec plus de 20 algorithmes intégrés prêts à l’emploi et la possibilité de déployer des modèles personnalisés ; une interaction flexible avec les LLM, capable à la fois d’appeler de grands modèles de langage et de leur fournir une perception locale du monde réel via son service MCP intégré ; et une large compatibilité, assurant une connexion fluide avec de nombreux contrôleurs principaux.

Équipé d’une caméra remplaçable de 2 MP, d’un écran tactile IPS 2,4 pouces, d’un microphone, d’un haut-parleur et de voyants lumineux, HUSKYLENS 2 est l’outil de référence pour la robotique éducative, les systèmes interactifs et le prototypage de dispositifs intelligents.

IA embarquée ultra-rapide avec une puissance de 6 TOPS

Au cœur de HUSKYLENS 2 se trouve un processeur double cœur à 1,6 GHz intégrant une unité d’accélération IA de 6 TOPS. Cette puissance de calcul élevée, associée à 1 Go de RAM, permet à HUSKYLENS 2 d’exécuter des algorithmes complexes et des réseaux neuronaux directement sur l’appareil.

Cela rend possible le traitement en temps réel de tâches exigeantes comme la détection multi-objets ou l’estimation de posture avancée, tout en garantissant des performances rapides, une faible latence et un fonctionnement sans dépendance au cloud.

Créez instantanément grâce à plus de 20 modèles IA intégrés

HUSKYLENS 2 est conçu pour une mise en œuvre immédiate. Il est livré avec une riche bibliothèque de plus de 20 modèles d’intelligence artificielle préinstallés, couvrant un large éventail de tâches courantes en vision par ordinateur, de la reconnaissance faciale au suivi d’objets.

Cette collection étendue permet aux utilisateurs de commencer à développer des projets dès la sortie de la boîte, avec une configuration minimale, réduisant considérablement la barrière d’entrée au développement d’applications basées sur l’IA.

Donner aux LLM une perception contextuelle grâce au service MCP

HUSKYLENS 2 est le premier capteur de vision IA à intégrer un service MCP embarqué, transformant en profondeur la manière dont les LLM perçoivent le monde physique. Là où les autres caméras fournissent de simples « instantanés » d’images brutes, HUSKYLENS 2 transmet un résumé structuré et intelligent de la scène.

Il peut, par exemple, informer un modèle de langage de grande taille (LLM) qu’il détecte une personne spécifique, préalablement identifiée, en train d’effectuer une action précise. Cette approche offre aux LLM une perception fiable et contextualisée, leur permettant de prendre des décisions plus pertinentes, plus intelligentes et mieux informées.

Déploiement de modèles personnalisés entraînés avec YOLO

Au-delà des modèles intégrés, les utilisateurs peuvent entraîner leurs propres modèles de vision avec YOLO et les déployer directement sur HUSKYLENS 2. Le module est livré avec un ensemble complet d’outils d’annotation, d’entraînement et de conversion, facilitant la création et l’intégration de modèles personnalisés adaptés à des besoins spécifiques.

Combinaison flexible de modèles pour des applications variées

L’architecture de HUSKYLENS 2 prend en charge l’exécution séquentielle ou parallèle de plusieurs modèles. Cette capacité permet de créer des applications plus complexes et plus évoluées. Par exemple, la combinaison de la détection des points clés de la main avec le suivi d’objets permet de concevoir des systèmes de contrôle sans contact sophistiqués, où un geste peut déclencher le suivi d’un objet spécifique. Cette approche multi-modèles autorise une logique en couches et des comportements interactifs plus intelligents.

Streaming vidéo en temps réel pour la surveillance et le débogage

HUSKYLENS 2 facilite la collecte de données et l’affichage des images grâce à sa fonction de streaming vidéo en temps réel. Il prend en charge la transmission d’images filaire (USB-C) ainsi que sans fil (via un module Wi-Fi optionnel).

Cette fonctionnalité est essentielle pour les applications nécessitant une surveillance à distance, pour la collecte de jeux de données destinés à l’entraînement de nouveaux modèles, ainsi que pour le débogage d’applications de vision, en offrant une visualisation en direct de ce que capte le capteur.

Module caméra remplaçable pour toutes les applications

HUSKYLENS 2 est équipé d’un module caméra modulaire, lui permettant de s’adapter facilement à une grande variété de scénarios, allant de l’inspection microscopique à la surveillance longue distance.

Sa flexibilité exceptionnelle prend en charge des lentilles interchangeables, incluant des modules à mise au point manuelle, microscope et vision nocturne.

Large compatibilité avec les contrôleurs courants

Grâce à ses interfaces standard UART et I2C, HUSKYLENS 2 assure une connexion fluide avec une large gamme de microcontrôleurs et ordinateurs mono-carte, notamment Arduino, micro:bit, Raspberry Pi, ESP32, UNIHIKER K10 et UNIHIKER M10.

Maîtrisez chaque fonctionnalité grâce au wiki de tutoriels complet

HUSKYLENS 2 est accompagné d’un wiki de tutoriels extrêmement détaillé couvrant l’ensemble de ses fonctionnalités. Cette ressource propose des guides étape par étape de plus de 20 modèles, le réglage avancé des paramètres, ainsi que des exemples de code et de programmation graphique pour Arduino, Raspberry Pi, micro:bit et UNIHIKER.

• Configuration pour débutants : mise sous tension et changement de langue
• Exploration détaillée par fonction : guides complets pour la reconnaissance faciale, le suivi d’objets, le suivi de ligne, l’OCR et toutes les autres fonctions
• Contrôle avancé : paramètres tels que les seuils de détection, les seuils NMS et les noms personnalisés
• Gestion des modèles : importation et exportation des modèles entraînés pour sauvegarde ou partage

Model Hub pour modèles prêts à l’emploi (bientôt disponible)

Afin d’accélérer encore le développement, un Model Hub sera prochainement lancé. Cette plateforme en ligne proposera une collection de modèles officiels et communautaires, adaptés à des secteurs spécifiques comme l’agriculture, le commerce ou la sécurité.

Les utilisateurs pourront parcourir, télécharger et déployer directement ces modèles spécialisés sur leur HUSKYLENS 2, offrant un accès immédiat à des capacités d’IA avancées et ciblées.

Caractéristiques:

• Processeur : Kendryte K230 double cœur 1,6 GHz
• Puissance de calcul IA : 6 TOPS
• Mémoire : 1 Go LPDDR4
• Stockage : 8 Go eMMC
• Capteur d’image : GC2093, 2 MP, 1/2.9", 60 FPS
• Affichage : écran tactile IPS 2,4" (640 × 480), lamination complète
• Boutons : 1 × bouton de fonction
• Éclairage : 2 × LED
• Indicateur RGB : 1 × LED RGB
• Wi-Fi : Wi-Fi 6 2,4 GHz (module enfichable)
• Stockage extensible : 1 × emplacement carte TF
• Microphone : microphone capacitif en silicium
• Haut-parleur : haut-parleur acoustique 1 W
• Tension de fonctionnement : 3,3 à 5 V
• Consommation : 1,5 à 3 W
• Dimensions : 70 × 58 × 19 mm
• Poids net : 90 g
• Interfaces : Type-C, Gravity (I2C / UART), emplacement carte TF