Objectifier : Directeur de la technologie domestique

May 26, 2023

L'objectifier de [Bjørn Karmann] est un appareil qui vous permet de contrôler des objets domestiques en leur permettant de réagir à des actions ou à des comportements uniques, en utilisant l'apprentissage automatique et la vision par ordinateur. L'Objectifier peut allumer une lampe de table lorsque vous ouvrez un livre et l'éteindre lorsque vous fermez le livre. Allumez la cafetière lorsque vous placez la tasse à côté de la cafetière et éteignez-la lorsque la tasse est retirée. Allumez la ponceuse à bande lorsque vous mettez les lunettes de sécurité et arrêtez-la lorsque vous retirez les lunettes. Chargez le téléphone lorsque vous placez une banane devant et arrêtez de le charger lorsque vous placez une pomme devant. Vous obtenez la dérive - les possibilités sont infinies. Espérons que, dans un avenir (proche), nous pourrons interagir avec des objets inanimés de cette manière. Nous pouvons les amener à apprendre de nos actions plutôt que nous d'apprendre à les programmer.

L'appareil utilise la vision par ordinateur et un réseau de neurones pour apprendre des comportements complexes associés à vos commandes de déclenchement. Un mode d'entraînement, utilisant une application pour téléphone, permet de l'entraîner aux actions On et Off. Certaines actions nécessitent plus d'efforts humains pour l'entraîner - comme la détection d'un livre ouvert et fermé - mais finalement, le réseau de neurones fait un assez bon travail.

La version actuelle est le sixième prototype de la série et [Bjørn] a beaucoup travaillé pour peaufiner le projet à chaque étape. Dans son dernier avatar, le matériel de l'appareil se compose d'un Pi Zero, d'un module caméra Raspberry-Pi, d'un bloc d'alimentation SMPS, d'un bloc relais pour commuter la sortie, d'une prise 230 V pour l'alimentation en entrée et d'une prise 230 V pour l'alimentation finale. sortir. Toutes les pièces sont assemblées assez proprement à l'aide de pièces de support en acrylique découpées au laser, puis enfermées dans une belle enceinte en bois.

Côté logiciel, toute la partie apprentissage automatique est prise en charge à l'aide de "Wekinator" - un logiciel gratuit et open source qui permet de construire des instruments de musique, des contrôleurs de jeu gestuels, des systèmes de vision par ordinateur ou d'écoute par ordinateur utilisant l'apprentissage automatique. La vision par ordinateur est gérée via Processing. Tout le code est encapsulé à l'aide d'openframeworks, ml4A fournissant des applications pour travailler avec l'apprentissage automatique.

Tout ce qui précède est ce que nous avons pu déduire en regardant les photos et les informations sur son blog. Il n'y a pas beaucoup de détails sur le matériel, mais les images suffisent à tout nous dire. Le logiciel n'est pas disponible, mais cela pourrait peut-être inciter certains d'entre vous à agir pour créer une autre version de l'Objectifier. Regardez la vidéo après la pause, montrant des humains enseignant ses tours à l'Objectifier.