Sortie d'ESP-KVM 0.51.0, un firmware IP-KVM open source avec enregistrement d'écran sur carte microSD

ESP-KVM 0.51.2, un firmware open source transformant une carte microcontrôleur ESP32-P4 en un KVM IP permettant d'accéder, via un navigateur, à l'écran, au clavier et à la souris d'un ordinateur distant, sans installation de logiciel sur la machine cible, est désormais disponible. Le code est écrit en C et distribué sous licence Apache 2.0. La principale nouveauté de cette version est la possibilité d'enregistrer l'activité de l'écran de la cible sur la carte microSD de l'appareil.

L'enregistrement se lance via un bouton de l'interface web et est sauvegardé dans le répertoire VIDEO au format .ts avec la vidéo H.264. L'appareil enregistre le même flux qu'il diffuse aux utilisateurs, évitant ainsi tout réencodage : sur la carte Espressif ESP32-P4 Function EV, la fréquence d'images est restée stable à 21-22 images/s lors de la lecture sur l'ordinateur cible. Le fichier .ts est compatible avec VLC et mpv et, en cas d'interruption (retrait de la carte ou mise hors tension), la lecture reprend jusqu'à la fin. Les enregistrements longs sont divisés en fichiers de 10 minutes et s'arrêtent après une heure ; ces deux paramètres sont configurables. Un bouton dédié permet d'enregistrer une capture d'écran au format JPEG dans le dossier SCREENSHOTS, même lorsque le codec H.264 est activé : l'encodeur JPEG matériel est alors utilisé.

Les frappes au clavier et les clics de souris peuvent être enregistrés dans un fichier de sous-titres .srt placé à côté de la vidéo, sous forme de chaînes de caractères telles que « Tapé : root », « Ctrl+Alt+Suppr » et « Clic gauche (812, 440) ». Par défaut, le texte saisi est remplacé par des points ; le texte intégral peut être enregistré si nécessaire. La disposition est celle du clavier cible.

Un mode caméra embarquée a été ajouté, fonctionnant sur le même principe qu'une caméra de voiture : l'appareil enregistre en continu les dernières minutes d'écran, ainsi que les secondes suivantes lorsqu'un événement se produit : l'écran devient fixe (comme lors d'un arrêt d'urgence), une phrase surveillée apparaît, le voyant d'alimentation ATX s'éteint ou l'utilisateur appuie sur un bouton. La vidéo ainsi obtenue est convertie au format MP4, avec des chapitres pour chaque événement. Si les notifications sont activées, elle est envoyée sur Telegram et diffusée dans la conversation.

Il existe deux manières de stocker les données passées : soit dans la PSRAM, où elles n’occupent aucun espace sur la carte jusqu’à ce que l’événement se produise, soit directement sur la carte, par petits fragments dont les plus anciens sont supprimés. Cette seconde méthode fonctionne également sur les cartes dont la révision de la puce est inférieure ou égale à 3.0 ; après le lancement de l’encodeur H.264, il reste environ 3 Mo de PSRAM libre, contre 11 Mo sur les révisions plus récentes.

Un mode accéléré a été ajouté : une image est enregistrée toutes les 10 secondes, et la lecture se fait à 25 images par seconde. Ainsi, une heure d'enregistrement à intervalles de 10 secondes peut être capturée en 14 secondes de vidéo. Les enregistrements et les photos sont organisés dans un panneau d'interface dédié, où ils peuvent être téléchargés, supprimés et visionnés sans avoir à télécharger l'intégralité du fichier. Les fichiers MP4 s'ouvrent avec le lecteur intégré du navigateur, tandis que les fichiers .ts sont découpés en images dans la console et décodés par le même décodeur H.264 que la vidéo en direct, avec prise en charge du retour en arrière et des sous-titres. La gestion des plages HTTP est implémentée pour le retour en arrière côté appareil.

La recherche de texte à l'écran est désormais disponible. Pendant l'enregistrement, l'appareil analyse l'écran toutes les trois secondes et enregistre le texte dans un fichier situé à côté de la vidéo. Dans le panneau d'enregistrement, une fonction de recherche par expression permet de visualiser le moment où l'expression apparaît à l'écran et de reprendre la lecture de l'enregistrement à partir de ce point. Seuls les écrans générés par le générateur de caractères sont pris en charge : le BIOS, le menu de démarrage, le programme d'installation et la console.

L'enregistrement vidéo, le time-lapse et les captures d'écran peuvent être lancés depuis les scénarios de l'appareil (« enregistrement 300 », « time-lapse 60 », « capture d'écran ») et depuis Home Assistant, qui dispose d'un interrupteur et de boutons dédiés. L'horloge de l'appareil est désormais synchronisée via NTP et le fuseau horaire peut être sélectionné dans une liste de villes des paramètres ; auparavant, il était stocké dans une section cachée de l'interface.

Autres modifications apportées aux versions postérieures à la version 0.45.0 :

• La version 0.46 prend désormais en charge les cartes VIEWE ESP32-P4-Pi et Waveshare ESP32-P4-NANO-WIFI6-DB. Le firmware est maintenant compilé avec l'optimisation -O2, les petites allocations mémoire sont déplacées vers la PSRAM et le blocage d'une tâche entraîne un redémarrage avec enregistrement du fichier de vidage mémoire.
• 0.47. Les runbooks sont désormais disponibles : des macros qui attendent l’apparition ou la disparition d’une phrase à l’écran et s’exécutent sur l’appareil à la fermeture du navigateur. Les scripts au format DuckyScript sont maintenant acceptés. Un planificateur avec syntaxe cron et notifications Telegram (avec captures d’écran) ou webhooks a été ajouté.
• 0.48. La carte microSD et le module WiFi fonctionnent désormais simultanément ; auparavant, les deux utilisaient le même emplacement SDMMC.
• 0.49. La carte microSD des cartes Function EV et Waveshare ESP32-P4-ETH fonctionne désormais à une fréquence de bus de 40 MHz au lieu de 4 MHz (environ 9 Mo/s en lecture, environ 4 Mo/s en écriture) : l’alimentation du lecteur n’était plus assurée par le régulateur intégré. Le chargement d’images via l’interface web a été accéléré d’environ 50 fois, atteignant 3,5 Mo/s via Ethernet. Un mode clavier a été ajouté pour les anciens BIOS : la machine cible reconnaît désormais un seul périphérique à la vitesse USB 1.1, à l’exclusion de la souris et des périphériques de stockage. Le périphérique signale désormais si le mode HDMI dépasse la bande passante de deux voies MIPI CSI.
• 0.49.1. La vitesse de lecture du lecteur virtuel par la machine cible a été accélérée de 5,6 à 9 Mo/s grâce à une lecture par blocs de 256 Ko. Les modifications d'image sont désormais visibles sur la machine cible sans avoir à reconnecter le câble USB.
• 0.50. La carte microSD peut être remplacée pendant le fonctionnement de l'appareil, même si elle est retirée en cours de copie : l'emplacement est vérifié toutes les cinq secondes. Correction d'un délai MJPEG qui entraînait l'affichage, par le navigateur, de l'image précédant la dernière frappe au clavier sur un écran fixe.

Source: opennet.ru