Rewind enregistre l'intégralité de ce qu'affiche votre Mac pour vous créer un historique personnel
Voici un concept aussi intriguant qu'effrayant : Rewind, une app qui se veut être « le moteur de recherche pour votre vie ». Celle-ci va enregistrer tout ce qui se passe sur votre Mac afin de le rendre consultable plus tard au format vidéo, même plusieurs semaines après. L'application a levé 10 millions de dollars et s'est récemment dévoilée dans une première vidéo.
Le concept est en fait plutôt simple : l'app enregistre constamment votre écran et permet de fouiller dans la vidéo à l'aide d'un système de reconnaissance des caractères (OCR). L'application propose une barre de recherche similaire à Spotlight, et il sera possible de « rembobiner » ce qui a été fait sur son ordinateur.
Grâce à l'OCR, on pourra par exemple retrouver ses onglets précédemment ouverts ou même du texte diffusé pendant une visioconférence. Évidemment, on pourra mettre en pause ou supprimer les enregistrements. Il sera aussi possible d'exclure certaines apps (1Password, Signal…).
Conscient des dérives possibles, les développeurs assurent que tout sera stocké en local sur la machine. Sous le capot, un moteur de compression promet d'enregistrer tout ce qui se passe sans pour autant blinder les SSD : une vidéo de 10,5 Go devrait pouvoir se transformer en un fichier de seulement 2,8 Mo. Le programme se base sur des API natives d'Apple pour fonctionner, et l'OCR intégrée permet de copier-coller des choses déjà vues (comme un lien).
Les puces Apple Silicon sont primordiales au fonctionnement de Rewind. « Nous utilisons pratiquement toutes les parties du système sur puce (SoC) de sorte que l'exécution de Rewind ne sollicite pas les ressources du système (comme le processeur et la mémoire) pendant l'enregistrement », expliquent les développeurs. L'app n'est pas encore disponible, mais il est possible de s'inscrire sur une liste d'attente pour être tenu au courant.
La simplicité retrouvée
Belle découverte
Ça n’a rien à voir mais je ne sais pas où poster ça : quelqu’un sait où trouver un iPhone 13 Pro à prix réduit ?
Ou quand est-ce que ça va baisser, Black Friday peut être ?
@Anarkyst
Regarde les prix sur Amazon et voit si cela te convient.
En sécurité locale jusqu’à ce qu’une faille soit découverte (probablement rapidement) . Sa propre NSA locale et sûrement piratable.
Bonne idée mais effectivement dangereuse 🤷🤞
Cela peut permettre aussi de fliquer les utilisateurs du Mac …….. ( enfants - conjoint - ami - collaborateurs) …..
ya que moi qui demande comment 10go peuvent devenir 2,8mo ??
@raoolito
Ça fait penser à la série Silicon Valley 😉
@tupui
J’ai totalement pensé à ça! 😁
@tupui
ah connait pas
@raoolito
C’est très drôle. L’histoire d’une startup qui a comme produit un algo de compression qui fait des miracles.
Série très cliché et pour autant tellement vrai.
@tupui
ah oui je comprend le lien!! je regarderai merci 🙏🏽
@ tupui
> Série très cliché et pour autant tellement vrai.
Tellement vrai ?
C'est quoi l'algo miracle ?
@marc_os
Je parle plutôt de la gestion des startup, VC, et des clichés des devs.
@tupui
« Série très cliché et pour autant tellement vrai. »
En regardant le dernier épisode, on prie très fort pour que cela ne soit pas vrai !
@raoolito
sauf si tu passes ta journée a mater des videos YT ;)
@raoolito
Au lieu d’enregistrer et encoder ce que l’utilisateur fait à l’écran en h264/265, Rewind va ré-afficher ce qu’il s’y passe en utilisant AppKit/SwiftUI…
Comme le dit le commentaire de @bunam, certaines utilisations peuvent présenter un challenge, bcp de surf internet, de vidéo Youtube, mais dans ces cas, je pense que le contenu multimédia ne sera pas sauvegardé et que Rewind ira rechercher le contenu en question sur internet…
@redchou
thanks 🙏🏽
@redchou
Si la « compression » vidéo (Plutôt h265) n’est pas à envisager, en premier lieu, c’est bien peut-être parce qu’on pourrait y voir plus ici, des pages clefs (avec des motifs animés dedans parfois) et au final un gros document avec plein de pages pleines de sens pour la reconnaissance de formes.
Dans ce cas seulement, on est plus proche d’un document au format DjVu que d’un PDF dix fois trop lourd; dont l’indexation n’est plus par pages, mais temporel et symbolique.
On est peut-être déjà là plus proche du h266 qui ne libérera vraisemblablement qu’une très faible partie de ce qu’il est d’ors et déjà possible de faire, pour assurer la transition.
Pour ce qui est du reste des méthodes de sélection/action élaborées de reconstruction de scénario, il y a déjà qlqs outils qui le permettent depuis des années.
On est ici face à une … initiative intéressante, motivant des enjeux paradoxaux auquel il faudra être bien attentif.
@raoolito
Si c'est de la vidéo, il faut savoir que dans un fichier mp4 pour éviter que ça soit trop lourd, celui ci va juste dire ce qui a changé par rapport à l'image précédente de la vidéo.
Ici, sur un usage standard, à mon avis, à part quelques textes, et occasionnellement un changement de fenêtre, ça devrait être assez simple de bien réduire la taille d'une vidéo comme ça.
@Link1993
oh je vois!
@ Link1993
> un fichier mp4 [...] va juste dire ce qui a changé par rapport à l'image précédente de la vidéo
C'est la base de la compression video depuis des lustres, depuis qu'on veut transmettre de la vidéo sur des réseaux numériques, depuis au moins les premiers réseaux ISDN (RNIS en bon français) :
Compression temporelle, mais aussi spatiale. On ne stocke que les changements. Mais de temps en temps on stocke quand même l'image complète (key frame) entre autres à cause de erreurs d'arrondi qui peuvent s'accumuler, pour "re-synchroniser" le biniou. Et si un a un grand carré rouge d'une certaine taille de dix mille pixels, on ne va pas stocker dix mille pixels rouges, mais une structure donnant la couleur et décrivant la forme géométrique de la zone rouge - à condition que cette structure n'occupe pas plus de place que de simplement lister les pixels et leur couleur.
Chaque nouvel algo veut être plus puissant que le précédent. Mais il y a des difficultés. Il faut maximiser le taux de compression, mais aussi penser à la puissance de calcul nécessaire pour l'encodage et le décodage. Pour de la retransmission "en live", l'encodage ne doit pas consommer trop de ressources. Pour une vidéo stockée dans un fichier puis lue plus tard, le pb de consommation des ressources à l'encodage est moins un problème, c'est surtout au décodage qu'il faut que ça soit efficace. Ce qui fait qu'on n'utilise pas les mêmes algorithmes selon l'usage, live ou différé.
Quant à l'algo miracle...
@marc_os
J'avais grandement simplifié. Mis merci pour les précisions :)
Mais je pensais à ça justement, avec un taux de compression important. Mais c'est clair que ça va bouffer de la puissance je pense :/
@raoolito
https://help.rewind.ai/en/articles/6706118-how-does-rewind-compression-work
Comment une vidéo de 10,5 Go peut bien se transformer en un fichier de seulement 2,8 Mo ? Non parce qu’un algorithme comme ça, ça permet de mettre une saison Apple TV sur une disquette hein. Je suis sur que plein de monde serait intéressé.
@Ali Baba
Je pense que l’algorithme ne garde en mémoire qu’une seule image à chaque fois que le contenu de l’écran change beaucoup
@Thms
Les keyframes en vidéo
Même si tout est effectivement stocké en local, le mac reste connecté à internet donc cela reste quand même une potentielle énorme faille de sécurité si des entités comme la NSA arrivent à accéder à ces données
Sans moi même si je comprends l'intérêt, chapeau aux dev si ils ont réussi à rendre tout ça transparent et que ça utilise quasiment pas le cpu/gpu/batterie 👏🏻
@QuentinRth
Dans ce cas absolument tout ce que vous faite sur votre AMC est autant risqué.
@Baptiste_nv18
S'il y avait une surveillance h24 de chaque appareil avec des logs oui mais ça me parait quand même bien différent si en se connectant pour la première fois à un appareil ils arrivent à voir absolument tout ce que tu as fait les x derniers jours/mois/années
@QuentinRth
Je te rassure, ni toi ni moi ne sommes les cibles de la NSA, à moins que tu sois du côté (très) obscur de la Force!😅
Encore une invention incroyable venant combler un besoin inexistant ☺️
@ JOHN³
« besoin inexistant » ?
Pour le commun des mortels peut-être, mais pour les services secrets divers et avariés et autres pirates, certainement pas.
J'imagine comme ça pourrait être détourné en entreprise. "Ah mais non, à 10h23 vous ne travailliez pas, vous regardiez une vidéo de petit chat. Vous êtes virés."
@Pierre H
Un sys admin peut déjà détecter ce genre de chose (pas avec cette granularité en général, mais on peut savoir si la personne est sur FB, YouTube ou autre. Et en entreprise tu as même des boites qui installent Crowdstrike qui log tout et envois tout sur un serveur…
Comme disait l'autre: "What could go wrong?"
Il ne manque plus que des drones pas plus gros qu'une mouche pour enregistrer notre quotidien...
Déjà vu : les frelons asiatiques 🤣
@ fleeBubl
> les frelons asiatiques
Il y a aussi des frelons bien
françaiseuropéens ! 🐝🙃@marc_os
C’était juste un rappel paradoxal, quant au
format « déjà vu » DjVu
qui semble beaucoup trop exotique,
alors que beaucoup moins encombrant qu’un PDF.
Déjà ! Na 😅🤪
Et puis y’a quand même un cador derrière. Vu 👀
@mahers
« Il ne manque plus que des drones pas plus gros qu'une mouche pour enregistrer notre quotidien... »
Il y a des cafards pilotés à distance avec une puce reliée à leurs nerfs moteurs. C’est expérimental, mais carrément flippant. C’est développé pour explorer les décombres après un gros accident, pour retrouver des survivants, mais les possibilités de dérive sont nombreuses.
« une vidéo de 10,5 Go devrait pouvoir se transformer en un fichier de seulement 2,8 Mo »
Ça paraît peu crédible mais bon, déjà avant d’en arriver là il faut vouloir enregistrer tout ce qu’on fait sur son propre ordi 🙄
ça s’apparente à un marché d’ultra niche pour Mac users atteints d’alzheimer n’ayant pas de contrainte de confidentialité
@laraigneegypsymontealagouttiere
« ça s’apparente à un marché d’ultra niche pour Mac users atteints d’alzheimer n’ayant pas de contrainte de confidentialité »
Ou pour des applications industrielles, et scientifiques où une traçabilité des opérations est nécessaire. Mais c’est un marché d’ultra-niches.
Alors j’achète de suite !
J’utilisais l’app Refog keylogger depuis des années, elle permettait d’enregistrer tout ce qu’il se passais sur le Mac, en détail !
Et elle fessais des screenshot automatique, soit par x minutes, et par l’ouverture d’une fenêtre.
Eh ben ça m’a bien sauvé la vie pour retrouver des informations ! Alors ce genre d’app c’est encore mieux !
D’autant plus que Refog ne propose plus d’app locale, avec l’accès à tous les fichiers et base de données, le nouveau modèle économique envoie tout sur leurs serveur, et j’ai arrêté pour cette raison, et le fait que certaines fonctions manquaient.
D’autant plus qu’ils font un abonnement annuel plutôt cher. Et comme les ancienne version ne marchent plus, comment vous dire que cela me manque, il n’y a aucun conçurent à ça.