Ouvrir le menu principal

MacGeneration

Recherche

ScreenSnapAI fait appel à ChatGPT pour décrire les captures d'écran

Nicolas Furno

mercredi 10 avril 2024 à 11:21 • 13

Logiciels

ScreenSnapAI est un nouvel utilitaire chargé de collecter des captures d’écran réalisées sur le Mac et surtout de leur apporter du sens avec l’aide de ChatGPT. L’app est capable de réaliser de nouvelles captures d’écran ou d’importer des images existantes. Elle extrait systématiquement le texte identifié sur l’image et peut en option la transmettre à OpenAI pour une analyse avancée du contenu avec GPT-4. De quoi améliorer l’identification des éléments importants sur la capture, au-delà du texte, puisque les photos peuvent elles aussi être étudiées par l’intelligence artificielle.

Une capture d’écran réalisée avec ScreenSnapAI avant le passage de ChatGPT… Image MacGeneration.
La même, après son passage : notez l’ajout des mots-clés et d’une description. Image MacGeneration.

Si l’idée est intéressante, la réalisation n’est pas encore à la hauteur. ScreenSnapAI se télécharge gratuitement, dans une version toutefois très limitée : impossible d’importer des images sans payer, il faut obligatoirement utiliser l’outil intégré et ce dernier est bien plus médiocre que celui de macOS. Vous ne pourrez pas sélectionner une fenêtre, ni déplacer la sélection après l’avoir commencé comme avec les captures d’écran du système. Une fois la capture stockée, l’app offre trois analyses gratuites avec un gros défaut : si vous ne cliquez pas sur un bouton pour conserver son travail, il sera perdu et vous devrez utiliser un crédit IA de plus.

Une partie de ces défauts devrait sauter en payant pour la version pro, une opération facturée 9,99 € une fois. Ce faisant, vous pourrez importer des images et les organiser dans des dossiers intelligents. Vous aurez aussi droit à 50 analyses avec GPT-4, puis il faudra payer, à raison de 100 traitements pour 5,99 €. Le développeur précise toutefois sur son site qu’il sera possible à terme d’utiliser sa propre clé OpenAI, un bon point. Reste à savoir si l’analyse proposée par ChatGPT est utile et je suis loin d’être convaincu sur la base de mes trois essais gratuits.

L’analyse en quelques mots tout comme les mots-clés proposés par l’assistant d’OpenAI sont surtout basés sur le texte identifié dans la capture d’écran, pas tellement sur le reste. L’extraction de texte proposée gratuitement par macOS est ainsi aussi bonne, même si ChatGPT garde l’avantage de pouvoir synthétiser le contenu. Cela dit, cette synthèse n’est proposée qu’en anglais à ce stade, alors même que mes captures ont été réalisées sur du texte en français.

Si vous voulez tester, ScreenSnapAI est proposée au téléchargement uniquement via le Mac App Store (une version sera bientôt proposée au téléchargement depuis le site officiel). macOS 13 est nécessaire au minimum et l’interface n’est pas traduite en français.

illustration magazine 25 ans

MacGeneration a 25 ans !

Participez à la fête et découvrez l’histoire de votre site favori en précommandant notre magazine exclusif.

Je précommande le magazine

Pourquoi j’ai quitté Orange pour un FAI associatif

10:00

• 27


Save : 25 € de bonus pour faire réparer son smartphone, « ce n’est pas rien »

07:53


Black Friday : les meilleures promotions sur les SSD externes et les cartes mémoire (4 To en promo 🔥) 🆕

30/11/2024 à 23:14

• 7


Promo : le Magic Trackpad USB-C à 109 € et la Magic Mouse à 60 €

30/11/2024 à 19:01

• 12


4K Video Downloader Plus est à - 30 % : téléchargez vos vidéos YouTube en toute quiétude ! 📍

30/11/2024 à 15:58


Black Friday : les meilleures promos du jour sur les Mac 🆕

30/11/2024 à 10:20

• 12


Sortie de veille : le nouveau CarPlay perdu en cours de route ?

30/11/2024 à 08:00

• 30


Black Friday : les promos sur les produits utilisés par l’équipe de MacG

30/11/2024 à 07:25

• 11


Black Friday : jusqu'à 50 % de remise immédiate et livraison offerte dès 49 € !

Partenaire


Les meilleures promos du Black Friday : AirPods Pro 2 à 190 €, iPhone 16 à 833 €…

29/11/2024 à 23:05

• 37


Black Friday : c'est le moment de prolonger votre abonnement à Microsoft Office 365

29/11/2024 à 23:00

• 40


Ayant commandé un iPhone sur l’Apple Store, il reçoit un Mac mini

29/11/2024 à 21:30

• 46


Black Friday : les meilleures promos sur les iPhone

29/11/2024 à 21:07


Black Friday : RhinoShield casse les prix sur les coques et accessoires, jusqu'à 40 % de réduction ! 📍

29/11/2024 à 20:40


OpenAI attaqué en justice par cinq médias canadiens

29/11/2024 à 20:15

• 6


Nouvelle opération spéciale d’Apple pour la lutte contre le sida

29/11/2024 à 19:30

• 23