Ouvrir le menu principal

MacGeneration

Recherche

ScreenSnapAI fait appel à ChatGPT pour décrire les captures d'écran

Nicolas Furno

mercredi 10 avril 2024 à 11:21 • 13

Logiciels

ScreenSnapAI est un nouvel utilitaire chargé de collecter des captures d’écran réalisées sur le Mac et surtout de leur apporter du sens avec l’aide de ChatGPT. L’app est capable de réaliser de nouvelles captures d’écran ou d’importer des images existantes. Elle extrait systématiquement le texte identifié sur l’image et peut en option la transmettre à OpenAI pour une analyse avancée du contenu avec GPT-4. De quoi améliorer l’identification des éléments importants sur la capture, au-delà du texte, puisque les photos peuvent elles aussi être étudiées par l’intelligence artificielle.

Une capture d’écran réalisée avec ScreenSnapAI avant le passage de ChatGPT… Image MacGeneration.
La même, après son passage : notez l’ajout des mots-clés et d’une description. Image MacGeneration.

Si l’idée est intéressante, la réalisation n’est pas encore à la hauteur. ScreenSnapAI se télécharge gratuitement, dans une version toutefois très limitée : impossible d’importer des images sans payer, il faut obligatoirement utiliser l’outil intégré et ce dernier est bien plus médiocre que celui de macOS. Vous ne pourrez pas sélectionner une fenêtre, ni déplacer la sélection après l’avoir commencé comme avec les captures d’écran du système. Une fois la capture stockée, l’app offre trois analyses gratuites avec un gros défaut : si vous ne cliquez pas sur un bouton pour conserver son travail, il sera perdu et vous devrez utiliser un crédit IA de plus.

Une partie de ces défauts devrait sauter en payant pour la version pro, une opération facturée 9,99 € une fois. Ce faisant, vous pourrez importer des images et les organiser dans des dossiers intelligents. Vous aurez aussi droit à 50 analyses avec GPT-4, puis il faudra payer, à raison de 100 traitements pour 5,99 €. Le développeur précise toutefois sur son site qu’il sera possible à terme d’utiliser sa propre clé OpenAI, un bon point. Reste à savoir si l’analyse proposée par ChatGPT est utile et je suis loin d’être convaincu sur la base de mes trois essais gratuits.

L’analyse en quelques mots tout comme les mots-clés proposés par l’assistant d’OpenAI sont surtout basés sur le texte identifié dans la capture d’écran, pas tellement sur le reste. L’extraction de texte proposée gratuitement par macOS est ainsi aussi bonne, même si ChatGPT garde l’avantage de pouvoir synthétiser le contenu. Cela dit, cette synthèse n’est proposée qu’en anglais à ce stade, alors même que mes captures ont été réalisées sur du texte en français.

Si vous voulez tester, ScreenSnapAI est proposée au téléchargement uniquement via le Mac App Store (une version sera bientôt proposée au téléchargement depuis le site officiel). macOS 13 est nécessaire au minimum et l’interface n’est pas traduite en français.

Rejoignez le Club iGen

Soutenez le travail d'une rédaction indépendante.

Rejoignez la plus grande communauté Apple francophone !

S'abonner

Émulation : comment jouer à ses vieux jeux sur iPhone ou iPad ?

26/04/2025 à 10:49

• 9


Pour le producteur de La Maison, « Apple est la pire boîte marketing de l’univers »

26/04/2025 à 00:08

• 88


Upscaling vidéo et restauration photo plus rapides sur Mac/PC : VideoProc AI mis à jour est à - 62 % 📍

25/04/2025 à 17:44

• 0


Derniers jours Apple week à la Fnac : -10 % sur des MacBook Pro, iPhone 15 Pro à 16 Pro Max et iPad Pro M4

25/04/2025 à 16:00

• 7


dav1d, le décodeur AV1 le plus optimisé qu'Apple refuse d'utiliser

25/04/2025 à 14:00

• 6


Microsoft a conçu une publicité par IA et personne n’a rien vu

25/04/2025 à 13:45

• 32


Razer lance sa première souris ergonomique verticale face à Logitech

25/04/2025 à 12:15

• 12


Yahoo! veut acheter Chrome

25/04/2025 à 10:45

• 37


Slate veut repartir de zéro avec un pick-up électrique compact et épuré pour moins de 20 000 $

25/04/2025 à 10:00

• 112


iPadOS 19 verrait apparaître une barre de menus sur iPad

25/04/2025 à 09:24

• 48


Huit ans après DeX, Apple s’ouvrirait peu à peu à un bureau sur écran externe pour iOS 19

25/04/2025 à 09:23

• 54


John Giannandrea aurait aussi perdu l'équipe en charge de la robotique chez Apple

25/04/2025 à 07:39

• 15


Les procès antitrust contre les GAFAM se poursuivent aux USA, malgré les changements de présidence

24/04/2025 à 21:30

• 31


Prise en main de Supercharge, l’app à tout faire qui rend bien des services sur le Mac

24/04/2025 à 20:30

• 18


TSMC annonce la gravure en 1.4 nm, quand la Russie espère atteindre les 28 nm en 2030

24/04/2025 à 20:20

• 56


Données personnelles : comment Incogni supprime ce que les autres ne peuvent pas 📍

24/04/2025 à 18:17

• 0