Ouvrir le menu principal

MacGeneration

Recherche

ScreenSnapAI fait appel à ChatGPT pour décrire les captures d'écran

Nicolas Furno

mercredi 10 avril 2024 à 11:21 • 13

Logiciels

ScreenSnapAI est un nouvel utilitaire chargé de collecter des captures d’écran réalisées sur le Mac et surtout de leur apporter du sens avec l’aide de ChatGPT. L’app est capable de réaliser de nouvelles captures d’écran ou d’importer des images existantes. Elle extrait systématiquement le texte identifié sur l’image et peut en option la transmettre à OpenAI pour une analyse avancée du contenu avec GPT-4. De quoi améliorer l’identification des éléments importants sur la capture, au-delà du texte, puisque les photos peuvent elles aussi être étudiées par l’intelligence artificielle.

Une capture d’écran réalisée avec ScreenSnapAI avant le passage de ChatGPT… Image MacGeneration.
La même, après son passage : notez l’ajout des mots-clés et d’une description. Image MacGeneration.

Si l’idée est intéressante, la réalisation n’est pas encore à la hauteur. ScreenSnapAI se télécharge gratuitement, dans une version toutefois très limitée : impossible d’importer des images sans payer, il faut obligatoirement utiliser l’outil intégré et ce dernier est bien plus médiocre que celui de macOS. Vous ne pourrez pas sélectionner une fenêtre, ni déplacer la sélection après l’avoir commencé comme avec les captures d’écran du système. Une fois la capture stockée, l’app offre trois analyses gratuites avec un gros défaut : si vous ne cliquez pas sur un bouton pour conserver son travail, il sera perdu et vous devrez utiliser un crédit IA de plus.

Une partie de ces défauts devrait sauter en payant pour la version pro, une opération facturée 9,99 € une fois. Ce faisant, vous pourrez importer des images et les organiser dans des dossiers intelligents. Vous aurez aussi droit à 50 analyses avec GPT-4, puis il faudra payer, à raison de 100 traitements pour 5,99 €. Le développeur précise toutefois sur son site qu’il sera possible à terme d’utiliser sa propre clé OpenAI, un bon point. Reste à savoir si l’analyse proposée par ChatGPT est utile et je suis loin d’être convaincu sur la base de mes trois essais gratuits.

L’analyse en quelques mots tout comme les mots-clés proposés par l’assistant d’OpenAI sont surtout basés sur le texte identifié dans la capture d’écran, pas tellement sur le reste. L’extraction de texte proposée gratuitement par macOS est ainsi aussi bonne, même si ChatGPT garde l’avantage de pouvoir synthétiser le contenu. Cela dit, cette synthèse n’est proposée qu’en anglais à ce stade, alors même que mes captures ont été réalisées sur du texte en français.

Si vous voulez tester, ScreenSnapAI est proposée au téléchargement uniquement via le Mac App Store (une version sera bientôt proposée au téléchargement depuis le site officiel). macOS 13 est nécessaire au minimum et l’interface n’est pas traduite en français.

illustration magazine 25 ans

MacGeneration a 25 ans !

Participez à la fête et découvrez l’histoire de votre site favori en précommandant notre magazine exclusif.

Je précommande le magazine

Satechi annonce un hub pour le Mac mini M4

21/11/2024 à 21:30

• 17


L'Apple Watch Ultra 2 et quatre autres montres à l'épreuve du marathon de New York

21/11/2024 à 15:07


Pour son Black Friday, Apple offrira jusqu’à 150 € en carte cadeau

21/11/2024 à 15:02

• 10


Antitrust : le DoJ réclame officiellement que Google vende Chrome

21/11/2024 à 10:32

• 97


Apple, Anker : de nombreux adaptateurs secteur en promo (jusqu’à -33 %)

21/11/2024 à 10:02

• 3


Les meilleures offres de la Black Week. Tout au long du mois de novembre

Partenaire


Le SSD Thunderbolt 5 d'OWC est disponible : le plus rapide du marché, mais aussi le plus cher

20/11/2024 à 21:30

• 15


Test de l’iMac 24" M4 : haut en couleur

20/11/2024 à 20:30

• 27


Promotion Black Friday de Godeal24 : Microsoft Office à - 80 %, c'est maintenant 📍

20/11/2024 à 20:22


macOS 15.2 : quatrième bêta développeur, et troisième bêta publique 🆕

20/11/2024 à 19:56

• 8


Refurb : -220 € sur le MacBook Air M3 en 16/1 To

20/11/2024 à 17:45

• 38


Aqara commercialise aussi un détecteur de fumée connecté compatible HomeKit (avec code promo 🆕)

20/11/2024 à 15:25


Apple vs DoJ : la Pomme va demander à un juge fédéral d’abandonner les poursuites

20/11/2024 à 15:09

• 57


Apple vend désormais elle-même des espaces publicitaires dans Apple News

20/11/2024 à 14:38

• 8


Beats : Erling Haaland fait de la pub à l'ancienne

20/11/2024 à 12:15

• 13


YouTube : IMG_0001 déterre de vieilles vidéos filmées à l’iPhone

20/11/2024 à 11:44

• 9