Safari 18 saurait résumer, gommer et mieux chercher
Tous les ans Safari a droit à quelques nouvelles fonctions et la prochaine version 18 ne devrait pas faire exception. AppleInsider dit avoir obtenu quelques détails à propos de cette version actuellement en développement pour son lever de rideau en juin lors de la WWDC.
Première chose, le navigateur pourrait avoir une fonction de résumé du contenu d'une page web. À l'instar de ce que proposent maintenant les outils d'IA, Safari pourrait analyser le contenu textuel d'une page, en repérer les éléments de valeur et s'en servir pour élaborer une synthèse. Cette fonction est pour le moment baptisée « Intelligent search ».
Seconde chose, le navigateur aurait une « Gomme pour le web ». L'utilisateur pourrait pointer et supprimer l'affichage de certains éléments constitutifs d'une page web. Par exemple une bannière qu'on ne veut plus voir ou un bloc de texte récurrent. Ces altérations seraient mémorisées pour les visites ultérieures. Un élément d'interface préviendrait toutefois l'utilisateur que la page qu'il revisite avait été modifiée par ses soins par le passé. Avec la possibilité de la restaurer dans sa présentation normale. Un peu comme on le fait pour les images modifiées dans Photos.
Ensuite, un nouveau menu logé à côté du champ d'adresses du navigateur consoliderait à cet endroit des commandes et réglages dispersés ailleurs dans l'interface et dans le menu de partage. On retrouverait, sur Mac, la même présentation des réglages de changement de taille de police et de zoom dans la page que l'on a sur iPadOS.
Enfin, AppleInsider parle d'une fonction de recherche visuelle plus performante. On pourrait utiliser une image dans une page comme base de recherche d'informations à son sujet. Ce que Photos fait déjà en mettant en exergue, au sein de la zone d'informations d'une image, des éléments qu'il a repérés (type de plante ou arbre, lieu, race d'animal, etc.).
iOS 17 : la recherche visuelle déchiffre les symboles qui nous entourent
Cette fonction, qui évoque ce que fait déjà Google de son côté sur Android, pourrait n'arriver qu'en 2025 (lire aussi Test du Pixel 8 Pro : IA d’la joie).
iOS 18 devrait « remanier » Photos, Mail, Notes et d’autres applications Apple
ah bah voilà typiquement ce genre de choses malines que pourrait apporter l'intelligence artificielle dans un usage courant!
@raoolito
Clairement, la c’est un usage intelligent. L’IA doit être faite pour ça. Rien ne sert de faire de grand et gros discours pour montrer qui a la plus grosse.
@raoolito
Invisible mais utile
Ce serait dommage que la nouvelle fonction de résumé soit réservée à Safari sans mettre à jour l’ancien service de résumé. Mais vu que les développeurs actuels de MacOS ne connaissent plus les fonctions de cet OS (en dehors de celles qui sont présentes sur leur iPhone), je ne serais pas surpris que ce soit le cas. 🙁
@BeePotato
Quel service de résumé ? Reader ?
@ Mrleblanc101 :
Le service (dans le menu des services) qui s’appelle « Résumer ».
Son moteur date d’une époque où les techniques de résumé automatique étaient loin d’être efficace, donc il n’a jamais été très intéressant. Mais s’il était mis à jour avec un moteur plus efficace, il le deviendrait.
@BeePotato
Ah oui, pas très évident.
Désactiver par default alors il faut aller dans les réglages de raccourci clavier pour l'afficher dans le menu même si on l'utilise a la souris lol !
De plus, Apple a partiellement replacer le menu service par les Quick Action qui inclus les Shortcuts🤔
Les fonctions services étaient si pratiques et universelles aux apps modernes mais ce fut abandonné par Apple.
Oh que oui. Heritage, a minima, de NeXTSTEP.
@BeePotato
C’est si triste, en effet…
Arc permet déjà de personnaliser les pages Web et propose aussi un outil de résumé (pour la version mobile).
@ataredg
Oui ! La fonction résumé d’Arc fonctionne qu’en anglais mais je l’utilise très régulièrement et je dois avouer que c’est génial !
Surtout moi qui n’arrive pas à lire les site internet dans les transports en commun sans être malade, avec ça s’est parfait :)
@ataredg
Ce navigateur est une merveille, j’espère qu’ils resteront indépendants.
@heu
Ils ne le sont déjà pas, financés par des VC qui vont rapidement maintenant demander un retour sur investissement (cela commence déjà avec la fondation de leur silo autour de la synchronisation) et à minima monétiser les choses : sauf qu’au delà des déclarations d’intentions, on a toujours pas l’ombre d’un modèle économique viable. Ils ne font que brûler du cash pour l’instant.
@heu : Je rejoins l'avis de vincentn. L'avenir d'Arc est sombre. Tôt ou tard, il va falloir que l'entreprise soit rentable. Et en l'état, je ne vois pas comment monétiser un navigateur internet. Qui va s'abonner à Arc mis à part quelques évangélistes ? Qui va vouloir racheter The Browser Cie ? Vraiment je suis curieux de voir comment ils vont entamer ce long processus ...
Ok donc on ne veut même plus perdre de temps à lire un article on veut tout de suite le résumé et si possible qu’il fasse 3 mots…
Tout ce gain de temps pour que je puisse enfin passer plus de temps à ???
Remarque ça va dans le sens des choses vu que l’on n’aura bientôt que 3 neurones il faut bien tout faire pour ne pas les mettre en surchauffe.
👍 il y a un vieux film qui s'appelle Idiocracy et on s'en approche de plus en plus...
@Seb42 : La plupart des articles comportent des paragraphes entiers inutiles qui servent au SEO ou à introduire un contexte que tout le monde connait plus ou moins. Le temps n'étant pas stretch, cette fonction est super utile. Et RIEN ne t'empeche de lire l'article en entier.
@ataredg
Exactement. Et si l’IA pouvait faire la même chose pour les tutoriels en vidéo, ça serait génial. Car la plupart sont très long pour ne finalement présenter que peu de choses.
@ataredg
Oui comme un film ou les passages longs sont pompeux finalement la trilogie du seigneurs des anneaux est trop longue en 10 minutes max on peut se le résumer quelle perte de temps.
Ou un jeu comme Elden Ring un chef d’œuvre mais finalement tellement long sur des passages une IA qui pourrait jouer pour moi ce serait trop bien!
Sans rire si on n’est pas capable de se sauter les paragraphe soit même… et faire confiance à une IA pour récupérer que ce qui est intéressant.
De l’autre côté ce sont les auteurs qui doivent / vont être contents 😞
@Seb42 : Dans un film, ce qui est intéressant, c'est le chemin, l'histoire, la relation avec les persos, la mise en scène, la photographie .... Je pense que ce n'est pas comparable.
90% des articles ont une structure assez commune avec un 1er paragraphe de mise en contexte, puis un rappelle des faits, ensuite on expose le problème et enfin on traite du sujet.
Pour ma part, la synthèse de docs via des outils IA me fait gagner un temps fou. Intégrer cette fonction à un navigateur optimise encore ces actions. Pour travailler, c'est clairement une avancée.
Je précise que cela n'a pas changé mon rapport aux romans que je continue à lire 'classiquement'.
@ Seb42 : « finalement la trilogie du seigneurs des anneaux est trop longue en 10 minutes max on peut se le résumer quelle perte de temps. »
Dans ces films, la plus grosse partie des images est là juste pour proposer quelque chose à regarder pendant qu’on écoute la musique. 😉
(De toute façon, l’histoire on la connaît, on a déjà lu les bouquins.)
Pas pu lire votre propos trop long.
Une IA m’aidera à résumer les commentaires en « GNAGNA »
@Seb42
En même temps, les articles sont de plus en plus générés par IA, ce qui aboutit à de long articles ennuyeux avec un effet « attendez attendez la fin, vous allez voir ! » où on a l’impression d’être pris en otage pour rester sur la page le plus longtemps possible, l’info promise dans le titre étant cachée dans le dernier paragraphe.
Donc en bref, on va avoir une IA pour décrypter les articles écrits par les IA. Chouette.
@ezeta
L’étape d’après ça sera une IA qui commentera à notre place sur des forums et qui répondra aux commentaires d’autres utilisateurs dont les commentaires auront été postés par une IA aussi 😋
@cecile_aelita
Sur des articles générés par l’IA, référencés via l’IA et dont les pubs programmatiques présentes, également générées par l’IA se basent sur tout ce qui précède.
Et là les humains vaqueront enfin à faire des choses importantes comme retrouver et partager avec leurs proches, assister à un coucher de soleil et regarder les étoiles, rêver… bref des choses terriblement humaines et simples.
@vincentn
La fin est sympa ! Du coup plutôt que de laisser des IA débattrent entre elles sur des forums … autant enlever directement les forums et aller directement à l’étape où les humains font des choses simples et humaines ? 😉
Alors c’est sympa mais personnellement j’aime lire un article qui m’intéresse en entier, ça fait partie du plaisir !
Peut-être que je vieillis mais j’aime pas les premiers trucs amenés par l’IA (résumer des trucs etc).
J’ai l’impression qu’on nous prend un peu pour des gamins débiles… Se contenter d’un résumé d’article, ce n’est pas être informé correctement.
Surtout si la plupart des gens se contente de ça pour se forger une opinion. Cela dit, je pense qu'on va avoir un retour au "temps long" dans les années à venir. Parce que ça va devenir difficile de faire plus court et rapide sans casse.
Vu comment l'IA a des hallucinations, j'hésiterais à me servir d'un tel système.
Genre ce que fait déjà Arc à peu près ? C’est le premier navigateur qui m’a fait quitter Safari sans regrets.
Oui mais je crois qu'ils ont dit que les fonctions deviendraient payantes sur arc
Deux des trois invocations sont déjà vraiment au point sur Arc. Et la gestions des profiles est largement plus simple dans Arc.
Mais on peut se laisser surprendre avec un safari au top dans nos prochains OS
Edge et tout va mieux
Et ces cons de chrome toujours a la traîne
Si ils font payer pour Gemini intégré a Google/chrome, c'est décidé, je me barre
Nous verrons bien ce qu'il ressort réellement de ces rumeurs à la WWDC.
Revoir et élaguer le menu partage et regrouper les fonctions dans un menu dans l'omnibar serait en effet pas du luxe, tant la version actuelle est mal foutue.
Un résumé amélioré, pourquoi pas. Que ce soit sur une page ou un document ouvert, où, à la façon d'Arc ou Kagi, simplement en survolant ou en demandant sur le lien, sans l'ouvrir. Le problème c'est qu'une personne qui maitrise le sujet lira in fine le papier/ la page et qu'une personne qui ne le maitrise pas, ne ferra pas forcément confiance à ce résumé, qu'il soit à puces ou plus écrit, car source d'erreurs et d'hallucinations potentielles.
Mais imaginons que cette "Intelligent Search" extrait par exemple les entités nommées (personnes, lieux, organisations etc.), comprend le sens des mots et phrases (un exemple : "Paris tance Moscou") et permet soit d'avoir des précisions sur l'entité nommée en générant, via l'action d'une fenêtre contextuelle (une recherche et détections des données actuellement présente boostée à l'IA en fait) ou plus classiquement via un champ de recherche/prompt, un texte sourcé avec du contenu et des liens externes, pondéré par du contenu et des liens déjà visité auparavant, mais aussi avec du contenu et des liens internes vers les documents déjà présents sur sa machine.
Imaginons que cette "intelligent search" ne fonctionne pas uniquement sur la page au premier plan mais aussi sur l'ensemble ou une sélection d'onglets ouverts et présents dans Safari.
Ce serait déjà plus interessant et beaucoup plus utile et productif.
Et soyons fou, de demander de surveiller automatiquement cette entité nommée, expression, information… et de t'avertir en te notifiant à chaque qu'elle le retrouve dans les recherches que tu effectue dans Safari ou dans les pages que tu ouvres, sans parcourir manuellement tous les liens ou pages ouvertes.
Autre possibilité, en ajout des fonctionnalités concernant la protection des enfants sur le net, et je vois bien Apple se lancer dans ce genre de chose, cette recherche intelligente pourrait bloquer à la volée des pages ou masquer des mots, des images, des vidéos présents sur une page via un filtre parental déterminé et actionné par les parents.
L'une des choses que savent bien faire ces IA, c'est de transformer des éléments. On pourrait ainsi avoir la possibilité de transformer une liste sur une page en tableau et l'envoyer vers Numbers, un texte résumé en mindmap et envoyé dans FreeForm, etc.
Ou également, booster la fonction traduction en permettant, à la volée et sur demande, de convertir les mesures et les distances (pour passer en système métrique par exemple un texte écrit en anglais par un américain) ou les prix (en récupérant les cours actuels, en passant en euros constant pour des textes plus historiques, etc.).
La recherche visuelle existe déjà dans Safari, et cela fonctionne très bien. Cela s'appelle Visual Lookup. Et c'est utilisable tant dans Safari que via le Finder ou l'app photo bien évidemment.
Elle pourrait en effet être un peu plus fluide, mais surtout élargir les éléments reconnus au-delà des actuels, un poil limité (via les bases d'Apple ou d'autres sources via une API) et pourquoi pas s'interfacer avec la photothèque de l'app Photos.
Ainsi, on navigue dans Safari, on tombe sur une photo, Visual lookup reconnait ce bâtiment, cette oeuvre, cet animal, etc. te donne des éléments d'informations dessus voire sa localisation dans Maps et d'autres photos similaires comme ce qu'il propose actuellement; mais boosté à l'une des IA de ces nouveaux OS, il t'indique également que ce bâtiment, cette œuvre sont également présents dans ta photothèque, dans X photos prises à telles dates et reconnait également la personne présente devant ce bâtiment ou oeuvre, car également présente dans ta photothèque et en te proposant de l'enregistrer dans cette dernière avec une catégorisation, un remplissage des métadonnées et mots-clés et un rangement automatique dans le bon dossier ou en proposant d'envoyer un mail, un message… (car elle est dans tes contacts) directement à la personne reconnue pour partager l'image par exemple.
Ou autre possibilité, comme il est déjà capable de copier et détourer les sujets, demander directement dans Safari, en cliquant sur un des éléments présents sur cette photo, de retrouver et proposer cet élément ailleurs, dans d'autres photos, sur d'autres sites. Un Google lens amélioré en quelque sorte, mais plus anonymisé.
Bref, les possibilités et les usages pratiques ne manquent pas. Vraiment curieux de voir vers quelle direction Apple va s'orienter dans Safari et ailleurs dans ses systèmes d'exploitation.
C’est bien joli tout ça, mais qu’Apple d’abord:
1. Réintègre "tout sélectionner" qui a été retiré;
2. Que Safari se souvienne des préférences cookies (!);
3. Que les pop-ups apparaissent, car quelques fois ils sont invisibles et le site web est inutilisable.