La voix de sa fille et ses sanglots l’ont bouleversée quand un homme l’a appelée pour lui demander une rançon. Mais les intonations étaient reproduites à la perfection par une intelligence artificielle (IA) pour une tentative d’arnaque, un sujet d’inquiétude qui émerge avec cette technologie en plein boom.

Le plus gros danger des IA, estiment les experts, est leur capacité à presque abolir la démarcation entre réel et fiction, fournissant aux criminels des outils efficaces et peu onéreux.La voix de sa fille et ses sanglots l’ont bouleversée quand un homme l’a appelée pour lui demander une rançon. Mais les intonations étaient reproduites à la perfection par une intelligence artificielle (IA) pour une tentative d’arnaque, un sujet d’inquiétude qui émerge avec cette technologie en plein boom.

Le plus gros danger des IA, estiment les experts, est leur capacité à presque abolir la démarcation entre réel et fiction, fournissant aux criminels des outils efficaces et peu onéreux.

La séquence, qui a rapidement pris fin lorsque Jennifer DeStefano est parvenue à joindre sa fille, fait désormais l’objet d’une enquête et a mis en lumière le potentiel dévoiement de l’IA par les cybercriminels.
"Des deepfakes convaincants"

"La réplication de voix par IA, désormais quasi impossible à distinguer de l’élocution humaine, permet aux personnes mal intentionnées comme les arnaqueurs de soutirer plus efficacement des informations et de l’argent aux victimes", explique à l’AFP Wasim Khaled, PDG de Blackbird.AI.

De nombreuses applications, dont beaucoup sont gratuites et disponibles en ligne, permettent de répliquer par l’intelligence artificielle la vraie voix d’une personne à partir d’un court enregistrement. Celui-ci peut aisément être extrait depuis des contenus postés en ligne. (...)

Selon un sondage effectué auprès de 7.000 personnes dans neuf pays dont les Etats-Unis, une personne sur quatre a été la cible d’une tentative d’arnaque à la voix répliquée par IA, ou connait quelqu’un dans ce cas. (...)

Les autorités américaines ont récemment mis en garde contre la popularité croissante de l’"arnaque au grand-parent".

"Vous recevez un appel, une voix paniquée au bout du fil, c’est votre petit-fils. Il dit qu’il a de gros ennuis, il a eu un accident de voiture et s’est retrouvé en détention. Mais vous pouvez l’aider en envoyant de l’argent", a décrit en guise d’avertissement l’agence américaine de protection des consommateurs (FTC). (...)

Plus tôt cette année, la startup ElevenLabs a dû admettre qu’il était possible de faire un mauvais usage de son outil de réplication de voix par IA, après que des utilisateurs eurent posté en ligne un deepfake de l’actrice Emma Watson lisant "Mein Kampf".

"Nous approchons rapidement du moment où nous ne pourrons plus faire confiance aux contenus sur internet et où nous devrons faire appel à de nouvelles technologies pour s’assurer que la personne à qui l’on pense s’adresser (au téléphone) est réellement la personne à qui l’on parle" (...)