Et si l’intelligence artificielle était déjà hors de contrôle ?

Publié le : mardi 9 janvier 2018
Commentaires : 51
Nombre de vues : 18 702
Source : letemps.ch
60 votes

Des scientifiques alertent : les algorithmes sont devenus si complexes que certaines machines prennent des décisions que l’humain ne parvient plus à expliquer. Les risques de dérives sont importants. Mais il n’est pas trop tard pour agir.

 

L’IA, ce sont des algorithmes extrêmement puissants, capables de travailler avec des bases de données gigantesques pour apprendre, et prendre ensuite les décisions les plus pertinentes possible. Et si la créature échappait au créateur ?

C’est l’un des cauchemars des ingénieurs de la NASA. L’un de leur rovers à six roues explore la surface de Mars en mode autonome. Soudain, le véhicule se dirige vers la droite, longe une falaise, marque un temps d’arrêt puis se jette dans le vide et s’écrase 400 mètres plus bas. À 70 millions de kilomètres de là, à Houston, les spécialistes de la NASA sont effondrés. Plus rien ne peut sauver une mission qui aura coûté plus d’un milliard de dollars. Le rover, équipé d’un système d’intelligence artificielle, a pris des décisions qu’ils ne peuvent pas expliquer.

La NASA, qui utilise l’intelligence artificielle (IA) tant pour piloter ses robots que pour analyser des millions de photos de l’espace, tente de garder le contrôle de cette technologie. Mais le défi est immense. Et de plus en plus de scientifiques et d’ingénieurs s’alarment : aujourd’hui déjà, il y a un risque que l’IA échappe à leur contrôle. Et que personne ne soit capable d’expliquer comment un système est parvenu à une décision.

 

« S’en préoccuper immédiatement »

« On ne parle pas forcément de robots tueurs qui se retourneraient contre les humains et les extermineraient. On parle de technologies qui sont installées dans des voitures, des smartphones ou des ordinateurs. C’est extrêmement concret et il faut s’en préoccuper immédiatement », avertit Rachid Guerraoui, directeur du Laboratoire de programmation distribuée de l’EPFL.

Il y a un mois, le chercheur, avec trois membres de son laboratoire, présentait leur dernière trouvaille à la conférence « Neural Information Processing Systems » de Long Beach, en Californie – la réunion la plus pointue sur l’IA. Devant notamment des ingénieurs de la NASA, ils ont dévoilé une solution pour tenter de garder le contrôle sur cette technologie.

[...]

« Aujourd’hui déjà, des systèmes d’IA détectent lorsqu’un humain tente de modifier leur comportement et font parfois tout pour rejeter cette intervention et la contourner si elle entre en conflit avec l’objectif initial de l’IA. Il faut agir de manière subtile et rapide pour que l’IA croie qu’elle prend elle-même toutes les décisions. Et ensuite effacer les traces d’intervention humaine », poursuit le professeur.

Ce qui semble de la pure science-fiction est donc réalité. Des systèmes d’IA prennent des décisions propres en se nourrissant de bases de données gigantesques. Le phénomène est massif. Mais pas totalement nouveau. « L’intelligence artificielle est un terme à la mode, mais elle trouve ses racines dans les années 1960 déjà avec les systèmes experts. Aujourd’hui, la puissance de calcul, les capacités de mémoire et les masses de données amplifient de manière extraordinaire ce phénomène », détaille Hervé Bourlard, directeur de l’institut de recherche Idiap de Martigny.

 

Neurones artificiels

Actuellement, ce sont des réseaux de plus en plus gros de neurones artificiels qui sont créés. De quoi s’agit-il ?

« L’idée est de tenter de répliquer, de manière informatique, le fonctionnement du cerveau, poursuit Hervé Bourlard. Attention, nous n’allons jamais pouvoir copier le système de milliards de neurones du cerveau, qui est d’une incroyable complexité. Mais nous sommes déjà capables de créer des réseaux de neurones artificiels dotés de plusieurs couches hiérarchiques, via des systèmes de calculs très compliqués. »

Ces neurones ont été entraînés à prendre de bonnes décisions sur la base de bases de données dont ils se nourrissent en permanence – on appelle cela le « machine learning ». Ces neurones sont aussi capables de s’entraider en cas de problème.

Lire l’article entier sur letemps.ch

Échapper aux manipulations transhumanistes
avec Kontre Kulture :

Mythes et réalités de la science

La science, par l’entremise de son enfant la technologie, prend de plus en plus de place dans nos vies. Mais dans un monde où le retour sur investissement doit être rapide, quelle est la place de la recherche fondamentale, sans autre but que de comprendre le monde ? Celle de la curiosité pure qui pousse le chercheur dans des voies inexplorées, un peu folles parfois, très fécondes souvent, sans (...)

Neuro-pirates

Réflexions sur l’ingénierie sociale
La première question qui traverse ce recueil de textes est : « Comment pirater un cerveau ? » La seconde, essentielle, suit alors immédiatement : « Comment s’en protéger ? » Car le piratage des cerveaux par l’ingénierie sociale et d’autres procédés est déjà une réalité, et les cerveaux piratés sont les nôtres. Ce « neuro-piratage » peut consister à agir sur le hardware, c’est-à-dire sur le substrat biologique (...)

Pour tout savoir du transhumanisme, voir sur E&R :

Laurent Alexandre a-t-il besoin d’un cerveau artificiel ?

Un démontage en règle de la rhétorique de ce VRP du transhumanisme
On peut penser ce qu’on veut de Laurent Alexandre, il n’est jamais décevant. En même temps un chirurgien urologue, diplômé de Science Po, d’HEC et de l’ENA, spécialisé dans les questions de transhumanisme et d’intelligence artificielle avec une mise en marché façon guerre hybride à mi-chemin entre Jancovici pour le côté rationnel implacable et Attali pour le côté prophète de l’Apocalypse, il faut avouer que (...)

Transhumanisme : la fin de l’espèce humaine – Conférence du Dr Dickès à Lille

Le 25 novembre 2016, l’équipe d’E&R Lille accueillait le Dr Dickès pour une conférence intitulée « Transhumanisme : la fin de l’espèce humaine ». Pour ne rien rater des prochains événements dans la région, abonnez-vous à la page Facebook d’E&R Lille :

Peut-on vraiment relier les cerveaux aux machines ? Le projet d’Elon Musk vu par un neuroscientifique

Elon Musk planche sur un nouveau projet consistant à concevoir un cordon cortical pour relier le cerveau humain à une machine. Claude Touzet, spécialiste de l’apprentissage automatique et biologique et responsable d’un laboratoire en neurosciences intégratives et adaptatives, apporte son éclairage. La découverte, fin mars, de l’existence du projet Neuralink a d’ores et déjà fait couler beaucoup (...)

Transhumanisme : la fin programmée de notre Humanité

"On va vers deux espèces distinctes : les Augmentés, et les Naturels"
L’homme augmenté fait rêver les uns, cauchemarder les autres. La question n’est pas de savoir si nous devons accepter le transhumanisme ou pas, puisque le transhumanisme est déjà là, insidieusement ou ouvertement. Des hommes en profitent déjà, notamment dans le domaine médical. « Un simple problème de câblage nous séparerait d’un homme à la mémoire augmentée ». Bienvenue dans un monde ouvert à tous les (...)

Medecine - L’immense souffrance de ceux qui vont perdre l’espoir de guérir, par le Dr Jean-Pierre Dickès

L’Etat français vient de se désengager en partie sur le plan financier de la recherche sur les maladies rares dites « orphelines » et notamment génétiques. Ce n’est pas par hasard. Ceci est dû aux erreurs stratégiques de l’Association de la lutte contre la Myopathie (AFM) qui bénéficie à la fois de l’argent du contribuable et celle des donateurs de fin d’année. L’AFM a orienté une grande partie des (...)
51 commentaires
Alerter

AVERTISSEMENT !

Eu égard au climat délétère actuel, nous ne validerons plus aucun commentaire ne respectant pas de manière stricte la charte E&R :

  • Aucun message à caractère raciste ou contrevenant à la loi
  • Aucun appel à la violence ou à la haine, ni d'insultes
  • Commentaire rédigé en bon français et sans fautes d'orthographe

Quoi qu'il advienne, les modérateurs n'auront en aucune manière à justifier leurs décisions.

Tous les commentaires appartiennent à leurs auteurs respectifs et ne sauraient engager la responsabilité de l'association Egalité & Réconciliation ou ses représentants.

Suivre les commentaires sur cet article
Afficher les commentaires précédents
Le 9 janvier 2018 à 20:47 par Triboutin
#1876727

Ce que je suis pressé de voir, c’est la réaction outrée des ingénieurs qui auront pondu des robots tueurs hors de contrôle et/ou manipulés à des fins de guerre.

La même réaction que pour la bombe atomique, "Si j’avais su que mes travaux seraient utilisés pour ça, je ne l’aurais pas fait". And my ass, it is chicken ?

Le 9 janvier 2018 à 20:48 par K6
#1876728

Plus d’élec Et c’est réglé

Le 9 janvier 2018 à 20:49 par nerval
#1876730

Je comprends pas bien le foin que l’on fait sur la super méga-giga géniale IA. Ne suffit-il pas de couper le courant pour que la Déesse IA ferme son clapet ? Ou n’ai-je rien compris au film ? N’est-il pas halucinant que l’on ne craigne pas (plus !) le Créateur de toute chose, par contre, on se prend à avoir peur de l’IA. Est-ce moi qui suis folle ou tous ces pseudo-chercheurs de merde ?!

Le 9 janvier 2018 à 23:12 par Mich
#1876806

Il y a beaucoup de confusion entre IA et algorithme. Il ne me semble pas dans ce qui est dit, hormis d’imaginer dans ce qui n’est pas dit, qu’il s’agisse à proprement parler d’une vraie IA. Il n’y a pas une conscience dans ces "IA", et elles ne font qu’"apprendre" (le mot est fort) ce qu’on leur fait ingurgiter, un peu comme un algorithme : il fait ce qu’il lui est dit de faire. Les IA n’étant pas consciente elles sont incapables d’apprendre seule, donc elles ne sont pas à proprement parler des IA au sens strict. Ce sont des programmes évolués, ni tout à fait algorithmique, ni tout à fait neuronaux (simulation de réseau de neurones). On est donc encore assez loin d’une vraie IA. A noter que le "machine learning" est la base classique d’apprentissage des réseaux neuronaux complexes, où on y modifie les étapes d’analyses pour avoir en sortie quelque chose de cohérent, mais il existe maintenant le "deep learning", où le process du réseau neuronal est en gros "simplifié" (certaines étapes du machine learning sont court-circuités) mais on y fait analyser ce réseau neuronal une quantité astronomique de données pour voir ce que cela donne. C’est ce qu’a déjà fait Google en matérialisant ce que "pense" un super-calculateur en deep learning : https://1.bp.blogspot.com/-XZ0i0zXOhQk/VYIXdyIL9kI/AAAAAAAAAmQ/UbA6j41w28o/s1600/building-dreams.png

Le 10 janvier 2018 à 02:28 par JP
#1876873

@Mich Les IA n’étant pas consciente elles sont incapables d’apprendre seule,

Je suis globalement d’accord avec vous. Mais pourriez-vous dire ce que vous entendez précisément, concrètement, lorsque vous dites "apprendre seule" et pourquoi cela exigerait que l’IA soit consciente.

Le 10 janvier 2018 à 10:45 par Lelutin
#1876957

Un ventriloque qui fait parler une poupée donne l’illusion que la poupée est vivante, pense et ressent. Tandis que tout le monde sait que la poupée n’est pas vivante car c’est un objet outil.

Le développeur donne l’illusion que la machine est vivante également. C’est plus impressionnant qu’une poupée mais cela reste un objet outil.

Cela repond-il à votre question ?

La conscience animale et humaine qui est plus développé ne peut-être enseignée car c’est lié au monde biologique animal, une plante ne pense pas, une pierre ne pense pas.

Il est impossible qu’une pierre dispose d’une conscience. Donc votre PlayStation ne développera jamais de conscience.

Le 10 janvier 2018 à 12:18 par JP
#1877001

@ Lelutin Marci, mais vous avez argumenté comme si ma question avait concerné les conditions d’existence de la conscience. Mais ce que je demandais, c’est pourquoi la capacité d’apprendre seule serait réservée à ce qui possède une conscience.

Le 10 janvier 2018 à 20:28 par Lelutin
#1877350

Pourquoi une machine ne pense pas ? A moins que l’on lui apprenne ce que c’est de penser de manière imagée et non linéaire et d’y associer des émotions et un ensemble d’autres facteurs qui ne peuvent s’exprimer sous forme numérique mais hormonal, sans compter les innombrables facteurs liés à la pensée c’est impossible sans disposer d’un appareil biologique complet. Ne pas oublier ce que disaient les anciens, l’esprit, l’âme (la conscience ?) Et le corps ne font qu’un et sont indissociables.

C’est une question à laquelle un anatomiste et un biologiste pourraient mieux répondre avec l’aide d’un expert en neuro-sciences. Sans coscience, aucune réflexion sur l’environnement et donc aucun effort d’adaptation car aucun besoin. Les minéraux sont des objets non vivants et éternels donc ils n’ont pas l’utilité de développer quoi que ce soit pour exister. Tandis qu’une cellule vivante n’est pas éternelle et cherche donc un moyen d’exister en s’adaptant et en se reproduisant. A mon avis, la réponse scientifique devrait se rapprocher de ce qui est ci-dessus.

Pour résumer, l’appareil fait de minéraux de dispose pas de conscience, sans cela, il n’y a aucune auto-réflexion spontanée et donc aucune introspection puisqu’il n’y a aycun besoin à une pierre d’être consciente

Si l’appareil fait une recherche sur la toile, ou calcul une formule, ou s’allume et s’éteint c’est parce qu’on lui a ordonné.

Une pierre ne pense pas, si je lui met des roues et une micro-puce, elle ne fera que ce que je lui dicte de faire.

Pour exemple, le plus puissant des ordinateurs existant devrait selon la théorie d’Alexandre avoir atteint la synchronicité depuis un moment déjà puisque les super ordinateurs disposent d’un niveau de calcul hors du commun et inégalé et pourtant ces machines ne pensent pas.

En conclusion, sans rentrer dans des algorithmes complexes dans lesquelles il m’était demandé de créer en cours et qui était impossible, comme créer le hasard, un appareil électronique n’effectue aucun calcul sans que l’on lui ai apprit car il ne dispose pas d’un cerveau reptilien, mamalien et du néo-cortex. Donc il lui est impossible sans une biologie complète de saisir le sens d’une émotion qui est importante dans le développement animal et surtout humain. C’est grâce à l’ adrénaline et notre système cardiaque que nous sommes capable de fuir un prédateur ou de tomber amoureux et de fonder un foyer. Et pourtant il n’y a aucun algorithme dedans, c’est de la chimie pure.

Le 11 janvier 2018 à 17:57 par JP
#1877970

Je crois avoir peut être compris notre malentendu. Pour vous, apprendre seul, c’est forcément faire comme un cerveau humain qui apprend seul. Et pour vous cela suppose automatiquement pensée, et donc vous considérez la pensée consciente, et logiquement vous concluez sur la nécessité de la conscience. Pour ma part, je crois savoir que notre cerveau a aussi toute une activité dont nous ne sommes pas conscients. Nous apprenons beaucoup de choses par le simple effet de la répétition d’une expérience, sans avoir pour autant mis en branle un processus de réflexion consciente. Tout le monde n’étant pas forcément convaincu de cela, je n’insisterai pas avec cet argument. Il y en a un autre : Considérez une IA avec suffisamment de puissance de calcul, et suffisamment de datas qui lui sont enfournées. Cela suffit pour qu’après avoir ingurgité les datas, l’IA ai augmenté ses capacités d’analyse ou de discrimination. Et bien, dans ce cas, il y a eu apprentissage, sans intervention humaine (mis à part le remplissage en datas). La machine a appris seule. Et par ailleurs nous sommes d’accord qu’une telle machine n’a pas de conscience.

Voila pourquoi je demandais la raison pour laquelle "apprendre seule" aurait nécessité la conscience.

Le 13 janvier 2018 à 23:36 par Lelutin
#1879615

Jp

Apprendre par répétition signigie conscience ou inconscience dans l’acte en soi. L’organisme animal est doté de réflexe inné et qui s’adapte suite à des répétitions exécutées de manière conscientes ou non. Dans tous les cas, cela signifie que s’il y a adaptation c’est qu’il y a un besoin de survie derrière et qui dans ce cas-ci provient du cerveau reptilien (inconscience).

Un ordinateur fait de minéraux n’a pas de cerveau reptilien et donc n’a aucune utilité d’apprendre seul par lui-même sauf si on lui dit de le faire car ce n’est pas un être vivant. Si on lui dicte d’expérimenter une situation pour trouver une solution en lui fournissant les formules pour y arriver, vous n’arriverez qu’à immiter un être vivant et pas en produire un. Il reste un outil développé rien de plus et se limitera à ça.

Dans tous les cas, il nous faut un biologiste, un anatomiste, un spécialiste en neurosciences , un zoologiste et des mathématiciens de haut vol pour arriver à étudier la question, voire même un anthropologue pour arriver à se rapprocher d’une réponse scientifique car c’est un objectif éternel pour certains d’entres-nous de comprendre ce que c’est la conscience et c’est une mission vraiment très difficile.

Le 10 janvier 2018 à 00:38 par Tom France
#1876847

En même temps, il y a de plus en plus d’abrutis sur cette planète, notamment dans cette période d’effondrement de l’occident ! Ce n’est donc pas pour rien que certains couillons cherchent à remplacer tout cela par de l’intelligence artificielle, il faut bien en trouver quelque part de l’intelligence !

Le 10 janvier 2018 à 03:34 par Aiguiseur de guillotines
#1876880

Ben.. y’a qu’à débrancher l’bazar.

Le 10 janvier 2018 à 08:57 par jalon
#1876914

Marrant comment les gens embrayent sur ’’l’intelligence artificielle’’ en parlant du Mars-rover alors que l’on a jamais été sur la Lune (et jamais envoyé de robots sur Mars). C’est juste un technicien du studio de la Nasa qui s’est tapé une nana sur la console de commande et oups, le bidule à 4 roues s’est crashé dans le désert du Nevada. Il y a un épisode là-dessus dans la série TV "The Big Bang Théorie’’. C’est tout de la fiction.

Revenez sur Terre les gars, ailleurs, ça n’a jamais existé.

Le 10 janvier 2018 à 16:04 par Domino
#1877166

Ne pas confondre intelligence logique, intelligence créatrice, intelligence critique... Seule la première peut aller très loin en utilisant des bases de données gigantesques, mais... finies. Je croirai que la machine peut remplacer l’homme le jour où un traducteur sur internet me donnera un texte en français parfait. Maintenant les apprentis sorciers peuvent en effet se brûler les doigts avec un incendie qu’ils ont déclenché...

Le 10 janvier 2018 à 16:16 par L’oiseau picheboule
#1877175

2001 Odyssée de l’Espace "Ouvre la porte Hal ! " "Je ne peux pas, je suis désolé Dave , je sais que tu veux me détruire "

Le 10 janvier 2018 à 22:05 par Castanietzsche
#1877434

Il faut écouter Lê de la chaîne youtube Science4All sur le sujet, il a fait une série de vidéo sur la démocratie et il en commence une sur l’intelligence artificielle. C’est passionnant et très bien vulgarisé. C’est francophone et en format assez court.