SlideShare une entreprise Scribd logo
Ahmed BENABDALLAH
M1 E-BUSINESS EN LIGNE
Génie Algorithmique
•
•
•
•
•
L'algorithme du Recuit simule
Les problèmes NP-complets
d'optimisation combinatoire
sont caractérisés parune
complexité.
Le recuit Simulé « Simulated
Annealing » est une meta-
heuristique destinée à résoudre
au mieux les problèmes dits
d’optimisation difficile
Evite le piégeage dans les minima locaux de la fonction
objectif
L'algorithme du Recuit simule
Recuit thermique
Recuit thermique
Recuit thermique
Recuit thermique
Recuit thermique et
recuit simulé
L'algorithme du Recuit simule
Principe
Principe
L’algorithme de Metropolis
Dans l'algorithme de Metropolis, on part d'une
configuration donnée, et on lui fait subir une
modification aléatoire. Si cette modification fait
diminuer la fonction objectif (ou énergie du système),
elle est directement acceptée ;
Sinon, elle n'est acceptée qu'avec une probabilité égale
à 𝑒𝑥𝑝(∆𝐸/𝑇) (avec E=énergie, et T=température), cette
règle est appelée critère de Metropolis.
Principe
L’algorithme recuit simulé
Le recuit simulé applique itérativement l’algorithme de
Metropolis, pour engendrer une séquence de configurations
qui tendent vers l'équilibre thermodynamique :
1) Choisir une température de départ T=T0 et une solution
initiale S=S0.
2) générer une solution aléatoire dans le voisinage de la
solution actuelle.
3) comparer les deux solutions selon le critère de Metropolis.
4) répéter 2 et 3 jusqu'a ce que l'équilibre statistique soit
atteint.
5) décroitre la température et répéter jusqu'a ce que le
système soit gelé.
Principe
Dans un premier temps, T étant généralement choisi très
grand, beaucoup de solutions - même celles dégradant la
valeur de f - sont acceptées, et l'algorithme équivaut à une
visite aléatoire de l'espace des solutions. Mais à mesure que
la température baisse, la plupart des solutions augmentant
l'énergie sont refusés, et l'algorithme se ramène à une
amélioration itérative classique.
A température intermédiaire, l'algorithme autorise de temps
en temps des transformations qui dégradent la fonction
objectif. Il laisse ainsi une chance au système de s'extraire
d'un minima local.
Principe
Notons aussi que si la température est égale à 0, seules les
solutions optimisant f sont acceptées. L'algorithme se
comportera donc comme la méthode de la descente du
gradient.
Principe
Etat initial de l'algorithme
La solution initiale peut être prise au hasard dans
l'espace des solutions possibles, elle peut aussi être
générée par une heuristique classique, telle que la
descente du gradient ou l’algorithme glouton (dans le
cas du voyageur du commerce).
La température initiale doit être assez élevée, car c'est
elle qui fixe la probabilité d'accepter ou de refuser les
solutions défavorables à l'optimisation de la fonction f.
Principe
Variation de la temperature
Deux approches sont possibles pour décroitre la
température :
• Décroissance par paliers :
Pour chaque valeur de la température, on itère
l'algorithme de Metropolis jusqu'a atteindre un
équilibre statistique, puis on diminue la temperature.
• Décroissance continue :
On fait baisser la température d'une façon continue, le
plus courant est d'utiliser la loi suivante : 𝑇𝑖+1 = 𝛼. 𝑇𝑖 /
𝛼 < 1 (en génral 𝛼 = 0.9 à 0.99)
Avantages et inconvénients
Les avantages:
• Facile à implémenter.
• Donne généralement de bonnes
solutions par rapport aux algorithmes de
recherche classiques.
Avantages et inconvénients
Les inconvénients:
• Très coûteuse en temps de calcul.
• La difficulté de déterminer la
température initiale.
• Non-convergence vers l'optimum peut
se rencontrer assez vite.
• §L'impossibilité de savoir si la
solution trouvée est optimale.
Domaines d’applications :
• La conception des circuits intégrés (Kirkpatrick, et
al., 1988)(problème de placement et de
répartition)
• Le routage des paquets dans les réseaux
• La segmentation d'images
• Le problème du voyageur de commerce
• Et, le problème du sac à dos
L'algorithme du Recuit simule
Application
Le problème du voyageur
de commerce :
Le but est alors de trouver le circuit hamiltonien de
coût minimal dans un graphe.
L’énergie représentera la distance totale à parcourir,
et un état du système représentera le chemin entre
les villes.
L’algorithme va donc tenter de minimiser la longueur
totale du chemin, en modifiant l’ordre des villes à
parcourir.
Application
Un ensemble de villes (noeuds) reliés entre
eux par des routes (arcs)
Exemple :
Application
Exemple :
Application
Exemple :
Le résultat obtenu en échangeant les sommets 2 et 3, la
distance totale a augmenté. Pour une heuristique classique
cette est solution est rejetée car la distance doit être
minimisée, mais le recuit simulé pourra l’accepter si la
température est encore élevée, et cette solution qui est «
mauvaise » par rapport à la première va lui permettre de
trouver une solution meilleure :
L'algorithme du Recuit simule
Nous avons vu que les heuristiques classiques
n'étaient pas très satisfaisantes pour résoudre les
problèmes d’optimisation, car les solutions
générées n’étaient pas de bonne qualité.
L’intelligence artificielle s’est donc tournée vers la
nature pour créer de nouvelles méthodes : plus
générales et plus efficaces.
L'algorithme du Recuit simule
QUESTIONS &
RÉPONSES
 M. Gourgand, N. Grangeon et S.Norre ; « Problèmes D’ordonnancement Dans
Les Systèmes De Production De Type Flow-Shop Hybride En Contexte
Déterministe » ; J3eA, Journal sur l’enseignement des sciences et technologies de
l’information et des systèmes ; EDP Sciences, 2003.
 Algorithmes de minimisation Sébastien Charnoz & Adrian Daerr Université Paris
7 Denis Diderot CEA Sacla.
 Méthode du recuit simulé [Rapport] : complément TD/TP Recherche stochastique
/ aut. Olivier D.. – 2001.
 Optimization by Simulated Annealing [Article] / aut. Kirkpatrick, Gelatt et Vecchi
// Science,New Series. - 13 Mai 1988. - 4598. - pp. 671-680.
 Simulated Annealing [Rapport] / aut. LIACS / Natural Computing Group; Leiden
University. -2009.

Contenu connexe

PDF
Chapitre 2 le recuit simulé
PDF
PFE Master.pdf
PDF
Algorithme génétique
PDF
Solving Traveling Salesman problem using genetic algorithms, implementation i...
PPTX
A star
PPTX
Réseaux des neurones
PPTX
Présentation pfe
PPT
Clustering
Chapitre 2 le recuit simulé
PFE Master.pdf
Algorithme génétique
Solving Traveling Salesman problem using genetic algorithms, implementation i...
A star
Réseaux des neurones
Présentation pfe
Clustering

Tendances (20)

PDF
Chapitre 4 heuristiques et méta heuristiques
PDF
Regression logistque
PDF
Le problème de voyageur de commerce: algorithme génétique
PDF
Chapitre 3 la recherche tabou
PDF
Chapitre iii récursivité et paradigme diviser pour régner
PPTX
Algorithme Colonie de fourmis
PDF
Quelques points sur les métaheuristiques
PDF
Chapitre 3 NP-complétude
PDF
Chapitre 2 complexité
PPTX
Présentation sur le Data Mining
PDF
Chapitre ii complexité et optimalité
PPTX
Recherche à voisinage variable
PDF
Chapitre v algorithmes gloutons
PPTX
L’optimisation par essaims de particules
PPTX
Smart house Project - v1.1 - cahier de charge fonctionnel
PDF
Data mining - Introduction générale
PDF
Cours algorithmique et complexite complet
PPTX
Soutenance de stage Ingénieur
PPTX
Introduction au M.E.S
PDF
Chapitre 3 _Conception et analyse d’algorithme-DPR.pdf
Chapitre 4 heuristiques et méta heuristiques
Regression logistque
Le problème de voyageur de commerce: algorithme génétique
Chapitre 3 la recherche tabou
Chapitre iii récursivité et paradigme diviser pour régner
Algorithme Colonie de fourmis
Quelques points sur les métaheuristiques
Chapitre 3 NP-complétude
Chapitre 2 complexité
Présentation sur le Data Mining
Chapitre ii complexité et optimalité
Recherche à voisinage variable
Chapitre v algorithmes gloutons
L’optimisation par essaims de particules
Smart house Project - v1.1 - cahier de charge fonctionnel
Data mining - Introduction générale
Cours algorithmique et complexite complet
Soutenance de stage Ingénieur
Introduction au M.E.S
Chapitre 3 _Conception et analyse d’algorithme-DPR.pdf
Publicité

Dernier (11)

PDF
famille ................................
PDF
Arouna Toure - Senior Ingénieur Logiciel Et Chef De Produit
PDF
UX DESIGN presentation canva plan et slides
PPTX
Chapitre7-java------------------ Exception.pptx
PDF
Proposition de contenu pouvant résoudre les problèmes détectés à partir des é...
PDF
ENSEIGNEMENT/APPRENTISSAGE ET COMPETENCE
PPT
Icc courant de court circuit explication
PPT
Présentation de l’Analyse et Concepti SI
PDF
Regles sur la gestion de l’Eclairage public
PPTX
mon_expose_de_geophysique_disposotif_de_wener.pptx
PPTX
mon_expose_de_geophysique_dispositif_de_schlumberger.pptx
famille ................................
Arouna Toure - Senior Ingénieur Logiciel Et Chef De Produit
UX DESIGN presentation canva plan et slides
Chapitre7-java------------------ Exception.pptx
Proposition de contenu pouvant résoudre les problèmes détectés à partir des é...
ENSEIGNEMENT/APPRENTISSAGE ET COMPETENCE
Icc courant de court circuit explication
Présentation de l’Analyse et Concepti SI
Regles sur la gestion de l’Eclairage public
mon_expose_de_geophysique_disposotif_de_wener.pptx
mon_expose_de_geophysique_dispositif_de_schlumberger.pptx
Publicité

L'algorithme du Recuit simule

  • 1. Ahmed BENABDALLAH M1 E-BUSINESS EN LIGNE Génie Algorithmique
  • 4. Les problèmes NP-complets d'optimisation combinatoire sont caractérisés parune complexité.
  • 5. Le recuit Simulé « Simulated Annealing » est une meta- heuristique destinée à résoudre au mieux les problèmes dits d’optimisation difficile
  • 6. Evite le piégeage dans les minima locaux de la fonction objectif
  • 15. Principe L’algorithme de Metropolis Dans l'algorithme de Metropolis, on part d'une configuration donnée, et on lui fait subir une modification aléatoire. Si cette modification fait diminuer la fonction objectif (ou énergie du système), elle est directement acceptée ; Sinon, elle n'est acceptée qu'avec une probabilité égale à 𝑒𝑥𝑝(∆𝐸/𝑇) (avec E=énergie, et T=température), cette règle est appelée critère de Metropolis.
  • 16. Principe L’algorithme recuit simulé Le recuit simulé applique itérativement l’algorithme de Metropolis, pour engendrer une séquence de configurations qui tendent vers l'équilibre thermodynamique : 1) Choisir une température de départ T=T0 et une solution initiale S=S0. 2) générer une solution aléatoire dans le voisinage de la solution actuelle. 3) comparer les deux solutions selon le critère de Metropolis. 4) répéter 2 et 3 jusqu'a ce que l'équilibre statistique soit atteint. 5) décroitre la température et répéter jusqu'a ce que le système soit gelé.
  • 17. Principe Dans un premier temps, T étant généralement choisi très grand, beaucoup de solutions - même celles dégradant la valeur de f - sont acceptées, et l'algorithme équivaut à une visite aléatoire de l'espace des solutions. Mais à mesure que la température baisse, la plupart des solutions augmentant l'énergie sont refusés, et l'algorithme se ramène à une amélioration itérative classique. A température intermédiaire, l'algorithme autorise de temps en temps des transformations qui dégradent la fonction objectif. Il laisse ainsi une chance au système de s'extraire d'un minima local.
  • 18. Principe Notons aussi que si la température est égale à 0, seules les solutions optimisant f sont acceptées. L'algorithme se comportera donc comme la méthode de la descente du gradient.
  • 19. Principe Etat initial de l'algorithme La solution initiale peut être prise au hasard dans l'espace des solutions possibles, elle peut aussi être générée par une heuristique classique, telle que la descente du gradient ou l’algorithme glouton (dans le cas du voyageur du commerce). La température initiale doit être assez élevée, car c'est elle qui fixe la probabilité d'accepter ou de refuser les solutions défavorables à l'optimisation de la fonction f.
  • 20. Principe Variation de la temperature Deux approches sont possibles pour décroitre la température : • Décroissance par paliers : Pour chaque valeur de la température, on itère l'algorithme de Metropolis jusqu'a atteindre un équilibre statistique, puis on diminue la temperature. • Décroissance continue : On fait baisser la température d'une façon continue, le plus courant est d'utiliser la loi suivante : 𝑇𝑖+1 = 𝛼. 𝑇𝑖 / 𝛼 < 1 (en génral 𝛼 = 0.9 à 0.99)
  • 21. Avantages et inconvénients Les avantages: • Facile à implémenter. • Donne généralement de bonnes solutions par rapport aux algorithmes de recherche classiques.
  • 22. Avantages et inconvénients Les inconvénients: • Très coûteuse en temps de calcul. • La difficulté de déterminer la température initiale. • Non-convergence vers l'optimum peut se rencontrer assez vite. • §L'impossibilité de savoir si la solution trouvée est optimale.
  • 23. Domaines d’applications : • La conception des circuits intégrés (Kirkpatrick, et al., 1988)(problème de placement et de répartition) • Le routage des paquets dans les réseaux • La segmentation d'images • Le problème du voyageur de commerce • Et, le problème du sac à dos
  • 25. Application Le problème du voyageur de commerce : Le but est alors de trouver le circuit hamiltonien de coût minimal dans un graphe. L’énergie représentera la distance totale à parcourir, et un état du système représentera le chemin entre les villes. L’algorithme va donc tenter de minimiser la longueur totale du chemin, en modifiant l’ordre des villes à parcourir.
  • 26. Application Un ensemble de villes (noeuds) reliés entre eux par des routes (arcs) Exemple :
  • 28. Application Exemple : Le résultat obtenu en échangeant les sommets 2 et 3, la distance totale a augmenté. Pour une heuristique classique cette est solution est rejetée car la distance doit être minimisée, mais le recuit simulé pourra l’accepter si la température est encore élevée, et cette solution qui est « mauvaise » par rapport à la première va lui permettre de trouver une solution meilleure :
  • 30. Nous avons vu que les heuristiques classiques n'étaient pas très satisfaisantes pour résoudre les problèmes d’optimisation, car les solutions générées n’étaient pas de bonne qualité. L’intelligence artificielle s’est donc tournée vers la nature pour créer de nouvelles méthodes : plus générales et plus efficaces.
  • 33.  M. Gourgand, N. Grangeon et S.Norre ; « Problèmes D’ordonnancement Dans Les Systèmes De Production De Type Flow-Shop Hybride En Contexte Déterministe » ; J3eA, Journal sur l’enseignement des sciences et technologies de l’information et des systèmes ; EDP Sciences, 2003.  Algorithmes de minimisation Sébastien Charnoz & Adrian Daerr Université Paris 7 Denis Diderot CEA Sacla.  Méthode du recuit simulé [Rapport] : complément TD/TP Recherche stochastique / aut. Olivier D.. – 2001.  Optimization by Simulated Annealing [Article] / aut. Kirkpatrick, Gelatt et Vecchi // Science,New Series. - 13 Mai 1988. - 4598. - pp. 671-680.  Simulated Annealing [Rapport] / aut. LIACS / Natural Computing Group; Leiden University. -2009.