Graphe d'une chaîne de Markov et classification des états

Le graphe d'une chaîne de Markov et la classification des états sont des notions de la théorie des graphes utilisées en calcul des probabilités.

Graphe d'une chaîne de Markov

Graphe d'une chaîne de Markov non irréductible à espace d'états fini, possédant 3 classes : et Les classes et sont finales.

Le graphe d'une chaîne de Markov est le graphe orienté défini à partir de l'espace d'états et de la matrice de transition de cette chaîne de Markov :

  • les sommets de sont les éléments de
  • les arêtes de sont les couples vérifiant

Classification des états

Pour , on dit que l'état est accessible à partir de l'état si et seulement s'il existe un entier tel que On note :

On dit que les états et communiquent si et seulement s'il existe tels que et On note :

La relation communiquer, notée est une relation d'équivalence. Quand on parle de classe en parlant des états d'une chaîne de Markov, c'est généralement aux classes d'équivalence pour la relation qu'on fait référence. Si tous les états communiquent, la chaîne de Markov est dite irréductible.

La relation être accessible, notée s'étend aux classes d'équivalence : pour deux classes et , on a

La relation est une relation d'ordre entre les classes d'équivalence.


Une classe est dite finale si elle ne conduit à aucune autre, i.e. si la classe est minimale pour la relation Sinon, la classe est dite transitoire.

Soit

La période d'un état est le PGCD de l'ensemble Si deux états communiquent, ils ont la même période : on peut donc parler de la période d'une classe d'états. Si la période vaut 1, la classe est dite apériodique.

Classes, modulo différents sous-groupes, du cube vu comme le groupe et classes finales de certaines marches aléatoires sur le cube.

La classification des états se lit de manière simple sur le graphe de la chaîne de Markov.

Marche aléatoire sur un groupe fini :

On se donne un groupe et une mesure de probabilité sur ce groupe, ainsi qu'une suite de variables aléatoires indépendantes de loi On pose

Alors est appelée marche aléatoire de pas sur le groupe Le processus stochastique est un processus de Markov. C'est une chaîne de Markov si est fini ou dénombrable (en ce cas ). Notons le support de  :

et notons le sous-groupe engendré par Alors les classes à droite modulo (de type ) sont aussi les classes pour la relation Ces classes sont toutes finales.

Marches sur le cube :
  • La marche aléatoire sur les arêtes du cube peut être vue comme la marche sur le groupe de pas en effet ajouter un des 3 vecteurs de la base canonique revient à changer une des trois coordonnées du point de départ, i.e. cela revient à emprunter, au hasard, une des 3 arêtes issues du point de départ. En ce cas et la marche est irréductible.
  • Si le pas est et la marche a deux classes finales : les 2 faces horizontales.
  • Si le pas est et la marche a 4 classes finales : les 4 arêtes verticales.
  • Si le pas est et la marche a deux classes finales : les 2 tétraèdres inscrits.
Graphe de 2 marches aléatoires élémentaires, respectivement sur le groupe cyclique et sur le groupe diédral
Marches aléatoires sur l'octogone :
  • La 1re chaîne de Markov de la figure ci-contre est une marche aléatoire sur le groupe cyclique de pas Dans cet exemple,
  • La 2e chaîne de Markov de la figure ci-contre est une marche aléatoire sur le groupe diédral de pas est la symétrie du carré (abcd) par rapport à la diagonale (a,c), où est la symétrie du carré par rapport à son axe horizontal, les deux autres symétries étant et  ; est la rotation d'angle Dans cet exemple,

Les deux chaînes sont donc irréductibles et récurrentes positives, de loi stationnaire uniforme.

Lexique : graphes-chaînes de Markov

  • L'état est accessible à partir de l'état si et seulement si l'une des deux conditions suivantes est remplie :
    • il existe un chemin allant du sommet au sommet dans le graphe
  • Une chaîne de Markov est irréductible si et seulement si son graphe est fortement connexe, i.e. si pour tout couple de sommets du graphe il existe un chemin de à et un chemin de à
  • Une classe d'une chaîne de Markov est une composante fortement connexe de son graphe. Dans la première figure en haut de page (avec les états 1, 2, 3, 4, 5), le graphe non orienté induit par le graphe de la chaîne de Markov a 2 composantes connexes, mais le graphe de la chaîne de Markov (qui est un graphe orienté) a 3 composantes fortement connexes, car 2 ne communique ni avec 1, ni avec 3.

Graphe d'une chaîne de Markov et propriétés probabilistes

Certaines propriétés probabilistes des états d'une chaîne de Markov sont partagées par tous les états d'une même classe. Plus précisément:

  • si une classe n'est pas finale, tous ses états sont transients (ou transitoires),
  • si une classe est à la fois finale et finie, tous ses états sont récurrents positifs.

Les états d'une classe finale peuvent très bien être tous transients (par exemple dans le cas de la marche simple biaisée sur ou bien être tous récurrents nuls (par exemple dans le cas de la marche simple symétrique sur Tout au plus faut-il pour cela que la classe finale en question soit infinie. Il existe également des exemples de classe finale infinie récurrente positive.

Par ailleurs,

  • s'il existe récurrent dans la classe , alors tout état de est récurrent,
  • s'il existe récurrent positif dans la classe , alors tout état de est récurrent positif,
  • s'il existe récurrent nul dans la classe , alors tout état de est récurrent nul,
  • s'il existe transient dans la classe , alors tout état de est transient,
  • s'il existe de période dans la classe , alors tout état de est de période
  • s'il existe apériodique dans la classe , alors tout état de est apériodique.

On dit donc que la classe est transiente, récurrente, apériodique, etc. puisqu'il s'agit en fait de propriétés de la classe tout autant que de propriétés d'un état particulier.


Read other articles:

Cinema of Portugal List of Portuguese films 1930s 1940s 1950s 1960s 1970s 1980s 1990s 2000s 2000 2001 2002 2003 2004 2005 2006 2007 2008 2009 2010s 2010 2011 2012 2013 20142015 2016 2017 2018 2019 2020s 2020 2021 2022 2023 vte This is a list of Portuguese films released in 2022. Films Title Director Cast Notes Ref Dry Ground Burning (Mato seco em chamas) Joana Pimenta, Adirley Queirós Portugal-Brazil coproduction [1] Mistida Falcão Nhaga [2] Pacifiction (Tourment sur les î...

 

La dea Eupalla consegna la stella d'oro al capitano della Juventus Giampiero Boniperti dopo la conquista del decimo campionato nazionale alla fine della stagione 1957-58, stabilendo un nuovo record. Eupalla è il nome, frutto dell'inventiva onomaturgica dello scrittore e giornalista Gianni Brera[1], di una immaginaria divinità che protegge e ispira il gioco del pallone[2]. Questo nome, palesemente ricalcato su quello di Euterpe[3], musa protettrice della musica e dell...

 

يفتقر محتوى هذه المقالة إلى الاستشهاد بمصادر. فضلاً، ساهم في تطوير هذه المقالة من خلال إضافة مصادر موثوق بها. أي معلومات غير موثقة يمكن التشكيك بها وإزالتها. (نوفمبر 2019) الدوري النمساوي 1983–84 تفاصيل الموسم الدوري النمساوي  النسخة 73  البلد النمسا  المنظم اتحاد النمسا ...

Pour un article plus général, voir Sénat (France). Sénat conservateur 25 décembre 1799-14 avril 1814 14 ans, 3 mois et 20 joursÀ gauche : Drapeau de la FranceÀ droite : Médaille du Sénat conservateurCaractéristiquesAutres assemblées Corps législatifTribunatInformations généralesType Chambre du parlement tricaméralConstitutions Constitution de 1799Constitution de 1802Constitution de 1804Lieu Palais du Luxembourg, ParisRégime ConsulatChef de l'État Nap...

 

Cet article est une ébauche concernant le cyclisme et l’Espagne. Vous pouvez partager vos connaissances en l’améliorant (comment ?) selon les recommandations des projets correspondants. Tour d'Espagne 1973GénéralitésCourse 28e Tour d'EspagneCompétition Super Prestige Pernod 1973 (d)Étapes 17 (+ 1 prologue)Date 26 avril - 13 mai 1973Distance 3 061,8 kmPays traversé(s) EspagneLieu de départ CalpLieu d'arrivée Saint-SébastienCoureurs au départ 80Coureurs à l'arri...

 

Form of birth control involving a device placed in the uterus IUD redirects here. For other uses, see IUD (disambiguation). Intrauterine deviceCopper IUD (Paragard T 380A)BackgroundTypeIntrauterineFirst use1800s[1]SynonymsIntrauterine systemFailure rates (first year)Perfect use<1%[2]Typical use<1%[2]UsageUser remindersNoneAdvantages and disadvantagesSTI protectionNoPeriodsDepends on the typeWeightNo effect An intrauterine device (IUD), also known as intrauterine ...

Dutch snack BamischijfCourseSnackPlace of originNetherlandsRegion or stateNorthwestern EuropeCreated byChinese Indonesian cuisineMain ingredientsnoodlesVariationsCroquette A bamischijf Dutch pronunciation: [ˈbaːmisxɛif] is a Dutch snack consisting of a slice (Dutch: schijf) of bami, breaded and deep-fried.[1] It is a Dutch modification of a Chinese-Indonesian noodle dish bakmi goreng.[2] Nasischijf is a similar dish made with nasi goreng. Preparation The filling is ...

 

Defunct national airline of Belgium (1923–2001) For the language, see Moskona language. This article needs additional citations for verification. Please help improve this article by adding citations to reliable sources. Unsourced material may be challenged and removed.Find sources: Sabena – news · newspapers · books · scholar · JSTOR (February 2009) (Learn how and when to remove this message) Sabena IATA ICAO Callsign SN SAB SABENA Founded23 May...

 

Period of European history between AD 1350 and 1500 Europe and the Mediterranean region, c. 1354. From the Apocalypse in a Biblia Pauperum illuminated at Erfurt around the time of the Great Famine. Death sits astride a lion whose long tail ends in a ball of flame (Hell). Famine points to her hungry mouth. The late Middle Ages or late medieval period was the period of European history lasting from AD 1300 to 1500. The late Middle Ages followed the High Middle Ages and preceded the onset of the...

بريانكا شوبرا (بالإنجليزية: Priyanka Chopra)‏[1]    معلومات شخصية الميلاد 18 يوليو 1982 (42 سنة)[2][3]  جمشيدبور  الإقامة نيويورك  مواطنة الهند  الطول 167 سنتيمتر  الزوج نيك جوناس (1 ديسمبر 2018–)  العشير نيك جوناس (مايو 2018–1 ديسمبر 2018)  عدد الأولاد 1   أقربا...

 

This article is part of a series onPetroleum in Canada Early history Story of natural gas Oil sands and heavy oil The frontiers Gas liquids Resources and producers Oil reserves Petroleum companies Categories Oil fields Oil refineries Oil companies Economy of CanadaEnergy policy of Canadavte Although there are numerous oil companies operating in Canada, as of 2009, the majority of production, refining and marketing was done by fewer than 20 of them.[1] According to the 2013 edition of...

 

University in Poland Adam Mickiewicz UniversityUniwersytet im. Adama Mickiewicza w PoznaniuCollegium Minus in PoznańLatin: Universitas Studiorum Mickiewicziana PosnaniensisFormer namesPiast University(1919–1920)University of the Western Lands(1940–1945)University of Poznań(1920–1955)TypePublic universityEstablished7 May 1919; 105 years ago (7 May 1919)[1]RectorBogumiła KaniewskaAcademic staff~2,996 faculty members (Fall 2018)Administrative staff~2,181 (Fall 2018)...

Overview of Capital punishment in Afghanistan This article needs to be updated. Please help update this article to reflect recent events or newly available information. (February 2022) Politics of Afghanistan Constitution Taliban Islamic Movement Loya jirga (Grand assembly) Human rights Human Rights Commission LGBT rights Treatment of women by the Taliban Government Supreme Leader (list) Hibatullah Akhundzada (decrees) Prime Minister Hasan Akhund (acting) Deputy Leader Sirajuddin Haqqani (fir...

 

1935 National Football League season 1935 NFL seasonRegular seasonDurationSeptember 13 – December 15, 1935East ChampionsNew York GiantsWest ChampionsDetroit LionsChampionship Game ChampionsDetroit Lions ← 1934 NFL seasons 1936 → GiantsEaglesDodgersPiratesRedskinsBearsCardinalsPackersLionsclass=notpageimage| NFL teams: West, East The 1935 NFL season was the 16th regular season of the National Football League. The season ended with the Detroit Lions' 26–7 victory over the N...

 

Food hall in Lisbon, Portugal Time Out Market LisboaMercado da Ribeira (Lissabon 2016)LocationLisbon, PortugalCoordinates38°42′25″N 09°08′44″W / 38.70694°N 9.14556°W / 38.70694; -9.14556Opening date2014 Time Out Market Lisboa is a food hall located in the Mercado da Ribeira at Cais do Sodré in Lisbon, Portugal. History Time Out Market Lisboa opened in May 2014,[1][2] and is the first of several planned food hall ventures for Time Out magazi...

القوات الجوية الإماراتية   الدولة  الإمارات العربية المتحدة الإنشاء 1968  النوع سلاح الجو الحجم 368 جزء من القوات المسلحة لدولة الإمارات العربية المتحدة  المقر الرئيسي أبوظبي الاشتباكات التدخل العسكري في اليمن العمليات العسكرية على داعش الشارة الطـائرات هجومية إ�...

 

American baseball player (1884-1962) For other baseball people with similar names, see Robert Williams § Baseball. Baseball player Bob WilliamsCatcherBorn: (1884-04-27)April 27, 1884Monday, OhioDied: August 6, 1962(1962-08-06) (aged 78)Nelsonville, OhioBatted: RightThrew: RightMLB debutJuly 3, 1911, for the New York HighlandersLast MLB appearanceSeptember 30, 1913, for the New York YankeesMLB statisticsBatting average.164Home runs0hits11 Teams New York High...

 

Artikel ini sebatang kara, artinya tidak ada artikel lain yang memiliki pranala balik ke halaman ini.Bantulah menambah pranala ke artikel ini dari artikel yang berhubungan atau coba peralatan pencari pranala.Tag ini diberikan pada Februari 2023. Tanjung Sauh adalah sebuah pelabuhan yang sedang dalam tahap pembangunan di pulau Batam, dalam Segitiga Pertumbuhan Sijori (Singapura-Johor-Riau Kepulauan) dan akan mampu menangani pengiriman melalui Selat Malaka tanpa transit dari Singapura. Proyek i...

HaydarpaşaTCDDTerminus HaydarpaşaLokasiHaydarpaşa Gar sk, Haydarpaşa, İstanbul, TurkiKoordinat40°59′46″N 29°01′07″E / 40.996227°N 29.018636°E / 40.996227; 29.018636PemilikTCDDJumlah peron7Jumlah jalur11LayananİETT Bus, Ferry serviceKonstruksiJenis strukturAt-gradeParkirYesAkses difabelYesInformasi lainStatusDitutup untuk pembaharuanKode stasiun1560SejarahDibuka1872Ditutup19 Juni 2013Dibangun kembali1909, 2013-2016(?)Elektrifikasi1969 (25 kV, 50 Hz AC)...

 

Daiki HashimotoNazionalità Giappone Altezza166 cm Ginnastica artistica SpecialitàSbarra, Corpo libero SocietàUniversità Juntendō CarrieraNazionale 2019- Giappone Palmarès Competizione Ori Argenti Bronzi Giochi olimpici 3 1 0 Mondiali 3 3 1 Vedi maggiori dettagliIl simbolo → indica un trasferimento in prestito. Statistiche aggiornate al 13 novembre 2022 Modifica dati su Wikidata · Manuale Daiki Hashimoto (橋本 大輝 (Hashimoto Daiki?); Chiba, 7 agosto 2001) è un ginn...