Chaînes de Markov - Puissances de matrice de transition

Réponses à toutes vos questions après le Bac (Fac, Prépa, etc.)
chuckluffy
Messages: 7
Enregistré le: 13 Oct 2019, 12:59

Chaînes de Markov - Puissances de matrice de transition

par chuckluffy » 13 Oct 2019, 13:23

Bonjour,
j'ai une question sur les chaînes de Markov homogènes.
Je n'arrive pas à me convaincre et comprendre pourquoi les coefficients d'une matrice de transition mise à une certaine puissance correspondent à la probabilité d'atteindre l'état j depuis i en n étapes ( exemple ci-dessous ).


Exemple ici: pourquoi correspond à la proba de passage de l'état i à l'état j en 7 étapes?
Quelqu'un aurait-il une démonstration?

PS: j'ai pas mal de soucis avec le calcul matriciel sous forme de sommes et je pense que cela ne m'aide pas

Merci d'avance et bonne journée.



GaBuZoMeu
Habitué(e)
Messages: 6126
Enregistré le: 05 Mai 2019, 09:07

Re: Chaînes de Markov - Puissances de matrice de transition

par GaBuZoMeu » 13 Oct 2019, 15:18

Il suffit de raisonner par récurrence sur .
L'initialisation est immédiate (qu'on la fasse pour ou pour )
Pour l'hérédité il suffit de voir qu'aller de à en étapes est une disjonction de cas qui s'excluent l'un l'autre : pour chaque état , aller de à en étapes puis aller de à en une étape. On compare alors avec la formule de multiplication

chuckluffy
Messages: 7
Enregistré le: 13 Oct 2019, 12:59

Re: Chaînes de Markov - Puissances de matrice de transition

par chuckluffy » 13 Oct 2019, 16:38

Pour n = 1, par définition de la matrice de transition.,
on en généralisant,

Je ne comprends pas ce que vous voulez dire pour l'hérédité, voilà où j'en suis.
Je nomme E mon espace d'état.

Soit m fixé.
Soit n un entier. On suppose vrai l'assertion suivante:





Cette expression est de la forme:
et je ne sais pas quoi faire de ça
Je ne vois pas en quoi c'est égal à:


Bonne journée.

GaBuZoMeu
Habitué(e)
Messages: 6126
Enregistré le: 05 Mai 2019, 09:07

Re: Chaînes de Markov - Puissances de matrice de transition

par GaBuZoMeu » 13 Oct 2019, 17:10

Hérédité ça ne te dit rien ? Tu ne connais pas la terminologie des démonstrations par récurrence.
Tu es sur la bonne voie, il ne te reste plus qu'à prendre en compte mon indication :
GaBuZoMeu a écrit: il suffit de voir qu'aller de à en étapes est une disjonction de cas qui s'excluent l'un l'autre : pour chaque état , aller de à en étapes puis aller de à en une étape. [/tex]

Essaie d'y réfléchir !

pascal16
Membre Légendaire
Messages: 6663
Enregistré le: 01 Mar 2017, 12:58
Localisation: Angoulème : Ville de la BD et du FFA. gare TGV

Re: Chaînes de Markov - Puissances de matrice de transition

par pascal16 » 13 Oct 2019, 17:25

Quand on appelle i et j les indices des sommets d'un graphe probabiliste.
aller de i à j en 7 étapes à un sens clair.

Xm est un vecteur de probabilité qu'on appelle un état.
si on lui trouve une limite, ça sera l'état stable

mais parler d'état i et dire Xm=i, bien qu'utilisé partout mérite une explication

[PS] : je n'ai pas fait le formalisme des chaînes de Markov, je préfère laisser d'autres expliquer ce qui veut dire Xm=i
Modifié en dernier par pascal16 le 13 Oct 2019, 19:08, modifié 1 fois.

chuckluffy
Messages: 7
Enregistré le: 13 Oct 2019, 12:59

Re: Chaînes de Markov - Puissances de matrice de transition

par chuckluffy » 13 Oct 2019, 18:01

Je connais les terminologies des RPR je me suis mal exprimé désolé ^^ c'est justement l'indication que vous avez réécrite que je ne comprends pas comment utiliser:
"une disjonction de cas qui s'excluent l'un l'autre : pour chaque état , aller de à en étapes puis aller de à en une étape."

Je vois bien que quelque part, si les deux chemins du produit sont possibles pour k donné alors la proba est non nulle,:
aussi,si:
soit il n'existe pas de chemin en N étapes menant de i à k
soit il n'existe pas de chemin de k à j en 1 étape
alors la proba est nulle.

Mais je n'arrive pas à faire le lien avec la formule que je veux montrer

GaBuZoMeu
Habitué(e)
Messages: 6126
Enregistré le: 05 Mai 2019, 09:07

Re: Chaînes de Markov - Puissances de matrice de transition

par GaBuZoMeu » 13 Oct 2019, 20:23

Je suis un peu étonné que tu ne voies pas le rapport entre "aller de l'état à l'état en étapes" et

chuckluffy
Messages: 7
Enregistré le: 13 Oct 2019, 12:59

Re: Chaînes de Markov - Puissances de matrice de transition

par chuckluffy » 14 Oct 2019, 08:37

Ce n'est pas exactement ça, mon problème initial concernait les coefs des matrices de transition . Ici, ce que je veux montrer c'est .
Avec la somme telle que je l'ai écrite, je ne vois pas le lien entre ma somme et la fin de la démonstration pour arriver à la formule ci-dessus. Je ne vois pas en quoi votre indication m'aide à conclure.
J'espère que je suis plus clair :)

GaBuZoMeu
Habitué(e)
Messages: 6126
Enregistré le: 05 Mai 2019, 09:07

Re: Chaînes de Markov - Puissances de matrice de transition

par GaBuZoMeu » 14 Oct 2019, 09:57

C'est pourtant exactement ça. Bon, puisque tu refuses obstinément de comprendre mes indications, je ne vois pas d'autre moyen que de faire moi-même la démonstration.
On a une chaîne de Markov avec un ensemble d'état fini, dont la matrice de transition est .
Pour tout entier naturel , est la variable aléatoire dont la valeur est l'état après étapes. On a, pour tout ,
.
On veut montrer que pour tout entier naturel ,
.
On fait une démonstration par récurrence sur .
Initialisation : pour , c'est la définition de matrice de transition.
Hérédité : on suppose pour un entier et on veut le montrer pour .
Les événements pour forment un système complet d'événements. Donc
.
D'accord ? (C'est ce que j'essayais de te faire comprendre, sans succès, avec "aller de à en étapes est une disjonction de cas qui s'excluent l'un l'autre : pour chaque état , aller de à en étapes puis aller de à en une étape".)
En utilisant l'hypothèse de récurrence, on en déduit
,
la dernière égalité venant de la définition du produit de matrices. Ceci termine la démonstration de par récurrence.

chuckluffy
Messages: 7
Enregistré le: 13 Oct 2019, 12:59

Re: Chaînes de Markov - Puissances de matrice de transition

par chuckluffy » 14 Oct 2019, 15:34

Merci beaucoup je n'avais pas vu/compris la façon de procéder

 

Retourner vers ✯✎ Supérieur

Qui est en ligne

Utilisateurs parcourant ce forum : Aucun utilisateur enregistré et 63 invités

Tu pars déja ?



Fais toi aider gratuitement sur Maths-forum !

Créé un compte en 1 minute et pose ta question dans le forum ;-)
Inscription gratuite

Identification

Pas encore inscrit ?

Ou identifiez-vous :

Inscription gratuite