Je réponds en second à slayton.
La matrice de transition est simplement la liste des probabilités qu'un état passe à un autre.
Un modèle de Markov caché suppose que vous ne pouvez pas voir réellement ce que l'état du système est (il est caché). Par exemple, supposons que votre voisin a un chien. Le chien peut avoir faim ou plein, c'est l'état du chien. Vous ne pouvez pas demander au chien s'il a faim, et vous ne pouvez pas regarder dans son estomac, donc l'état vous est caché (puisque vous ne regardez que dehors, chez le chien, brièvement chaque jour où vous ne pouvez pas savoir quand il coule à l'intérieur pour manger et combien il a mangé si c'est le cas). Vous savez, cependant, qu'après avoir mangé et être devenu plein, il aura de nouveau faim après un certain temps (en fonction de combien il a mangé en dernier, mais vous ne le savez pas, donc il pourrait aussi bien être aléatoire) et quand il a faim, il finira par courir à l'intérieur et manger (parfois il sera assis dehors par paresse en dépit d'avoir faim). Compte tenu de ce système, vous ne pouvez pas voir quand le chien a faim et quand il ne l'est pas. Cependant, vous pouvez déduire de si le chien se plaint. Si c'est pleurnicher, c'est probablement faim. Si c'est aboyer joyeusement, c'est probablement plein. Mais ce n'est pas parce qu'il gémit qu'il a faim (peut-être que sa jambe lui fait mal) et que l'aboiement ne veut pas dire plein (peut-être avait-il faim mais était excité par quelque chose). Cependant, habituellement une écorce vient quand elle est pleine, et un gémissement vient quand il a faim. Il peut également ne faire aucun bruit, ne vous disant rien sur son état.
Donc c'est la matrice d'émission. L'état «affamé» est plus susceptible «d'émettre un sifflement», idem pour le plein et aboie. La matrice d'émission indique ce que vous allez observer dans chaque état donné.
Si vous utilisez une matrice d'identité carrée pour votre matrice d'émission, alors chaque état émettra lui-même, et vous obtiendrez un modèle de Markov non caché.
Vous obtenez un upvote pour un exemple d'utilisation supérieur à l'activité standard "balles et urnes". – johnwbyrd