Le projet smmR est un package R dédié à l'estimation et la simulation de processus semi-Markov discrets. Il permet de définir des chaînes de Markov discrets avec des lois de sojourn paramétriques ou non, et de les estimer à partir de données observées. Les méthodes implementées sont décrites dans plusieurs articles scientifiques.

Le projet PSI3 (Perfect SImulator for Markov chains) est une application permettant de simuler des chaînes de Markov et d'analyser des processus stochastiques. Il permet aux utilisateurs de prédire les comportements probabilistes de systèmes complexes en définissant des états et des transitions entre ces états.

Le projet codadiags est un package R dédié à l'analyse de données statistiques, plus spécifiquement à la simulation de chaînes de Markov. Il permet aux utilisateurs de générer des échantillons représentatifs et d'estimer les paramètres de distributions complexes.

Librjmcmc est une bibliothèque de optimization stochastique basée sur les chaînes de Markov Monte Carlo réversibles saut avec annealing simulé. Il est conçu pour être utilisé dans des applications de modélisation spatiale.

Librjmcmc4s est une bibliothèque Scala pour l'optimisation stochastique basée sur des chaînes de Markov réversibles couplées avec l'annealing simulé. Il s'agit de la version Scala de librjmcmc.

Bibliothèque Java pour l'optimisation stochastique basée sur les chaînes de Markov réversibles couplées avec l'annealing simulé. C'est le portage de librjmcmc en Java.