Задача по Марковским процессам

[JohnConntr]

И так дано условие:
Система S представляет собой техническое устройство, состоящее из m узлов и временя от времени (в моменты t_1, t_2, …, t_k) подвергающееся профилактическому осмотру и ремонту. После каждого шага (момента осмотра и ремонта) система может оказаться в одном из следующих состояний: S_0 – все узлы исправны (ни один не заменялся новым); S_1 – если узел заменен новым, остальные исправны; S_2- два узла заменены новыми, остальные исправны; S_i - I узлов (i<m) заменены новыми, остальные исправны; S_m - все m узлов заменены новыми. Суммарный поток моментов окончания осмотров для всех узлов – пуассоновский с интенсивностью λ=4. Вероятность того, что в момент профилактики узел придётся заменить новым, равна P=0,4.
Рассматривая процесс профилактического осмотра и ремонта (замены) как марковский процесс размножения, вычислите вероятности состояний системы (S) в стационарном режиме (для m=3), если в начальный момент времени все узлы исправны. Постройте граф состояний.

Решить задачу нужно с помощью математического аппарата и средствами прикладных программ (в данном случае MSExcel).
Помогите решить хотя бы с помощью одного из предложенных вариантов.
Все подробности в личку. Заранее спасибо.