求助，一道马尔克夫链问题

菡萏

<>某人有3把伞并在办公室和家之间往返，如某天他在家时（办公室时）下雨了而且家中（办公室）有伞他就带一把去上班（回家），不下雨时他从不带伞，如果每天与以往独立地早上（晚上）下雨的概率为P。试定义一4状态的马尔克夫链以研究被雨淋湿的机会</P>
<>谁能帮帮我啊，谢谢了</P>

菡萏

<>（还有一道）机器的平均故障为4台每小时，故障后的损失为16元每台每小时，现在有2名修理工，甲的平均修理速度为6台每小时，工资为6元每小时，乙的平均修理速度为8台每小时，工资为10元每小时，从费用最省角度考虑应雇用哪位工人，分析同时雇用这2名工人的情况</P><>如果有高手看见，请一定帮忙啊，数模太难了，伤心</P>