هدف اصلی در این پایان نامه بررسی مسئله تولید آنتروپی در سامانه های دور از تعادل با گذارهای بازگشت ناپذیر می باشد. به این منظور پس از طرح مسئله به بیان روشی برای حل آن می پردازیم. در این روش بر اساس فرایند مارکوف و با استفاده از روش نمونه گیری اینتروال به بررسی این مسئله پرداخته می شود. برای وضوح از مدل یک چرخه سه حالتی استفاده کرده و اختمالات گذار را برای این مدل محاسبه می کنیم.