آنتروپی و کاربردهای آن

اصطلاح آنتروپی اولین بار در مباحث ترمودینامیک توسط کلاوسیوس به کار گرفته شد. بعدها بولتسمان رابطه آن را با احتمال ترمودینامیکی پیدا کرد و شانون نیز نظریه اطلاع مدرن را بر اساس این مفهوم بنا نهاد. ما بحث خود را با تعاریف مقدماتی در فصل اول و دوم شروع و کاربردهای آنتروپی را در سه فصل بعدی بررسی کرده ایم. در فصل سوم مهمترین کاربرد آنتروپی را که روش آنتروپی ماکسیمم بوده و به وسیله جینس بررسی شده است، بیان نموده ایم. هدف این روش تعیین پارامترهای مجهول از داده های ناکافی است. در فصل چهارم (نظریه کدگذاری) با معلوم بودن آنتروپی منبع، متغیرهای تصادفی مختلفی را برای کمینه کردن مقادیر مورد انتظارشان ساخته ایم. در این بحث کدهای فانو، شانون و هافمن را با ذکر مثال توضیح داده ایم.در فصل پنجم با معرفی اندازه وابستگی تصادفی، در مساله شناخت الگو از آن کمک گرفته ایم. با جمع آوری داده های مربوط به شاخصهای توسعه کشاورزی و کمینه کردن اندازه وابستگی، متغیرهای تاثیرگذار را انتخاب کرده ایم. در فصل آخر آنتروپی ترمودینامیکی را با بیان مقدماتی از علم ترمودینامیک و قوانین آن بررسی کرده ایم.