Pengertian Entropi

Entropi 

Entropi adalah konsep keacakan, di mana terdapat suatu keadaan yang tidak dapat dipastikan kemungkinannya. Entropi timbul jika prediktabilitas/kemungkinan rendah (low predictable) dan informasi yang ada tinggi (high information). Sebagai contoh ada pada penderita penyakit Aids. Pengidap Aids atau yang lebih sering disebut OHIDA tidak dapat dipastikan usianya atau kapan ia akan dijemput maut. Ada yang sampai delapan tahun, sepuluh tahun, bahkan sampai dua puluh tahun, masih bisa menjalani hidup sebagaimana orang yang sehat. Hal ini dikarenakan ajal atau kematian adalah sebuah sistem organisasi yang kemungkinannya sangat tidak dapat dipastikan.

Dengan kata lain, semakin besar entropi, semakin kecil kemungkinanya (prediktabilitas). 

Informasi adalah sebuah ukuran ketidakpastian, atau entropi, dalam sebuah situasi. Semakin besar ketidakpastian, semakin besar informasi yang tersedia dalam proses komunikasi. Ketika sebuah situasi atau keadaan secara lengkap dapat dipastikan kemungkinannya atau dapat diprediksikan-highly predictable, maka informasi tidak ada sama sekali. Kondisi inilah yang disebut dengan negentropy.