Điều này tạo cho MI giữa Y và X có nghĩa rằng nếu X và Y là độc lập thì MI sẽ bằng không và lớn hơn không nếu họ là phụ thuộc. Điều này ngụ ý rằng một biến có thể cung cấp thông tin về những khác phụ thuộc do đó chứng minh. Các định nghĩa nêu trên được đưa ra cho các biến rời rạc và cùng có thể được thu được cho các biến liên tục bằng cách thay thế các summations với tích hợp. Các MI cũng có thể được định nghĩa như là một thước đo khoảng cách được cho bởi:
đang được dịch, vui lòng đợi..
