Entropy Shannon

Đo lường sự không chắc chắn trong phân phối xác suất rời rạc.

Giá trị đầu vào

Entropy

—

Sử dụng đơn vị nhất quán. Kết quả tuân theo các giả định bạn nhập.

Công thức

Sử dụng H = −Σpᵢlog₂(pᵢ). pᵢ là các phân số xác suất có tổng bằng một. Các số hạng có xác suất bằng không đóng góp bằng không. Cơ số logarit làm cho entropy H được đo bằng bit.

Đo lường sự không chắc chắn trong phân phối xác suất rời rạc.

Ví dụ minh họa

Tổng xác suất bằng 1: 0.5, 0.5

Entropy: 1 bit
Kết quả có khả năng xảy ra như nhau: 2

Phạm vi và giới hạn

Sử dụng đơn vị nhất quán. Kết quả tuân theo các giả định bạn nhập.

Các giá trị đầu vào được kiểm tra xem có bị thiếu hay không và phạm vi cho phép. Kết quả nằm ngoài phạm vi số hữu hạn sẽ không được hiển thị. Làm tròn ảnh hưởng đến hiển thị, trong khi phép tính sử dụng độ chính xác số của mô hình.

Kiểm tra đơn vị và giả định của bạn trước khi dựa vào kết quả. Thay đổi nhãn không chuyển đổi đơn vị tiền tệ hoặc đơn vị vật lý.

Phiên bản công thức: 54c4ae799ba2 · Ví dụ đã được kiểm tra: 2026-10-30

Phương pháp