Nội dung của định lý mã hoá thứ nhất của Shannon (đối với mã nhị phân) được phát biểu như sau: "Luôn luôn có thể xây dựng được một phép mã hoá các tin rời rạc có hiệu quả mà độ dài trung bình của từ mã có thể nhỏ tuỳ ý, nhưng không nhỏ hơn entropie xác định bởi các đặc tính thống kê của nguồn" . Chọn câu đúng về độ dài từ mã:

Dải tần số của tín hiệu cho phép đi qua kênh truyền mà có độ suy giảm không quá 3 dB

Số bit truyền qua 1 điểm của kênh truyền trên 1 giây

Băng thông của kênh truyền

Tốc độ của kênh truyền

0010111;

1110010;

0101110;

1011100;

0 <= H(A/B)

H(A/B) <= H(A)

H(A/B) <= H(B/A)

H(A) >= H(A/B)

W tức thời

W có tính tách được, không tức thời

W không tách được

W có tính tách được, tức thời

Độ bất định của tin

Ý nghĩa của tin

Năng lượng của tín hiệu mang tin và ý nghĩa của tin

Năng lượng của tín hiệu mang tin

I((xk) = -lg p(xk) đơn vị đo là hart

I(xk) = -ln p(xk) đơn vị đo là nat

I(xk) = -log2 p(xk) đơn vị đo là bít

I(xk) = ln p(xk) đơn vị đo là bít