100+ câu trắc nghiệm Lý thuyết thông tin có đáp án - Phần 3

Méo trễ lan truyền

Nhiễu

Sự suy giảm cường độ

Tất cả các yếu tố trên

Là tính chất xác định của vật chất mà con người nhận được từ thế giới bên ngoài

Là đại lượng vật lý biến thiên phản ánh tin

Là tác động không mong muốn lên hệ thông truyền tin

Tin luôn được biểu diễn dưới dạng số

Rời rạc hóa theo trục thời gian và lượng tử hóa theo trục biên độ

Giải mã dữ liệu

Mã hóa dữ liệu

Lượng tử hóa theo trục thời gian và rời rạc hóa theo trục biên độ

Đặc trưng cho các quá trình ngẫu nhiên chính là các quy luật thống kê và các đặc trưng thống kê

Kỳ vọng, phương sai, hàm tự tương quan, hàm tương quan là các quy luật thống kê

Các hàm phân bố và mật độ phân bố là những đặc trưng thống kê

Tín hiệu và nhiễu không phải là quá trình ngẫu nhiên theo quan điểm thống kê

Năng lượng của tín hiệu mang tin

Độ bất định của tin

Ý nghĩa của tin

Năng lượng của tín hiệu mang tin và ý nghĩa của tin

Là đại lượng đặc trưng cho độ bất định trung bình của nguồn tin

Đạt cực tiểu khi nguồn là đẳng xác suất

Đạt cực đại khi nguồn là đẳng xác suất

Tất cả các phương án trên đều sai

Độ bất định sẽ trở thành thông tin khi nó bị thủ tiêu

Độ bất định chính là thông tin

Lượng thông tin = Độ bất định tiên nghiệm + Độ bất định hậu nghiệm

Lượng thông tin = Độ bất định tiên nghiệm – Độ bất định hậu nghiệm

Lượng thông tin = Thông tin tiên nghiệm – Thông tin hậu nghiệm

Thông tin hậu nghiệm chính là thông tin riêng

Lượng thông tin = Thông tin hậu nghiệm – Thông tin tiên nghiệm

Lượng thông tin = Thông tin tiên nghiệm + Thông tin hậu nghiệm

Bằng 0

Vô cùng lớn

Nhỏ hơn 0

Lớn hơn 0

Độ bất định của phép chọn tỷ lệ nghịch với xác suất chọn một phần tử

Độ bất định gắn liền với bản chất ngẫu nhiên của phép chọn

Độ bất định của một phần tử có giá trị 1 bít khi xác suất chọn phần tử đó là 1

Độ bất định còn được gọi là lượng thông tin riêng của biến cố tin

Lượng tin còn lại của xk sau khi nhận được yl ký hiệu I(xk/yl) I(xk/yl) là lượng tin riêng của xk và yl

Lượng tin I(xk) là lượng tin ban đầu của xk

Lượng tin I(xk) là lượng tin ban đầu của xk, lượng tin còn lại của xk sau khi đã nhận được yl ký hiệu là I(xk/y1)

4 bít

1 bít

1/4 bít

2 bít

Độ bất ngờ của tin xi trong nguồn tin XN được tính bằng Entropy của lớp tin xi trong nguồn tin XN

Độ bất định của tin và lượng tin về ý nghĩa trái ngược nhau nhưng về giá trị lại bằng nhau

Độ bất định của tin và lượng tin có ý nghĩa như nhau nhưng giá trị khác nhau

Lượng tin trung bình được hiểu là lượng tin trung bình trong một tin bất kỳ của nguồn tin đã cho

I(xk) = ln p(xk) đơn vị đo là bít

I((xk) = -lg p(xk) đơn vị đo là hart

I(xk) = -ln p(xk) đơn vị đo là nat

I(xk) = -log2 p(xk) đơn vị đo là bít

Chọn k=1 ta có I(xk) = ln p(xk)

Chọn k=-1 ta có I(xk) = -ln p(xk)

Chọn k=-(1/ln10) ta có I(xk) = -lg p(xk)

Chọn k=-(1/ln2) ta có I(xk) = -log2 p(xk)

H(A/B) <= H(B/A)

0 <= H(A/B)

H(A) >= H(A/B)

H(A/B) <= H(A)