Kỹ thuật ‘weight initialization’ (khởi tạo trọng số) trong mạng nơ-ron là quan trọng vì:

Nó đảm bảo mô hình luôn hội tụ nhanh chóng

Khởi tạo sai có thể dẫn đến vấn đề ‘vanishing gradient’ hoặc ‘exploding gradient’

Nó loại bỏ nhu cầu về ‘regularization’

Nó tự động chọn kiến trúc mạng nơ-ron phù hợp